WO2019065733A1 - 音声命令システム及び音声命令方法 - Google Patents

音声命令システム及び音声命令方法 Download PDF

Info

Publication number
WO2019065733A1
WO2019065733A1 PCT/JP2018/035687 JP2018035687W WO2019065733A1 WO 2019065733 A1 WO2019065733 A1 WO 2019065733A1 JP 2018035687 W JP2018035687 W JP 2018035687W WO 2019065733 A1 WO2019065733 A1 WO 2019065733A1
Authority
WO
WIPO (PCT)
Prior art keywords
voice command
control unit
facility
information
gateway device
Prior art date
Application number
PCT/JP2018/035687
Other languages
English (en)
French (fr)
Inventor
愉美子 山本
Original Assignee
京セラ株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 京セラ株式会社 filed Critical 京セラ株式会社
Priority to US16/651,349 priority Critical patent/US11521609B2/en
Priority to CN201880062699.0A priority patent/CN111149152A/zh
Priority to JP2019545567A priority patent/JP6972149B2/ja
Priority to EP18862830.9A priority patent/EP3690878A4/en
Priority to CN202410180704.5A priority patent/CN117935804A/zh
Publication of WO2019065733A1 publication Critical patent/WO2019065733A1/ja
Priority to US18/074,513 priority patent/US12002467B2/en

Links

Images

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43—Querying
    • G06F16/432—Query formulation
    • G06F16/433—Query formulation using audio data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/50—Maintenance of biometric data or enrolment thereof
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/06—Creation of reference templates; Training of speech recognition systems, e.g. adaptation to the characteristics of the speaker's voice
    • G10L15/065—Adaptation
    • G10L15/07—Adaptation to the speaker
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L17/00—Speaker identification or verification techniques
    • G10L17/22—Interactive procedures; Man-machine interfaces
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L17/00—Speaker identification or verification techniques
    • G10L17/04—Training, enrolment or model building
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223—Execution procedure of a spoken command
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/226—Procedures used during a speech recognition process, e.g. man-machine dialogue using non-speech characteristics
    • G10L2015/227—Procedures used during a speech recognition process, e.g. man-machine dialogue using non-speech characteristics of the speaker; Human-factor methodology

Definitions

  • the present invention relates to a voice command system and a voice command method.
  • a navigation system has been proposed that displays various guidance information on a portable terminal in maintenance of the device (for example, Patent Document 1).
  • the voice command system comprises a gateway device having an interface for receiving voice commands.
  • the voice command system includes a control unit that performs a registration process for registering a speaker permitted to receive the voice command.
  • the control unit rejects acceptance of the voice command when the speaker of the voice command is not registered, and permits reception of the voice command when the speaker of the voice command is registered.
  • Perform authentication process The control unit performs the authentication process for each of the voice commands.
  • the voice command method includes a step A for receiving a voice command, a step B for performing registration processing for registering a speaker permitted to receive the voice command, and a speaker for the voice command And a step C of performing an authentication process of permitting acceptance of the voice command when the voice command is not accepted and the speaker of the voice command is registered.
  • the step C is performed for each of the voice commands.
  • FIG. 1 is a diagram showing a voice command system 100 according to an embodiment.
  • FIG. 2 is a diagram showing a facility management apparatus 200 according to the embodiment.
  • FIG. 3 is a diagram showing an example of information stored in the first DB 211 according to the embodiment.
  • FIG. 4 is a diagram showing an example of information stored in the second DB 212 according to the embodiment.
  • FIG. 5 is a diagram showing an example of information stored in the third DB 213 according to the embodiment.
  • FIG. 6 is a diagram showing the gateway device 330 according to the embodiment.
  • FIG. 7 is a diagram showing a voice instruction method according to the embodiment.
  • FIG. 8 is a diagram showing a voice instruction method according to the embodiment.
  • FIG. 9 is a diagram showing a voice instruction method according to the embodiment.
  • a gateway apparatus provided with a user interface such as a voice input interface has attracted attention. It is conceivable to improve the convenience of the user by supporting the installation, inspection, use and the like of the facility by using such a gateway device. However, since the gateway device receives voice commands of a plurality of speakers present near the gateway device, there is a possibility that the gateway device can not appropriately support the installation, inspection, use and the like of the facility.
  • the present disclosure provides a voice command system and a voice command method that can appropriately support installation, inspection, use, and the like of a facility.
  • the voice command system 100 includes a facility management apparatus 200, a facility 300, a vendor terminal 400, and an external server 500.
  • facilities 300A to 300C are illustrated as the facility 300.
  • the facility management apparatus 200, the facility 300, the vendor terminal 400 and the external server 500 are connected to the network 120.
  • the network 120 may provide a line between the facility management apparatus 200 and the facility 300, a line between the facility management apparatus 200 and the vendor terminal 400, and a line between the facility 300 and the external server 500.
  • the network 120 is the Internet.
  • Network 120 may provide a dedicated line such as a VPN.
  • the facility management apparatus 200 manages the facilities provided in the facility 300. Details of the facility management device 200 will be described later (see FIG. 2).
  • the facility 300 includes a facility 310, an EMS 320, and a gateway device 330.
  • the facility 310 is connected to the power system 110.
  • the facility 310 may be a power generation facility that generates power.
  • the power generation facility may be a facility that generates electricity using natural energy such as solar light, wind power or geothermal heat.
  • the power generation facility may be a fuel cell device.
  • the equipment 310 may be a storage battery device.
  • the facility 310 may be a load facility that consumes power.
  • the load equipment may be an air conditioning equipment or a lighting equipment.
  • the facility 300 may have two or more types of facilities 310.
  • the EMS 320 is an apparatus (EMS; Energy Management System) that manages power information indicating power in the facility 300.
  • the power in the facility 300 is the power flowing in the facility 300, the power purchased by the facility 300, or the power sold from the facility 300.
  • the gateway device 330 has an interface for receiving a voice command for operating the facility 310.
  • the interface includes a voice input interface.
  • the interface may include an audio output interface.
  • the interface may include a button input interface.
  • the interface may include a touch panel input interface.
  • the interface may include a gesture input interface.
  • the gesture is, for example, an operation such as waving a hand toward a camera included in the interface.
  • the interface may include an image output interface.
  • the gateway device 330 has an AI (Artificial Intelligence) function, and the AI function has a function of analyzing a voice command, and performs various operations based on the analysis result of the voice command.
  • AI Artificial Intelligence
  • the various operations may include an operation of acquiring information from a server connected via the network 120, and an operation of outputting information acquired from a server connected via the network 120.
  • the server may be the facility management apparatus 200 or an external server 500.
  • the various operations may include an operation of transmitting a control command based on a voice command, and may include an operation of receiving a response command to the control command.
  • the gateway device 330 may transmit a control command to the facility 310 via the EMS 320, and may transmit a control command to the facility 310 without via the EMS 320.
  • the gateway device 330 may be referred to as a smart speaker or an AI.
  • the gateway device 330 may transmit the information collected by the gateway device 330 to the external server 500.
  • the information collected by the gateway device 330 may be an analysis result of a voice command or may be information acquired from the facility management device 200.
  • the vendor terminal 400 may be a terminal belonging to a vendor who performs maintenance of the facility 310.
  • maintenance includes inspections to investigate equipment deterioration, maintenance to perform minor maintenance at the time of inspection, repair to repair equipment failures to restore equipment functions and performance to their original condition, and new equipment Includes replacement of equipment and so on.
  • the voice command system 100 may have a power management server.
  • the power management server is provided in a power flow control message requesting control of the amount of power flow from power system 110 to facility 300, a reverse power flow control message requesting control of reverse power flow amount from facility 300 to power system 110, facility 300 A power control message or the like requesting control of the facility 310 (distributed power source) is transmitted to the facility 300.
  • the external server 500 may be a server that provides a search engine for searching for necessary information based on the analysis result of the voice command.
  • the external server 500 may be a server operated by an entity providing the gateway device 330.
  • the external server 500 may manage the information collected by the gateway device 330 as big data, and utilize the managed big data as information for improving the convenience of the user.
  • the facility management apparatus 200 includes a management unit 210, a communication unit 220, and a control unit 230.
  • the management unit 210 is configured by a non-volatile memory and / or a storage medium such as an HDD, and manages information related to a plurality of facilities 300.
  • the management unit 210 includes a first DB (Database) 211, a second DB (Database) 212, and a third DB (Database) 213.
  • the first DB 211 is an example of a first database that stores first information to which the gateway device 330 is permitted to access.
  • the first information includes guidance information on how to handle the equipment.
  • the guidance information includes at least one of an equipment name, installation information, inspection information, and usage information.
  • the equipment name is the name of the equipment 310.
  • the facility name may be information uniquely identifying the facility 310 (eg, product model number, manufacturer code, etc.), or even information indicating the type of facility 310 (eg, solar cell apparatus, air conditioning facility, etc.) Good.
  • the installation information is information required in connection with the installation of the facility 310 in the facility 300.
  • the installation information is information indicating the installation procedure of the facility 310, and is information such as “Please connect a cable to the ⁇ terminal” and “Please turn on the power”.
  • the installation information may be used by the installer of the facility 310.
  • the inspection information is information required for the inspection of the facility 310.
  • the inspection information is information indicating an inspection procedure of the facility 310, and is information such as “Is xx cable connected to ⁇ terminal?”, “Is power lamp lit?”.
  • the inspection information may be used by an inspector of the facility 310.
  • the inspection of the equipment 310 may be an inspection performed after the installation of the equipment 310, or may be an inspection performed in maintenance of the equipment 310.
  • the use information is information required in connection with the use of the facility 310.
  • the usage information is information indicating the usage procedure of the facility 310, and is information such as "Please turn on the power" or "Please press the ⁇ button".
  • the use information may be information indicating a function of the facility 310, or may be information indicating troubleshooting of the facility 310.
  • the usage information may be information used by the user of the facility 310.
  • the first DB 211 may store index information that associates guidance information, equipment information, and user information.
  • the index information is configured by an arbitrary combination of letters and numbers, and may not have a meaning in itself.
  • the second DB 212 is an example of a second database that stores second information in which the access of the gateway device 330 is prohibited.
  • the second information includes facility information on the facility 310.
  • the facility information is information collected by the EMS 320 that controls the facility 310.
  • the installation information includes at least one of an installation name, sensing data, an error code, statistical data, reference data, and an operation history.
  • the equipment name is the name of the equipment 310.
  • the facility name may be information uniquely identifying the facility 310 (for example, a maker code), or information indicating the type of the facility 310 (for example, a solar cell apparatus, an air conditioning facility, etc.).
  • the sensing data is data including numerical data representing the operating state of the facility 310.
  • the sensing data is measured by a sensor provided in the facility 300.
  • the sensing data may be measured by a sensor provided in the facility 310, or may be measured by a sensor provided in the EMS 320.
  • the sensing data is transmitted from the EMS 320 to the facility management apparatus 200.
  • the sensing data may be output power data of the facility 310, power consumption data of the facility 310, temperature data of the facility 310, environmental temperature data of the facility 310, environmental humidity data of the facility 310, or the like.
  • the error code is a code that identifies an error of the facility 310.
  • the errors may be detected by the facility 310 or may be detected by the EMS 320.
  • the error code is transmitted from the EMS 320 to the facility management apparatus 200.
  • the error code is a code indicating an abnormality in the temperature of the facility 310, a code indicating an abnormality in a component provided in the facility 310, a code indicating an abnormality in output power of the facility 310, a code indicating an abnormality in power consumption of the facility 310, etc. It may be
  • Statistical data is data obtained by statistical processing of numerical data.
  • the statistical data may be generated by the facility management device 200.
  • statistical data may be generated by the facility 310 and may be generated by the EMS 320.
  • statistical data may be numerical data grouped or sorted for a specific purpose.
  • the statistical data is data indicating the transition (profile) of output power of the facility 310 in a predetermined period (one day, one week, one month, etc.), or even data indicating transition of power consumption of the facility 310 in a predetermined period. Good.
  • Reference data is data including a threshold to be compared with numerical data.
  • the reference data is a value set by the maker of the facility 310 or the like.
  • the threshold is a value used to determine an error of the facility 310.
  • the operation history is a history regarding the operation of the facility 310. It may be the transition of the operation mode in a predetermined period (one day, one week, one month, etc.), or may be the number of times the predetermined operation mode has been executed, or the number of times the operation of the facility 310 has been stopped It is also good.
  • the operation history may be the number of times the fuel cell device is normally stopped or may be the number of emergency stops of the fuel cell device.
  • the operation history may be the number of times the storage battery device has been charged, may be the charging time of the storage battery device, or may be the number of times the storage battery device has been discharged. Or the number of charge / discharge cycles of the storage battery device.
  • the second DB 212 may store index information that associates guidance information, equipment information, and user information.
  • the index information is configured by an arbitrary combination of letters and numbers, and may not have a meaning in itself.
  • the third DB 213 stores user information on the user.
  • the user may be a corporation or a natural person (individual).
  • the user information includes at least one of the user's name or name, the user's address, and the user's contact information (e-mail address and telephone number).
  • User information is information to be protected.
  • the user information may include at least one of vendor information and maintenance information.
  • the vendor information is information on a vendor that performs transactions with the user.
  • the vendor may be a vendor performing maintenance.
  • the vendor may be a maker of the facility 310.
  • the trader may be a business operator such as a power producer, a transmission and distribution carrier, a retailer, or a resource aggregator.
  • the maintenance information is information on maintenance of the facility 310.
  • the maintenance information may be a history of maintenance or may be a schedule of maintenance.
  • the maintenance information may be accumulated by the maintenance information transmitted from the vendor terminal 400 or may be accumulated by the maintenance information input by the operator.
  • the maintenance information may include the execution date of the maintenance, the scheduled date of the maintenance, and the content of the maintenance.
  • the maintenance includes an inspection for investigating the deterioration state of the equipment, a maintenance for performing minor maintenance at the time of the inspection, a repair for repairing the failure of the equipment to restore the function and performance of the equipment to the initial condition. Includes replacement of equipment with new equipment.
  • the third DB 213 may store index information that associates guidance information, equipment information, and user information.
  • the index information is configured by an arbitrary combination of letters and numbers, and may not have a meaning in itself.
  • the communication unit 220 is configured by a communication module, and communicates with the facility 300 and the trader terminal 400 via the network 120.
  • the communication unit 220 receives equipment information such as sensing data and an error code from the EMS 320.
  • the communication unit 220 receives maintenance information from the trader terminal 400.
  • the communication unit 220 receives the analysis result of the voice command from the gateway device 330.
  • the control unit 230 is configured by a memory, a CPU, and the like, and controls each component provided in the facility management apparatus 200. In the embodiment, the control unit 230 performs the control described below.
  • the control unit 230 collects facility information from the EMS 320 that controls the facility 310.
  • the control unit 230 may voluntarily collect facility information transmitted from the EMS 320, and may collect facility information transmitted from the EMS 320 in response to a request for the EMS 320.
  • the facility information is stored in the second DB 212.
  • the control unit 230 permits the access of the EMS 320 to the second DB 212.
  • the control unit 230 prohibits the access of the EMS 320 to the third DB 213. That is, the control unit 230 is configured to prohibit access to the third DB 213 even if the EMS 320 permits access to the second DB 212.
  • control unit 230 may allow the vendor terminal 400 to access the second DB 212.
  • control unit 230 may prohibit the access of the vendor terminal 400 to the third DB 213. That is, the control unit 230 may be configured to prohibit access to the third DB 213 even if the vendor terminal 400 permits access to the second DB 212.
  • the control unit 230 may provide equipment information to a third party. In such a case, the control unit 230 at least deletes the index information. According to such a configuration, the possibility of leakage of user information to a third party can be reduced.
  • the third party may be, but is not limited to, a business such as a power producer, a power transmission and distribution carrier, a retailer, or a resource aggregator.
  • the control unit 230 permits the access of the gateway device 330 to the first DB 211.
  • the control unit 230 prohibits the access of the gateway device 330 to the second DB 212. That is, the control unit 230 is configured to prohibit the access to the second DB 212 even if the gateway device 330 permits the access to the first DB 211.
  • the control unit 230 may permit the access of the gateway device 330 to the third DB 213, and may prohibit the access of the gateway device 330 to the third DB 213.
  • the control unit 230 may allow the access of the gateway device 330 to the third DB 213 when the user permitted to access the third DB 213 inputs an operation command to the gateway device 330.
  • the user who inputs the voice command to the gateway device 330 is a user of the facility 310. That is, it is conceivable that the user who inputs the voice command to the gateway device 330 has the authority to access the second information (equipment information) stored in the second DB 212. For example, the user is authorized to access the second information via the EMS 320.
  • the second information equipment information
  • control unit 230 prohibits the access of the gateway device 330 to the second DB 212 even if the access is based on a voice command derived from a user who is authorized to access the second information. That is, while permitting the access of the EMS 320 to the second DB 212, the control unit 230 prohibits the access of the gateway device 330 to the second DB 212.
  • the gateway device 330 includes an interface 331, a communication unit 332, and a control unit 333.
  • the interface 331 includes a voice input interface that receives voice commands.
  • the interface 331 may include an audio output interface.
  • the communication unit 332 is configured by a communication module, and communicates with the facility management apparatus 200 and the external server 500 via the network 120. For example, the communication unit 332 receives the guidance information from the facility management apparatus 200. The communication unit 332 transmits the information collected by the gateway device 330 to the external server 500.
  • the control unit 333 is configured of a memory, a CPU, and the like, and controls each component provided in the gateway device 330. In the embodiment, the control unit 333 performs the control described below.
  • the control unit 333 performs registration processing for registering a speaker permitted to receive a voice command.
  • the control unit 333 registers the speaker in a storage medium such as a memory.
  • the control unit 333 may register a main language, a dialect, and the like emitted by the utterer in association with the utterer to be registered.
  • the control unit 333 refuses to accept the voice command when the voice command speaker is not registered, and performs an authentication process that permits the voice command acceptance when the voice command speaker is registered. .
  • the control unit 333 performs an authentication process for each voice command.
  • the control unit 333 performs an authentication process based on the voiceprint determination of the speaker.
  • the voiceprint determination is a process of determining whether the input voice matches the registered voice.
  • the control unit 333 accesses the external database based on the voice command, and acquires information (the above-described guidance information) corresponding to the voice command from the external database.
  • the external database is the first DB 211 described above.
  • the control unit 333 performs registration processing and authentication processing during the installation work period of the facility 310.
  • the speaker registered in the registration process is an installer.
  • the control unit 333 may cancel the registration of the speaker by the registration process performed in the installation work period with the expiration of the installation work period. That is, during the installation work period, the control unit 333 may receive the voice of the installer.
  • voice input requesting the next work item of the installation procedure and voice output of one work item of the installation procedure based on the installation information are repeated.
  • audio output of a work item with a relatively high degree of importance is performed during the installation work period
  • audio output is performed at a volume higher than that of the audio output of a work item with a relatively low degree of importance
  • multiple voice outputs may be performed.
  • the voice input requesting the next work item may be voice input indicating that the previous work item has been completed. As described above, in the installation work period, the work item is checked by voice input and voice output.
  • the control unit 333 performs registration processing and authentication processing in the inspection period of the facility 310.
  • the speaker registered in the registration process is an inspector.
  • the control unit 333 may cancel the registration of the speaker by the registration process performed in the examination period upon expiration of the examination period. That is, during the inspection period, the control unit 333 may receive the voice of the inspection vendor.
  • voice input requesting the next examination item of the examination procedure and voice output of one examination item of the examination procedure based on examination information are repeated.
  • the voice input requesting the next examination item may be a voice input of an answer (for example, YES or NO) to the previous examination item.
  • the examination item is checked by voice input and voice output.
  • the control unit 333 performs signature processing based on the voice input of the utterer during the inspection period in such an inspection period.
  • the signature process is performed after the answer to the last inspection item is input by voice. In other words, the control unit 333 expires the inspection period by the signature process.
  • control unit 333 performs the registration process and the authentication process during the use period of the facility 310.
  • the speaker registered in the registration process is the user of the facility 310.
  • the control unit 333 may cancel the registration of the speaker by the registration process performed in the examination period when the fixed period has elapsed since the registration process was performed.
  • voice input requesting an operation item of the use procedure and voice output of the operation item based on the use information are performed.
  • the control unit 333 may omit the authentication process for a certain period of time or a certain number of times when a voice command is received in the authentication process during such a use period. That is, when a voice command of a registered speaker is received, the control unit 333 may receive a voice command of a speaker who has not been registered for a certain period of time or a certain number of times.
  • step S11 a registration voice is input to the gateway device 330.
  • step S12 the gateway device 330 performs registration processing for registering a speaker permitted to receive the voice command.
  • step S13A a voice command requesting the next work item of the installation procedure is input to the gateway device 330.
  • step S14A the gateway device 330 performs an authentication process to determine whether the speaker of the voice command is registered. Here, the description will be continued assuming that the speaker of the voice command is registered.
  • step S15A the gateway device 330 accesses the first DB 211.
  • step S16A the gateway device 330 receives the installation information from the first DB 211.
  • the gateway device 330 outputs the work item based on the installation information by voice.
  • step S17A a voice to the effect that the work item has been completed is input to the gateway device 330.
  • steps S13X to S17X such processing is repeated until installation of the facility 310 is completed.
  • the voice input requesting the next work item may be a voice input indicating that the previous work item has been completed. That is, the voice input in step S17A may be combined with the voice input in step S13X.
  • step S18 a voice command to the effect that installation of the facility 310 is completed is input to the gateway device 330.
  • the gateway device 330 performs an authentication process to determine whether the speaker of the voice command is registered. Here, the description will be continued assuming that the speaker of the voice command is registered.
  • step S20 the gateway device 330 cancels the registration of the speaker performed in step S12.
  • step S31 the registration voice is input to the gateway device 330.
  • step S32 the gateway device 330 performs registration processing for registering a speaker permitted to receive the voice command.
  • step S33A a voice command requesting the next inspection item of the inspection procedure is input to the gateway device 330.
  • step S34A the gateway device 330 performs an authentication process to determine whether the speaker of the voice command is registered. Here, the description will be continued assuming that the speaker of the voice command is registered.
  • step S35A the gateway device 330 accesses the first DB 211.
  • step S36A the gateway device 330 receives the examination information from the first DB 211.
  • the gateway device 330 outputs the inspection item based on the inspection information by voice.
  • step S37A the voice of the answer to the inspection item is input to the gateway device 330.
  • the voice input requesting the next examination item may be a voice input of the answer to the previous examination item. That is, the voice input in step S17A may be combined with the voice input in step S13X.
  • step S 38 a voice command to the effect that the inspection of the facility 310 is completed is input to the gateway device 330.
  • the gateway device 330 performs an authentication process to determine whether the speaker of the voice command is registered. Here, the description will be continued assuming that the speaker of the voice command is registered.
  • step S40 the gateway device 330 performs signature processing based on the voice input of the speaker.
  • step S41 the gateway device 330 cancels the registration of the utterer performed in step S32.
  • step S51 the registration voice is input to the gateway device 330.
  • step S52 the gateway device 330 performs registration processing for registering a speaker permitted to receive the voice command.
  • step S53 a voice command requesting an operation item of the use procedure is input to the gateway device 330.
  • step S54 the gateway device 330 performs an authentication process to determine whether the speaker of the voice command is registered. Here, the description will be continued assuming that the speaker of the voice command is registered.
  • step S55 the gateway device 330 accesses the first DB 211.
  • step S56 the gateway device 330 receives usage information from the first DB 211. The gateway device 330 outputs an operation item based on the usage information by voice.
  • step S57 a voice command to the facility 310 is input to the gateway device 330 based on the operation item.
  • step S58 the gateway device 330 performs an authentication process to determine whether the speaker of the voice command is registered. Here, the description will be continued assuming that the speaker of the voice command is registered.
  • step S59 the gateway device 330 transmits a control command based on the voice command to the EMS 320.
  • the gateway device 330 performs an authentication process for each voice command. According to such a configuration, a situation in which voice commands of a plurality of speakers present near the gateway device 330 are received is suppressed, and the installation, inspection, use, etc. of the facility 310 can not be appropriately supported. There is sex.
  • the facility management device 200 is configured to prohibit the access of the gateway device 330 to the second DB 212. According to such a configuration, by prohibiting the gateway device 200 which may transmit various information to the external server 500 from accessing the second DB 212, the second embodiment belongs to the know-how of the entity operating the facility management device 200. (2) It is possible to reduce the possibility that information leaks to other entities.
  • the facility management device 200 is configured to allow the gateway device 330 to access the first DB 211. According to such a configuration, the convenience of the user is improved by providing a part of the information stored in the facility management apparatus 200.
  • voice input of a password registered in advance in the gateway device 330 may be required to start the registration process.
  • two or more speakers may be registered.
  • the gateway device 330 may receive the voice command with the largest volume.
  • the gateway device 330 may not receive an audio command of a volume smaller than a predetermined volume.
  • the gateway device 330 may omit the authentication process for a certain period of time or a certain number of times when a voice command is accepted in the authentication process during the use period.
  • the fixed period or the fixed number of times may be determined by the importance of the voice command.
  • the gateway device 330 may perform the authentication process for each voice command without omitting the authentication process for a specific voice command (voice command with high importance).
  • the gateway device 330 may be prepared for theft of the gateway device 330 or the like to deregister the talker by remote control.
  • the first DB 211, the second DB 212, and the third DB 213 are physically different databases, but the embodiment is not limited thereto.
  • the first DB 211, the second DB 212, and the third DB 213 are configured by one database, and may be virtually separated by the setting of the access right.
  • the first DB 211, the second DB 212, and the third DB 213 are provided in the facility management apparatus 200, but the embodiment is not limited to this. At least one of the first DB 211, the second DB 212, and the third DB 213 may be provided in a server connected to the facility management apparatus 200 via the network 120.
  • the functions of the facility management apparatus 200 may be provided by a cloud service.
  • the access control unit for prohibiting the access of the gateway device 330 to the second DB 212 is provided in the facility management device 200, but the embodiment is not limited to this.
  • An access control unit that prohibits the gateway device 330 from accessing the second information may be provided in the gateway device 330. That is, the gateway device 330 may autonomously prohibit access to the second DB 212.
  • control device that controls the facility 310 is the EMS 320.
  • the control device may be the facility 310 itself.
  • the control device may be a remote controller that transmits a control command to the facility 310.
  • the facility management apparatus 200 may set, for each entity that accesses facility information, an access right of an information element included in the facility information.
  • the facility management device 200 may allow the access of the EMS 320 to the sensing data and may prohibit the access of the vendor terminal 400 to the sensing data.
  • the facility management device 200 may allow the vendor terminal 400 to access the operation history and prohibit the access of the EMS 320 to statistical data.
  • the entity that accesses the facility information is the EMS 320 and the vendor terminal 400.
  • the entity may be a user terminal belonging to the user of the facility 310.
  • the facility management apparatus 200 may allow the user terminal to access the operation history and prohibit the user terminal from accessing the sensing data.
  • the facility information may include basic information such as installation date, predetermined service life and rated power consumption.
  • the processing performed by the gateway device 330 (control unit 333) described above is performed by the EMS 320 (control unit included in the EMS 320) or the facility management device 200 (control unit 230). It may be for example, the registration process and the authentication process performed by the gateway device 330 (control unit 333) described above are performed by the EMS 320 (control unit included in the EMS 320) or the facility management apparatus 200 (control unit 221). Even if the EMS 320 (control unit included in the EMS 320) or the facility management apparatus 200 (control unit 221) acquires necessary information on the voice of the speaker from the gateway device 330, the registration process and the authentication process may be performed based on the information. Good.

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Computer Security & Cryptography (AREA)
  • General Engineering & Computer Science (AREA)
  • Computational Linguistics (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Mathematical Physics (AREA)
  • Artificial Intelligence (AREA)
  • General Health & Medical Sciences (AREA)
  • Telephonic Communication Services (AREA)

Abstract

音声命令システムは、音声命令を受け付けるインタフェースを有するゲートウェイ装置と、前記音声命令の受け付けが許可される発話者を登録する登録処理を行う制御部とを備える。前記制御部は、前記音声命令の発話者が登録されていない場合に、前記音声命令の受け付けを拒否し、前記音声命令の発話者が登録されている場合に、前記音声命令の受け付けを許可する認証処理を行う。前記制御部は、前記音声命令毎に前記認証処理を行う。

Description

音声命令システム及び音声命令方法
　本発明は、音声命令システム及び音声命令方法に関する。
　機器の保守において種々のガイダンス情報を携帯端末に表示するナビゲーションシステムが提案されている（例えば、特許文献１）。
特開２０１２－２５６２７６号公報
　第１の開示に係る音声命令システムは、音声命令を受け付けるインタフェースを有するゲートウェイ装置を備える。前記音声命令システムは、前記音声命令の受け付けが許可される発話者を登録する登録処理を行う制御部を備える。前記制御部は、前記音声命令の発話者が登録されていない場合に、前記音声命令の受け付けを拒否し、前記音声命令の発話者が登録されている場合に、前記音声命令の受け付けを許可する認証処理を行う。前記制御部は、前記音声命令毎に前記認証処理を行う。
　第２の開示に係る音声命令方法は、音声命令を受け付けるステップＡと、前記音声命令の受け付けが許可される発話者を登録する登録処理を行うステップＢと、前記音声命令の発話者が登録されていない場合に、前記音声命令の受け付けを拒否し、前記音声命令の発話者が登録されている場合に、前記音声命令の受け付けを許可する認証処理を行うステップＣとを備える。前記ステップＣは、前記音声命令毎に行われる。
図１は、実施形態に係る音声命令システム１００を示す図である。 図２は、実施形態に係る設備管理装置２００を示す図である。 図３は、実施形態に係る第１ＤＢ２１１に格納される情報の一例を示す図である。 図４は、実施形態に係る第２ＤＢ２１２に格納される情報の一例を示す図である。 図５は、実施形態に係る第３ＤＢ２１３に格納される情報の一例を示す図である。 図６は、実施形態に係るゲートウェイ装置３３０を示す図である。 図７は、実施形態に係る音声命令方法を示す図である。 図８は、実施形態に係る音声命令方法を示す図である。 図９は、実施形態に係る音声命令方法を示す図である。
　近年では、音声入力インタフェースなどのユーザインタフェースを備えるゲートウェイ装置が注目を浴びている。このようなゲートウェイ装置を用いて、設備の設置、検査及び使用などをサポートすることによって、ユーザの利便性を向上することが考えられる。しかしながら、ゲートウェイ装置は、ゲートウェイ装置の近くに存在する複数の発話者の音声命令を受け付けてしまうため、設備の設置、検査及び使用などを適切にサポートすることができない可能性がある。
　本開示は、設備の設置、検査及び使用などを適切にサポートすることを可能とする音声命令システム及び音声命令方法を提供する。
　以下において、実施形態について図面を参照しながら説明する。なお、以下の図面の記載において、同一又は類似の部分には、同一又は類似の符号を付している。
　ただし、図面は模式的なものであり、各寸法の比率などは現実のものとは異なることに留意すべきである。従って、具体的な寸法などは以下の説明を参酌して判断すべきである。また、図面相互間においても互いの寸法の関係や比率が異なる部分が含まれていることは勿論である。
　［実施形態］
　（音声命令システム）
　以下において、実施形態に係る音声命令システムについて説明する。図１に示すように、音声命令システム１００は、設備管理装置２００と、施設３００と、業者端末４００と、外部サーバ５００を有する。図１では、施設３００として、施設３００Ａ～施設３００Ｃが例示されている。設備管理装置２００、施設３００、業者端末４００及び外部サーバ５００は、ネットワーク１２０に接続されている。ネットワーク１２０は、設備管理装置２００と施設３００との間の回線、設備管理装置２００と業者端末４００との間の回線、施設３００と外部サーバ５００との間の回線を提供すればよい。例えば、ネットワーク１２０は、インターネットである。ネットワーク１２０は、ＶＰＮなどの専用回線を提供してもよい。
　設備管理装置２００は、施設３００に設けられる設備を管理する。設備管理装置２００の詳細については後述する（図２を参照）。
　施設３００は、設備３１０、ＥＭＳ３２０及びゲートウェイ装置３３０を有する。設備３１０は、電力系統１１０に接続される。設備３１０は、発電を行う発電設備であってもよい。発電設備は、太陽光、風力又は地熱などの自然エネルギーを利用して発電を行う設備であってもよい。発電設備は、燃料電池装置であってもよい。設備３１０は、蓄電池装置であってもよい。設備３１０は、電力を消費する負荷設備であってもよい。負荷設備は、空調設備であってもよく、照明設備であってもよい。施設３００は、２種類以上の設備３１０を有してもよい。
　ＥＭＳ３２０は、施設３００における電力を示す電力情報を管理する装置（ＥＭＳ；Ｅｎｅｒｇｙ　Ｍａｎａｇｅｍｅｎｔ　Ｓｙｓｔｅｍ）である。施設３００における電力とは、施設３００内を流れる電力、施設３００が買電する電力、又は施設３００から売電する電力である。
　ゲートウェイ装置３３０は、設備３１０を操作する音声命令を受け付けるインタフェースを有する。インタフェースは、音声入力インタフェースを含む。インタフェースは、音声出力インタフェースを含んでもよい。インタフェースは、ボタン入力インタフェースを含んでもよい。インタフェースは、タッチパネル入力インタフェースを含んでもよい。インタフェースは、ジェスチャー入力インタフェースを含んでもよい。ジェスチャーは、例えば、インタフェースが有するカメラに向かって手を振る等の動作である。インタフェースは、画像出力インタフェースを含んでもよい。ゲートウェイ装置３３０は、ＡＩ（Ａｒｔｉｆｉｃｉａｌ　Ｉｎｔｅｌｌｉｇｅｎｃｅ）機能を有しており、ＡＩ機能は、音声命令を解析する機能を有しており、音声命令の解析結果に基づいて各種動作を行う。各種動作は、ネットワーク１２０を介して接続されるサーバから情報を取得する動作を含んでもよく、ネットワーク１２０を介して接続されるサーバから取得される情報を出力する動作を含んでもよい。サーバは、設備管理装置２００であってもよく、外部サーバ５００であってもよい。各種動作は、音声命令に基づいた制御コマンドを送信する動作を含んでもよく、制御コマンドに対する応答コマンドを受信する動作を含んでもよい。ゲートウェイ装置３３０は、ＥＭＳ３２０を介して設備３１０に制御コマンドを送信してもよく、ＥＭＳ３２０を介さずに設備３１０に制御コマンドを送信してもよい。ゲートウェイ装置３３０は、スマートスピーカ又はＡＩと称されてもよい。
　ここで、ゲートウェイ装置３３０は、ゲートウェイ装置３３０によって収集される情報を外部サーバ５００に送信してもよい。ゲートウェイ装置３３０によって収集される情報は、音声命令の解析結果であってもよく、設備管理装置２００から取得する情報であってもよい。
　業者端末４００は、設備３１０のメンテナンスを行う業者に属する端末であってもよい。例えば、メンテナンスは、設備の劣化状態を調査する点検、点検時に軽微な手入れを行う保守、設備の機能及び性能を設置当初の状態に戻すために設備の不具合を処置する修繕、既存の設備を新しい設備に交換する取替等を含む。
　ここで、音声命令システム１００は、電力管理サーバを有していてもよい。例えば、電力管理サーバは、電力系統１１０から施設３００に対する潮流量の制御を要求する潮流制御メッセージ、施設３００から電力系統１１０に対する逆潮流量の制御を要求する逆潮流制御メッセージ、施設３００に設けられる設備３１０（分散電源）の制御を要求する電源制御メッセージなどを施設３００に送信する。
　外部サーバ５００は、音声命令の解析結果に基づいて必要な情報を検索するための検索エンジンを提供するサーバであってもよい。外部サーバ５００は、ゲートウェイ装置３３０を提供するエンティティによって運用されるサーバであってもよい。外部サーバ５００は、ゲートウェイ装置３３０によって収集される情報をビッグデータとして管理し、管理されるビッグデータをユーザの利便性を向上するための情報として活用してもよい。
　（設備管理装置）
　以下において、実施形態に係る設備管理装置について説明する。図２に示すように、設備管理装置２００は、管理部２１０と、通信部２２０と、制御部２３０とを有する。
　管理部２１０は、不揮発性メモリ又は／及びＨＤＤなどの記憶媒体によって構成されており、複数の施設３００に関する情報を管理する。管理部２１０は、第１ＤＢ（Ｄａｔａｂａｓｅ）２１１と、第２ＤＢ（Ｄａｔａｂａｓｅ）２１２と、第３ＤＢ（Ｄａｔａｂａｓｅ）２１３とを有する。
　第１ＤＢ２１１は、ゲートウェイ装置３３０のアクセスが許容される第１情報を格納する第１データベースの一例である。第１情報は、設備の取り扱い方法に関するガイダンス情報を含む。例えば、ガイダンス情報は、図３に示すように、設備名称、設置情報、検査情報、使用情報の少なくともいずれか１つを含む。
　設備名称は、設備３１０の名称である。設備名称は、設備３１０を一意に識別する情報（例えば、製品型番、メーカーコードなど）であってもよく、設備３１０の種類（例えば、太陽電池装置、空調設備など）を示す情報であってもよい。
　設置情報は、施設３００への設備３１０の設置に伴って必要とされる情報である。例えば、設置情報は、設備３１０の設置手順を示す情報であり、「○○端子に××ケーブルを接続して下さい」、「電源をＯＮにして下さい」といった情報である。例えば、設置情報は、設備３１０の設置業者によって用いられてもよい。
　検査情報は、設備３１０の検査に伴って必要とされる情報である。例えば、検査情報は、設備３１０の検査手順を示す情報であり、「○○端子に××ケーブルが接続されていますか？」、「電源ランプが点灯していますか？」といった情報である。例えば、検査情報は、設備３１０の検査業者によって用いられてもよい。設備３１０の検査は、設備３１０の設置後に行われる検査であってもよく、設備３１０の保守で行われる検査であってもよい。
　使用情報は、設備３１０の使用に伴って必要とされる情報である。例えば、使用情報は、設備３１０の使用手順を示す情報であり、「電源をＯＮにして下さい」、「○○ボタンを押下して下さい」といった情報である。使用情報は、設備３１０が有する機能を示す情報であってもよく、設備３１０のトラブルシューティングを示す情報であってもよい。使用情報は、設備３１０のユーザによって用いられる情報であってもよい。
　実施形態では、第１ＤＢ２１１は、図３に示すように、ガイダンス情報、設備情報及びユーザ情報を対応付けるインデックス情報を格納してもよい。インデックス情報は、任意の文字及び数字の組合せによって構成されており、それ自体に意味を有していなくてもよい。
　第２ＤＢ２１２は、ゲートウェイ装置３３０のアクセスが禁止される第２情報を格納する第２データベースの一例である。第２情報は、設備３１０に関する設備情報を含む。設備情報は、設備３１０を制御するＥＭＳ３２０によって収集される情報である。例えば、設備情報は、図４に示すように、設備名称、センシングデータ、エラーコード、統計データ、リファレンスデータ及び運転履歴の少なくともいずれか１つを含む。
　設備名称は、設備３１０の名称である。設備名称は、設備３１０を一意に識別する情報（例えば、メーカーコード）であってもよく、設備３１０の種類（例えば、太陽電池装置、空調設備など）を示す情報であってもよい。
　センシングデータは、設備３１０の稼働状態を表す数値データを含むデータである。センシングデータは、施設３００に設けられるセンサによって計測される。また、センシングデータは、設備３１０に設けられるセンサによって計測されるものであってもよいし、ＥＭＳ３２０に設けられるセンサによって計測されるものであってもよい。センシングデータは、ＥＭＳ３２０から設備管理装置２００に送信される。例えば、センシングデータは、設備３１０の出力電力データ、設備３１０の消費電力データ、設備３１０の温度データ、設備３１０の環境温度データ、設備３１０の環境湿度データなどであってもよい。
　エラーコードは、設備３１０のエラーを識別するコードである。エラーは、設備３１０によって検出されてもよく、ＥＭＳ３２０によって検出されてもよい。エラーコードは、ＥＭＳ３２０から設備管理装置２００に送信される。例えば、エラーコードは、設備３１０の温度の異常を示すコード、設備３１０に設けられる部品の異常を示すコード、設備３１０の出力電力の異常を示すコード、設備３１０の消費電力の異常を示すコードなどであってもよい。
　統計データは、数値データの統計的な処理によって得られるデータである。統計データは、設備管理装置２００によって生成されてもよい。また、統計データは、設備３１０によって生成されてもよく、ＥＭＳ３２０によって生成されてもよい。例えば、統計データは、特定目的のためにグルーピング又はソーティングされた数値データであってもよい。統計データは、所定期間（１日、１週間、１ヶ月など）における設備３１０の出力電力の推移（プロファイル）を示すデータ、所定期間における設備３１０の消費電力の推移を示すデータなどであってもよい。
　リファレンスデータは、数値データと比較される閾値を含むデータである。リファレンスデータは、設備３１０のメーカなどによって設定される値である。閾値は、設備３１０のエラーを判定するために用いる値である。
　運転履歴は、設備３１０の運転に関する履歴である。所定期間（１日、１週間、１ヶ月など）における運転モードの推移であってもよく、所定の運転モードが実行された回数であってもよく、設備３１０の運転が停止した回数であってもよい。例えば、設備３１０が燃料電池装置である場合には、運転履歴は、燃料電池装置の通常停止回数であってもよく、燃料電池装置の緊急停止回数であってもよい。設備３１０が蓄電池装置である場合には、運転履歴は、蓄電池装置の充電回数であってもよく、蓄電池装置の充電時間であってもよく、蓄電池装置の放電回数であってもよく、蓄電池装置の放電時間であってもよく、蓄電池装置の充放電サイクル数であってもよい。
　実施形態では、第２ＤＢ２１２は、図４に示すように、ガイダンス情報、設備情報及びユーザ情報を対応付けるインデックス情報を格納してもよい。インデックス情報は、任意の文字及び数字の組合せによって構成されており、それ自体に意味を有していなくてもよい。
　第３ＤＢ２１３は、ユーザに関するユーザ情報を格納する。ユーザは、法人であってもよく、自然人（個人）であってもよい。例えば、ユーザ情報は、図５に示すように、ユーザの氏名又は名称、ユーザの住所、ユーザの連絡先（メールアドレス及び電話番号）の少なくともいずれか１つを含む。ユーザ情報は、保護の対象とすべき情報である。さらに、ユーザ情報は、図５に示すように、業者情報及びメンテナンス情報の少なくともいずれか１つを含んでもよい。
　業者情報は、ユーザと取引を行う業者に関する情報である。業者は、メンテナンスを行う業者でもよい。業者は、設備３１０のメーカであってもよい。業者は、発電事業者、送配電事業者、小売事業者、リソースアグリゲータなどの事業者であってもよい。
　メンテナンス情報は、設備３１０のメンテナンスに関する情報である。メンテナンス情報は、メンテナンスの履歴であってもよく、メンテナンスの予定であってもよい。メンテナンス情報は、業者端末４００から送信されるメンテナンス情報によって蓄積されてもよく、オペレータによって入力されるメンテナンス情報によって蓄積されてもよい。メンテナンス情報は、メンテナンスの実行日、メンテナンスの予定日、メンテナンスの内容を含んでもよい。上述したように、メンテナンスは、設備の劣化状態を調査する点検、点検時に軽微な手入れを行う保守、設備の機能及び性能を設置当初の状態に戻すために設備の不具合を処置する修繕、既存の設備を新しい設備に交換する取替等を含む。
　実施形態では、第３ＤＢ２１３は、図５に示すように、ガイダンス情報、設備情報及びユーザ情報を対応付けるインデックス情報を格納してもよい。インデックス情報は、任意の文字及び数字の組合せによって構成されており、それ自体に意味を有していなくてもよい。
　通信部２２０は、通信モジュールによって構成されており、ネットワーク１２０を介して施設３００及び業者端末４００と通信を行う。例えば、通信部２２０は、センシングデータ及びエラーコードなどの設備情報をＥＭＳ３２０から受信する。通信部２２０は、メンテナンス情報を業者端末４００から受信する。通信部２２０は、音声命令の解析結果をゲートウェイ装置３３０から受信する。
　制御部２３０は、メモリ及びＣＰＵなどによって構成されており、設備管理装置２００に設けられる各構成を制御する。実施形態において、制御部２３０は、以下に示す制御を行う。
　制御部２３０は、設備３１０を制御するＥＭＳ３２０から設備情報を収集する。制御部２３０は、自発的にＥＭＳ３２０から送信される設備情報を収集してもよく、ＥＭＳ３２０に対する要求に応じてＥＭＳ３２０から送信される設備情報を収集してもよい。上述したように、設備情報は第２ＤＢ２１２に格納される。
　制御部２３０は、第２ＤＢ２１２に対するＥＭＳ３２０のアクセスを許容する。一方で、制御部２３０は、第３ＤＢ２１３に対するＥＭＳ３２０のアクセスを禁止する。すなわち、制御部２３０は、第２ＤＢ２１２に対するアクセスを許容するＥＭＳ３２０であっても、第３ＤＢ２１３に対するアクセスを禁止するように構成される。
　同様に、制御部２３０は、第２ＤＢ２１２に対する業者端末４００のアクセスを許容してもよい。一方で、制御部２３０は、第３ＤＢ２１３に対する業者端末４００のアクセスを禁止してもよい。すなわち、制御部２３０は、第２ＤＢ２１２に対するアクセスを許容する業者端末４００であっても、第３ＤＢ２１３に対するアクセスを禁止するように構成されてもよい。
　制御部２３０は、設備情報を第三者に提供してもよい。このようなケースにおいて、制御部２３０は、インデックス情報を少なくとも削除する。このような構成によれば、ユーザ情報が第三者に漏洩する可能性を低減することができる。第三者は、特に限定されるものではないが、発電事業者、送配電事業者、小売事業者、リソースアグリゲータなどの事業者であってもよい。
　制御部２３０は、第１ＤＢ２１１に対するゲートウェイ装置３３０のアクセスを許容する。一方で、制御部２３０は、第２ＤＢ２１２に対するゲートウェイ装置３３０のアクセスを禁止する。すなわち、制御部２３０は、第１ＤＢ２１１に対するアクセスを許容するゲートウェイ装置３３０であっても、第２ＤＢ２１２に対するアクセスを禁止するように構成される。ここで、制御部２３０は、第３ＤＢ２１３に対するゲートウェイ装置３３０のアクセスを許容してもよく、第３ＤＢ２１３に対するゲートウェイ装置３３０のアクセスを禁止してもよい。制御部２３０は、第３ＤＢ２１３へのアクセスが許容されたユーザが、ゲートウェイ装置３３０に操作命令を入力する場合に、第３ＤＢ２１３に対するゲートウェイ装置３３０のアクセスを許容してもよい。
　ここで、ゲートウェイ装置３３０に音声命令を入力するユーザは、設備３１０のユーザであることが考えられる。すなわち、ゲートウェイ装置３３０に音声命令を入力するユーザは、第２ＤＢ２１２に格納される第２情報（設備情報）にアクセスする権限を有することが考えられる。例えば、ユーザは、ＥＭＳ３２０を介して第２情報にアクセスする権限を有する。
　しかしながら、制御部２３０は、第２情報にアクセスする権限を有するユーザに由来する音声命令に基づいたアクセスであっても、第２ＤＢ２１２に対するゲートウェイ装置３３０のアクセスを禁止する。すなわち、制御部２３０は、第２ＤＢ２１２に対するＥＭＳ３２０のアクセスを許容しながらも、第２ＤＢ２１２に対するゲートウェイ装置３３０のアクセスを禁止する。
　（ゲートウェイ装置）
　以下において、実施形態に係るゲートウェイ装置について説明する。図６に示すように、ゲートウェイ装置３３０は、インタフェース３３１と、通信部３３２と、制御部３３３とを有する。
　インタフェース３３１は、音声命令を受け付ける音声入力インタフェースを含む。インタフェース３３１は、音声出力インタフェースを含んでもよい。
　通信部３３２は、通信モジュールによって構成されており、ネットワーク１２０を介して設備管理装置２００及び外部サーバ５００と通信を行う。例えば、通信部３３２は、設備管理装置２００からガイダンス情報を受信する。通信部３３２は、ゲートウェイ装置３３０によって収集される情報を外部サーバ５００に送信する。
　制御部３３３は、メモリ及びＣＰＵなどによって構成されており、ゲートウェイ装置３３０に設けられる各構成を制御する。実施形態において、制御部３３３は、以下に示す制御を行う。
　制御部３３３は、音声命令の受け付けが許可される発話者を登録する登録処理を行う。例えば、制御部３３３は、発話者をメモリ等の記憶媒体に登録する。制御部３３３は、登録する発話者に関連付けて、発話者が発する主要言語、方言等を登録してもよい。制御部３３３は、音声命令の発話者が登録されていない場合に、音声命令の受け付けを拒否し、音声命令の発話者が登録されている場合に、音声命令の受け付けを許可する認証処理を行う。制御部３３３は、音声命令毎に認証処理を行う。制御部３３３は、発話者の声紋判定によって認証処理を行う。声紋判定は、入力音声が登録音声と合致するか否かを判定する処理である。
　ここで、制御部３３３は、音声命令の受け付けが許可された場合に、音声命令に基づいて外部データベースにアクセスするとともに、音声命令に対応する情報（上述したガイダンス情報）を外部データベースから取得する。外部データベースは、上述した第１ＤＢ２１１である。
　第１に、制御部３３３は、設備３１０の設置作業期間において、登録処理及び認証処理を行う。例えば、このようなケースにおいて、登録処理で登録される発話者は設置業者である。制御部３３３は、設置作業期間の満了に伴って、設置作業期間で行われた登録処理による発話者の登録を解除してもよい。すなわち、設置作業期間においては、制御部３３３は、設置業者の音声を受け付けるようにしてもよい。設置作業期間においては、設置手順の次の作業項目を要求する音声入力、設置情報に基づいた設置手順の１つの作業項目の音声出力が繰り替えされる。また、設置作業期間において、重要度が相対的に高い作業項目の音声出力が行われる場合に、重要度が相対的に低い作業項目の音声出力の音量よりも大きい音量で音声出力が行われてもよく、複数回の音声出力が行われてもよい。次の作業項目を要求する音声入力は、前の作業項目を完了した旨の音声入力であってもよい。このように、設置作業期間においては、音声入力及び音声出力によって作業項目のチェックが行われる。
　第２に、制御部３３３は、設備３１０の検査期間において、登録処理及び認証処理を行う。例えば、このようなケースにおいて、登録処理で登録される発話者は検査業者である。制御部３３３は、検査期間の満了に伴って、検査期間で行われた登録処理による発話者の登録を解除してもよい。すなわち、検査期間においては、制御部３３３は、検査業者の音声を受け付けるようにしてもよい。検査期間においては、検査手順の次の検査項目を要求する音声入力、検査情報に基づいた検査手順の１つの検査項目の音声出力が繰り返される。次の検査項目を要求する音声入力は、前の検査項目に対する回答（例えば、ＹＥＳ又はＮＯ）の音声入力であってもよい。このように、検査期間においては、音声入力及び音声出力によって検査項目のチェックが行われる。
　制御部３３３は、このような検査期間において、検査期間において、発話者の音声入力による署名処理を行う。署名処理は、最後の検査項目に対する回答が音声入力された後に行われる。言い換えると、制御部３３３は、署名処理によって検査期間を満了する。
　第３に、制御部３３３は、設備３１０の使用期間において、登録処理及び認証処理を行う。例えば、このようなケースにおいて、登録処理で登録される発話者は設備３１０のユーザである。制御部３３３は、登録処理が行われてから一定期間が経過した場合に、検査期間で行われた登録処理による発話者の登録を解除してもよい。使用期間においては、使用手順の操作項目を要求する音声入力、使用情報に基づいた操作項目の音声出力が行われる。
　制御部３３３は、このような使用期間において、認証処理で音声命令が受け付けられた場合に、一定期間又は一定回数に亘って認証処理を省略してもよい。すなわち、制御部３３３は、登録された発話者の音声命令が受け付けられた場合には、一定期間又は一定回数に亘って登録されていない発話者の音声命令を受け付けてもよい。
　（音声命令方法）
　以下において、実施形態に係る音声命令方法について説明する。
　第１に、設置作業期間について図７を参照しながら説明する。図７に示すように、ステップＳ１１において、ゲートウェイ装置３３０に登録音声が入力される。
　ステップＳ１２において、ゲートウェイ装置３３０は、音声命令の受け付けが許可される発話者を登録する登録処理を行う。
　ステップＳ１３Ａにおいて、設置手順の次の作業項目を要求する音声命令がゲートウェイ装置３３０に入力される。ステップＳ１４Ａにおいて、ゲートウェイ装置３３０は、音声命令の発話者が登録されているか否かを判定する認証処理を行う。ここでは、音声命令の発話者が登録されているものとして説明を続ける。ステップＳ１５Ａにおいて、ゲートウェイ装置３３０は、第１ＤＢ２１１にアクセスする。ステップＳ１６Ａにおいて、ゲートウェイ装置３３０は、設置情報を第１ＤＢ２１１から受信する。ゲートウェイ装置３３０は、設置情報に基づいた作業項目を音声出力する。ステップＳ１７Ａにおいて、作業項目を完了した旨の音声がゲートウェイ装置３３０に入力される。
　ステップＳ１３Ｘ～ステップＳ１７Ｘに示すように、このような処理は設備３１０の設置が完了するまで繰り返される。上述したように、次の作業項目を要求する音声入力は、前の作業項目を完了した旨の音声入力であってもよい。すなわち、ステップＳ１７Ａの音声入力がステップＳ１３Ｘの音声入力を兼ねていてもよい。
　ステップＳ１８において、設備３１０の設置が完了する旨の音声命令がゲートウェイ装置３３０に入力される。ステップＳ１９において、ゲートウェイ装置３３０は、音声命令の発話者が登録されているか否かを判定する認証処理を行う。ここでは、音声命令の発話者が登録されているものとして説明を続ける。ステップＳ２０において、ゲートウェイ装置３３０は、ステップＳ１２で行われた発話者の登録を解除する。
　第２に、検査期間について図８を参照しながら説明する。図８に示すように、ステップＳ３１において、ゲートウェイ装置３３０に登録音声が入力される。
　ステップＳ３２において、ゲートウェイ装置３３０は、音声命令の受け付けが許可される発話者を登録する登録処理を行う。
　ステップＳ３３Ａにおいて、検査手順の次の検査項目を要求する音声命令がゲートウェイ装置３３０に入力される。ステップＳ３４Ａにおいて、ゲートウェイ装置３３０は、音声命令の発話者が登録されているか否かを判定する認証処理を行う。ここでは、音声命令の発話者が登録されているものとして説明を続ける。ステップＳ３５Ａにおいて、ゲートウェイ装置３３０は、第１ＤＢ２１１にアクセスする。ステップＳ３６Ａにおいて、ゲートウェイ装置３３０は、検査情報を第１ＤＢ２１１から受信する。ゲートウェイ装置３３０は、検査情報に基づいた検査項目を音声出力する。ステップＳ３７Ａにおいて、検査項目に対する回答の音声がゲートウェイ装置３３０に入力される。
　ステップＳ３３Ｘ～ステップＳ３７Ｘに示すように、このような処理は設備３１０の検査が完了するまで繰り返される。上述したように、次の検査項目を要求する音声入力は、前の検査項目に対する回答の音声入力であってもよい。すなわち、ステップＳ１７Ａの音声入力がステップＳ１３Ｘの音声入力を兼ねていてもよい。
　ステップＳ３８において、設備３１０の検査が完了する旨の音声命令がゲートウェイ装置３３０に入力される。ステップＳ３９において、ゲートウェイ装置３３０は、音声命令の発話者が登録されているか否かを判定する認証処理を行う。ここでは、音声命令の発話者が登録されているものとして説明を続ける。ステップＳ４０において、ゲートウェイ装置３３０は、発話者の音声入力による署名処理を行う。ステップＳ４１において、ゲートウェイ装置３３０は、ステップＳ３２で行われた発話者の登録を解除する。
　第３に、使用期間について図８を参照しながら説明する。図９に示すように、ステップＳ５１において、ゲートウェイ装置３３０に登録音声が入力される。
　ステップＳ５２において、ゲートウェイ装置３３０は、音声命令の受け付けが許可される発話者を登録する登録処理を行う。
　ステップＳ５３において、使用手順の操作項目を要求する音声命令がゲートウェイ装置３３０に入力される。ステップＳ５４において、ゲートウェイ装置３３０は、音声命令の発話者が登録されているか否かを判定する認証処理を行う。ここでは、音声命令の発話者が登録されているものとして説明を続ける。ステップＳ５５において、ゲートウェイ装置３３０は、第１ＤＢ２１１にアクセスする。ステップＳ５６において、ゲートウェイ装置３３０は、使用情報を第１ＤＢ２１１から受信する。ゲートウェイ装置３３０は、使用情報に基づいた操作項目を音声出力する。
　ステップＳ５７において、操作項目に基づいて設備３１０に対する音声命令がゲートウェイ装置３３０に入力される。ステップＳ５８において、ゲートウェイ装置３３０は、音声命令の発話者が登録されているか否かを判定する認証処理を行う。ここでは、音声命令の発話者が登録されているものとして説明を続ける。ステップＳ５９において、ゲートウェイ装置３３０は、音声命令に基づいた制御コマンドをＥＭＳ３２０に送信する。
　（作用及び効果）
　実施形態では、ゲートウェイ装置３３０は、音声命令毎に認証処理を行う。このような構成によれば、ゲートウェイ装置３３０の近くに存在する複数の発話者の音声命令を受け付けてしまう事態が抑制され、設備３１０の設置、検査及び使用などを適切にサポートすることができない可能性がある。
　実施形態では、設備管理装置２００は、第２ＤＢ２１２に対するゲートウェイ装置３３０のアクセスを禁止するように構成される。このような構成によれば、外部サーバ５００に各種情報を送信する可能性があるゲートウェイ装置２００が第２ＤＢ２１２にアクセスすることを禁止することで、設備管理装置２００を運用するエンティティのノウハウに属する第２情報が他のエンティティに漏洩する可能性を軽減することができる。
　実施形態では、設備管理装置２００は、第１ＤＢ２１１に対するゲートウェイ装置３３０のアクセスを許容するように構成される。このような構成によれば、設備管理装置２００が格納する情報の一部を提供することで、ユーザの利便性が向上する。
　［その他の実施形態］
　本発明を上述した実施形態によって説明したが、この開示の一部をなす論述及び図面は、本発明を限定するものであると理解すべきではない。この開示から当業者には様々な代替実施形態、実施例及び運用技術が明らかとなろう。
　実施形態では特に触れていないが、登録処理を開始するために、ゲートウェイ装置３３０に予め登録されたパスワードの音声入力が要求されてもよい。登録処理において、２以上の発話者が登録されてもよい。複数の発話者が登録されているケースにおいて、２以上の音声命令が所定時間内に入力された場合に、ゲートウェイ装置３３０は、音量が最も大きい音声命令を受け付けてもよい。ゲートウェイ装置３３０は、所定音量よりも小さい音量の音声命令を受け付けなくてもよい。
　実施形態で説明したように、ゲートウェイ装置３３０は、使用期間において、認証処理で音声命令が受け付けられた場合に、一定期間又は一定回数に亘って認証処理を省略してもよい。このようなケースにおいて、一定期間又は一定回数は、音声命令の重要度によって定められてもよい。さらに、ゲートウェイ装置３３０は、特定の音声命令（重要度が高い音声命令）については、認証処理を省略せずに音声命令毎に認証処理を行ってもよい。
　実施形態では特に触れていないが、ゲートウェイ装置３３０は、ゲートウェイ装置３３０の盗難等に備えて、遠隔操作によって会話者の登録を解除してもよい。
　実施形態では、第１ＤＢ２１１、第２ＤＢ２１２及び第３ＤＢ２１３は、物理的に異なるデータベースであるが、実施形態はこれに限定されるものではない。第１ＤＢ２１１、第２ＤＢ２１２及び第３ＤＢ２１３は１つのデータベースによって構成されており、アクセス権の設定によって仮想的に分離されていてもよい。
　実施形態では、第１ＤＢ２１１、第２ＤＢ２１２及び第３ＤＢ２１３は、設備管理装置２００に設けられているが、実施形態はこれに限定されるものではない。第１ＤＢ２１１、第２ＤＢ２１２及び第３ＤＢ２１３の少なくともいずれか１つは、設備管理装置２００とネットワーク１２０を介して接続されたサーバに設けられてもよい。
　実施形態では特に触れていないが、設備管理装置２００が有する機能はクラウドサービスによって提供されてもよい。
　実施形態では、第２ＤＢ２１２に対するゲートウェイ装置３３０のアクセスを禁止するアクセス制御部が設備管理装置２００に設けられるが、実施形態はこれに限定されるものではない。第２情報に対するゲートウェイ装置３３０のアクセスを禁止するアクセス制御部はゲートウェイ装置３３０に設けられていてもよい。すなわち、ゲートウェイ装置３３０は、第２ＤＢ２１２に対するアクセスを自律的に禁止してもよい。
　実施形態では、設備３１０を制御する制御装置がＥＭＳ３２０である。しかしながら、実施形態はこれに限定されるものではない。制御装置は、設備３１０そのものであってもよい。制御装置は、設備３１０に対する制御コマンドを送信するリモートコントローラであってもよい。
　実施形態では特に触れていないが、設備管理装置２００（制御部２３０）は、設備情報にアクセスするエンティティ毎に、設備情報に含まれる情報要素のアクセス権限を設定してもよい。例えば、設備管理装置２００は、センシングデータに対するＥＭＳ３２０のアクセスを許容し、センシングデータに対する業者端末４００のアクセスを禁止してもよい。或いは、設備管理装置２００は、運転履歴に対する業者端末４００のアクセスを許容し、統計データに対するＥＭＳ３２０のアクセスを禁止してもよい。
　実施形態では、設備情報にアクセスするエンティティは、ＥＭＳ３２０及び業者端末４００である。しかしながら、実施形態はこれに限定されるものではない。エンティティは、設備３１０のユーザに属するユーザ端末であってもよい。このようなケースにおいて、設備管理装置２００は、運転履歴に対するユーザ端末のアクセスを許容し、センシングデータに対するユーザ端末のアクセスを禁止してもよい。
　実施形態では特に触れていないが、設備情報は、設置年月日、既定耐用年数及び定格消費電力などの基本情報を含んでもよい。
　実施形態では特に触れていないが、上述した、ゲートウェイ装置３３０（制御部３３３）によって行われる処理の少なくとも一部は、ＥＭＳ３２０（ＥＭＳ３２０の備える制御部）又は設備管理装置２００（制御部２３０）によって行われてもよい。例えば、上述した、ゲートウェイ装置３３０（制御部３３３）によって行われる登録処理および認証処理は、ＥＭＳ３２０（ＥＭＳ３２０の備える制御部）又は設備管理装置２００（制御部２２１）によって行われる。ＥＭＳ３２０（ＥＭＳ３２０の備える制御部）又は設備管理装置２００（制御部２２１）は、発話者の音声に関する必要な情報をゲートウェイ装置３３０から取得し、その情報に基づいて登録処理および認証処理を行ってもよい。 
 

Claims (15)

  1. 　音声命令を受け付けるインタフェースを有するゲートウェイ装置と、
    　前記音声命令の受け付けが許可される発話者を登録する登録処理を行う制御部と、を備え、
    　前記制御部は、前記音声命令の発話者が登録されていない場合に、前記音声命令の受け付けを拒否し、前記音声命令の発話者が登録されている場合に、前記音声命令の受け付けを許可する認証処理を行い、
    　前記制御部は、前記音声命令毎に前記認証処理を行う、音声命令システム。
  2. 　前記ゲートウェイ装置は、前記制御部を有する、請求項１に記載の音声命令システム。
  3. 　前記制御部は、前記音声命令の受け付けが許可された場合に、前記音声命令に基づいて外部データベースにアクセスするとともに、前記音声命令に対応する情報を前記外部データベースから取得する、請求項１又は請求項２に記載の音声命令システム。
  4. 　前記制御部は、設備の設置作業期間において、前記登録処理及び前記認証処理を行う、請求項１乃至請求項３のいずれかに記載の音声命令システム。
  5. 　前記制御部は、前記設置作業期間の満了に伴って、前記設置作業期間で行われた前記登録処理による発話者の登録を解除する、請求項４に記載の音声命令システム。
  6. 　前記制御部は、設備の検査期間において、前記登録処理及び前記認証処理を行う、請求項１乃至請求項４のいずれかに記載の音声命令システム。
  7. 　前記制御部は、前記検査期間の満了に伴って、前記検査期間で行われた前記登録処理による発話者の登録を解除する、請求項６に記載の音声命令システム。
  8. 　前記制御部は、前記検査期間において、発話者の音声入力による署名処理を行う、請求項６又は請求項７に記載の音声命令システム。
  9. 　前記制御部は、前記署名処理によって前記検査期間を満了する、請求項８に記載の音声命令システム。
  10. 　前記制御部は、設備の使用期間において、前記登録処理及び前記認証処理を行う、請求項１乃至請求項９のいずれかに記載の音声命令システム。
  11. 　前記制御部は、発話者の声紋判定によって前記認証処理を行う、請求項１乃至請求項１０のいずれかに記載の音声命令システム。
  12. 　前記ゲートウェイ装置のアクセスが許容される第１情報を格納する第１データベースと、
    　前記ゲートウェイ装置のアクセスが禁止される第２情報を格納する第２データベースと、
    　前記第１データベースに対する前記ゲートウェイ装置のアクセスを許容し、前記第２データベースに対する前記ゲートウェイ装置のアクセスを禁止するアクセス制御部とを備え、
    　前記外部データベースは、前記第１データベースであり、
    　前記第２情報は、前記設備を制御する制御装置から収集される設備情報を含む、請求項３、請求項３を引用する請求項４乃至請求項１１のいずれかに記載の音声命令システム。
  13. 　前記第１データベース及び前記第２データベースは、物理的に異なるデータベースである、請求項１２に記載の音声命令システム。
  14. 　前記設備情報は、前記設備の稼働状態を表す数値データを含むセンシングデータ、前記設備のエラーを識別するエラーコード、前記数値データの統計的な処理によって得られる統計データ、前記数値データと比較される閾値を含むリファレンスデータ及び前記設備の運転履歴の少なくともいずれか１つを含む、請求項１２又は請求項１３に記載の音声命令システム。
  15. 　音声命令を受け付けるステップＡと、
    　前記音声命令の受け付けが許可される発話者を登録する登録処理を行うステップＢと、
    　前記音声命令の発話者が登録されていない場合に、前記音声命令の受け付けを拒否し、前記音声命令の発話者が登録されている場合に、前記音声命令の受け付けを許可する認証処理を行うステップＣとを備え、
    　前記ステップＣは、前記音声命令毎に行われる、音声命令方法。
PCT/JP2018/035687 2017-09-28 2018-09-26 音声命令システム及び音声命令方法 WO2019065733A1 (ja)

Priority Applications (6)

Application Number Priority Date Filing Date Title
US16/651,349 US11521609B2 (en) 2017-09-28 2018-09-26 Voice command system and voice command method
CN201880062699.0A CN111149152A (zh) 2017-09-28 2018-09-26 语音命令系统和语音命令方法
JP2019545567A JP6972149B2 (ja) 2017-09-28 2018-09-26 音声命令システム及び音声命令方法
EP18862830.9A EP3690878A4 (en) 2017-09-28 2018-09-26 VOICE COMMAND SYSTEM AND VOICE COMMAND PROCESS
CN202410180704.5A CN117935804A (zh) 2017-09-28 2018-09-26 语音命令系统和语音命令方法
US18/074,513 US12002467B2 (en) 2017-09-28 2022-12-05 Voice command system and voice command method

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2017188264 2017-09-28
JP2017-188264 2017-09-28

Related Child Applications (2)

Application Number Title Priority Date Filing Date
US16/651,349 A-371-Of-International US11521609B2 (en) 2017-09-28 2018-09-26 Voice command system and voice command method
US18/074,513 Continuation US12002467B2 (en) 2017-09-28 2022-12-05 Voice command system and voice command method

Publications (1)

Publication Number Publication Date
WO2019065733A1 true WO2019065733A1 (ja) 2019-04-04

Family

ID=65902455

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2018/035687 WO2019065733A1 (ja) 2017-09-28 2018-09-26 音声命令システム及び音声命令方法

Country Status (5)

Country Link
US (2) US11521609B2 (ja)
EP (1) EP3690878A4 (ja)
JP (1) JP6972149B2 (ja)
CN (2) CN117935804A (ja)
WO (1) WO2019065733A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021124873A (ja) * 2020-02-04 2021-08-30 東芝エレベータ株式会社 検査データ入力装置および検査データ入力方法

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11521609B2 (en) * 2017-09-28 2022-12-06 Kyocera Corporation Voice command system and voice command method
RU2744063C1 (ru) * 2018-12-18 2021-03-02 Общество С Ограниченной Ответственностью "Яндекс" Способ и система определения говорящего пользователя управляемого голосом устройства
US11017773B2 (en) * 2019-07-09 2021-05-25 Bank Of America Corporation Voice-based time-sensitive task processing over a high generation cellular network
CN112447177B (zh) * 2019-09-04 2022-08-23 思必驰科技股份有限公司 全双工语音对话方法及系统

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002251199A (ja) * 2001-02-27 2002-09-06 Ricoh Co Ltd 音声入力情報処理装置
JP2003271565A (ja) * 2002-03-15 2003-09-26 Matsushita Electric Ind Co Ltd 本人認証システム、本人認証端末、読取装置および本人認証方法
JP2012256276A (ja) 2011-06-10 2012-12-27 Hitachi Systems Ltd データセンタナビゲーションシステム
JP2015215433A (ja) * 2014-05-09 2015-12-03 株式会社ナビタイムジャパン 情報提供システム、端末装置、情報提供サーバ、情報提供方法、および、プログラム

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS596209U (ja) * 1982-07-02 1984-01-14 株式会社日立製作所 プラント監視装置の音声入力装置
JPS61138999A (ja) * 1984-12-12 1986-06-26 株式会社神戸製鋼所 音声認識装置
US5897616A (en) * 1997-06-11 1999-04-27 International Business Machines Corporation Apparatus and methods for speaker verification/identification/classification employing non-acoustic and/or acoustic models and databases
JP2005248542A (ja) * 2004-03-03 2005-09-15 Toshiba Corp 認証システム及び認証方法
US7917949B2 (en) * 2005-12-21 2011-03-29 Sandisk Corporation Voice controlled portable memory storage device
CN101192925A (zh) * 2006-11-20 2008-06-04 华为技术有限公司 说话人验证方法和系统及媒体资源控制实体和处理实体
JP5469589B2 (ja) * 2010-12-07 2014-04-16 株式会社日立製作所 プラント設備管理保守支援システム及び管理保守方法
KR101800887B1 (ko) * 2010-12-16 2017-11-23 엘지전자 주식회사 네트워크 시스템
US9262612B2 (en) 2011-03-21 2016-02-16 Apple Inc. Device access using voice authentication
US8818810B2 (en) * 2011-12-29 2014-08-26 Robert Bosch Gmbh Speaker verification in a health monitoring system
US9881616B2 (en) * 2012-06-06 2018-01-30 Qualcomm Incorporated Method and systems having improved speech recognition
JP6360484B2 (ja) 2013-09-03 2018-07-18 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ 音声対話制御方法
US9343068B2 (en) * 2013-09-16 2016-05-17 Qualcomm Incorporated Method and apparatus for controlling access to applications having different security levels
US20150162004A1 (en) * 2013-12-09 2015-06-11 Erwin Goesnar Media content consumption with acoustic user identification
US9900177B2 (en) * 2013-12-11 2018-02-20 Echostar Technologies International Corporation Maintaining up-to-date home automation models
CN107210038B (zh) * 2015-02-11 2020-11-10 邦及欧路夫森有限公司 多媒体系统中的说话者识别
US10798548B2 (en) * 2016-08-22 2020-10-06 Lg Electronics Inc. Method for controlling device by using Bluetooth technology, and apparatus
US20190043509A1 (en) * 2017-08-04 2019-02-07 Cirrus Logic International Semiconductor Ltd. Audio privacy based on user identification
US11521609B2 (en) * 2017-09-28 2022-12-06 Kyocera Corporation Voice command system and voice command method

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002251199A (ja) * 2001-02-27 2002-09-06 Ricoh Co Ltd 音声入力情報処理装置
JP2003271565A (ja) * 2002-03-15 2003-09-26 Matsushita Electric Ind Co Ltd 本人認証システム、本人認証端末、読取装置および本人認証方法
JP2012256276A (ja) 2011-06-10 2012-12-27 Hitachi Systems Ltd データセンタナビゲーションシステム
JP2015215433A (ja) * 2014-05-09 2015-12-03 株式会社ナビタイムジャパン 情報提供システム、端末装置、情報提供サーバ、情報提供方法、および、プログラム

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP3690878A4

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021124873A (ja) * 2020-02-04 2021-08-30 東芝エレベータ株式会社 検査データ入力装置および検査データ入力方法

Also Published As

Publication number Publication date
JP6972149B2 (ja) 2021-11-24
EP3690878A4 (en) 2021-06-09
EP3690878A1 (en) 2020-08-05
JPWO2019065733A1 (ja) 2020-10-22
CN117935804A (zh) 2024-04-26
US11521609B2 (en) 2022-12-06
US12002467B2 (en) 2024-06-04
US20230162734A1 (en) 2023-05-25
CN111149152A (zh) 2020-05-12
US20200273457A1 (en) 2020-08-27

Similar Documents

Publication Publication Date Title
JP6972149B2 (ja) 音声命令システム及び音声命令方法
US11120803B2 (en) Building automation system with NLP service abstraction
US12008503B2 (en) Sensor risk assessment database
US9361637B2 (en) System and method for providing diagnostic services
AU2014233918B2 (en) Contractor locator, dispatch, scheduling, and component purchasing service
US10607478B1 (en) Building security system with false alarm reduction using hierarchical relationships
US20140279571A1 (en) Contractor locator and dispatch service
KR20170096133A (ko) 일체형 위험 요소 관리 및 완화 시스템
US20150302414A1 (en) Contractor dispatch service
CN113011856A (zh) 能源企业线上入驻方法、装置、电子设备和介质
JP2023052661A (ja) 設備管理システム及び設備管理方法
JP4310648B2 (ja) 設備環境データ分析システムおよび設備環境データ分析方法
US10693757B2 (en) Interface layer for diagnostic support of network-accessible devices
US10389119B2 (en) Electricity wheeling control apparatus, electricity wheeling control method, and electricity wheeling control system
GB2536948A (en) System and method for monitoring maintenance of appliances
WO2019065599A1 (ja) 設備管理システム及び設備管理方法
JP2019062336A (ja) 通信制御装置および通信制御方法
KR20150121648A (ko) 수선의뢰 장치 및 그 방법
KR20200039165A (ko) 대상 건물에 대한 건물 에너지 모델을 생성하는 장치, 방법 및 컴퓨터 프로그램
Redlein et al. Environmental and Social monitoring in existing building structures–results of a case study within several historical buildings
TWI817046B (zh) 熱泵租賃管理系統及其管理方法
JP2023003310A (ja) 電力制御システム、情報処理モジュール、及び、情報処理方法
CA2944208A1 (en) System and method for monitoring maintenance of appliances
KR102364178B1 (ko) 블록체인을 기반으로 한 태양전지모듈 이력정보관리방법
CN113159722A (zh) 业务审核系统、方法、装置、计算机设备和存储介质

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 18862830

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2019545567

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

ENP Entry into the national phase

Ref document number: 2018862830

Country of ref document: EP

Effective date: 20200428