JP2020077940A - Control system, control method, terminal device, program, and sound wave output device - Google Patents

Control system, control method, terminal device, program, and sound wave output device Download PDF

Info

Publication number
JP2020077940A
JP2020077940A JP2018209105A JP2018209105A JP2020077940A JP 2020077940 A JP2020077940 A JP 2020077940A JP 2018209105 A JP2018209105 A JP 2018209105A JP 2018209105 A JP2018209105 A JP 2018209105A JP 2020077940 A JP2020077940 A JP 2020077940A
Authority
JP
Japan
Prior art keywords
sound wave
control
unit
signal
wave output
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2018209105A
Other languages
Japanese (ja)
Other versions
JP7172461B2 (en
Inventor
恭也 落合
Kyoya Ochiai
恭也 落合
慎吾 松下
Shingo Matsushita
慎吾 松下
章弘 淺井
Akihiro Asai
章弘 淺井
章洋 武捨
Akihiro Takesute
章洋 武捨
勉 川瀬
Tsutomu Kawase
勉 川瀬
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ricoh Co Ltd
Original Assignee
Ricoh Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ricoh Co Ltd filed Critical Ricoh Co Ltd
Priority to JP2018209105A priority Critical patent/JP7172461B2/en
Publication of JP2020077940A publication Critical patent/JP2020077940A/en
Application granted granted Critical
Publication of JP7172461B2 publication Critical patent/JP7172461B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Selective Calling Equipment (AREA)
  • Telephonic Communication Services (AREA)

Abstract

To provide a control system that controls an apparatus from a terminal device via a control device, and to make it possible to achieve the control device controlling the apparatus with a simpler configuration.SOLUTION: The control system is a control system that has a sound wave output device and a control device controlling an apparatus. The sound wave output device has a receiving unit that receives a first sound wave signal transmitted from a terminal device and having first identification information corresponding to a control operation for controlling the apparatus, and a first sound wave output unit that outputs a sound wave having the first identification information based on the first sound wave signal received by the receiving unit. The control device has an identification information acquisition unit that acquires the first identification information included in the sound wave output by the sound wave output device, a conversion unit that converts the first identification information acquired by the identification information acquisition unit into a control signal for controlling the apparatus, and a control signal output unit that outputs, to the apparatus, the control signal for controlling the apparatus.SELECTED DRAWING: Figure 6

Description

本発明は、制御システム、制御方法、端末装置、プログラム、及び音波出力装置に関する。   The present invention relates to a control system, a control method, a terminal device, a program, and a sound wave output device.

機器を制御する制御装置とネットワークを介して接続される端末装置に対して、機器を制御する音声命令を入力することにより、機器を遠隔操作する制御システムが知られている。   A control system is known in which a device is remotely controlled by inputting a voice command for controlling the device to a terminal device connected to a control device for controlling the device via a network.

例えば、端末装置に機器を制御する音声命令を入力して、ネットワークを介して接続される制御装置に送信し、制御装置が、音声命令を音声認識するとともに制御情報に変換して機器を制御する遠隔音声制御装置が知られている(例えば、特許文献1参照)。   For example, a voice command for controlling a device is input to a terminal device and transmitted to a control device connected via a network, and the control device recognizes the voice command and converts the voice command into control information to control the device. A remote voice control device is known (for example, refer to Patent Document 1).

特許文献1に開示された技術では、機器を制御する制御装置に、音声命令を認識する音声認識機能を備えられているので、制御装置を簡易な構成で実現することが困難である。   In the technology disclosed in Patent Document 1, since the control device that controls the device is provided with the voice recognition function that recognizes the voice command, it is difficult to realize the control device with a simple configuration.

本発明の一実施形態は、上記の問題点に鑑みてなされたものであって、端末装置から、制御装置を介して機器を制御する制御システムにおいて、機器を制御する制御装置をより簡易な構成で実現できるようにする。   One embodiment of the present invention has been made in view of the above problems, and in a control system for controlling a device from a terminal device via the control device, a control device for controlling the device has a simpler configuration. So that it can be realized in.

上記課題を解決するため、本発明の一実施形態に係る制御システムは、音波出力装置と、機器を制御する制御装置とを有する制御システムであって、前記音波出力装置は、端末装置から送信される、前記機器を制御する制御操作に対応する第1の識別情報を有する第1の音波信号を受信する受信部と、前記受信部が受信した前記第1の音波信号に基づいて、前記第1の識別情報を有する音波を出力する第1の音波出力部と、を有し、前記制御装置は、前記音波出力装置が出力する音波が有する前記第1の識別情報を取得する識別情報取得部と、前記識別情報取得部が取得した前記第1の識別情報を、前記機器を制御する制御信号に変換する変換部と、前記機器を制御する制御信号を前記機器に出力する制御信号出力部と、を有する。   In order to solve the above problems, a control system according to an embodiment of the present invention is a control system including a sound wave output device and a control device that controls a device, wherein the sound wave output device is transmitted from a terminal device. A receiving unit for receiving a first sound wave signal having first identification information corresponding to a control operation for controlling the device, and the first sound wave signal based on the first sound wave signal received by the receiving unit. A first sound wave output unit that outputs a sound wave having identification information of, and the control device acquires an identification information acquisition unit that acquires the first identification information that the sound wave output by the sound wave output device has. A conversion unit that converts the first identification information acquired by the identification information acquisition unit into a control signal that controls the device; and a control signal output unit that outputs a control signal that controls the device to the device, Have.

本発明の実施の形態によれば、端末装置から、制御装置を介して機器を制御する制御システムにおいて、機器を制御する制御装置をより簡易な構成で実現できるようになる。   According to the embodiment of the present invention, in a control system for controlling a device from a terminal device via a control device, a control device for controlling a device can be realized with a simpler configuration.

第1の実施形態に係る制御システムのシステム構成の一例を示す図である。It is a figure which shows an example of the system configuration of the control system which concerns on 1st Embodiment. 第1の実施形態に係る制御システムのシステム構成の別の一例を示す図である。It is a figure which shows another example of the system configuration of the control system which concerns on 1st Embodiment. 第1の実施形態に係る音波出力装置のハードウェア構成の例を示す図である。It is a figure which shows the example of the hardware constitutions of the sound wave output device which concerns on 1st Embodiment. 第1の実施形態に係る制御装置のハードウェア構成の例を示す図である。It is a figure which shows the example of the hardware constitutions of the control apparatus which concerns on 1st Embodiment. 第1の実施形態に係る端末装置のハードウェア構成の例を示す図である。It is a figure which shows the example of the hardware constitutions of the terminal device which concerns on 1st Embodiment. 第1の実施形態に係る制御システムの機能構成の例を示す図である。It is a figure showing an example of functional composition of a control system concerning a 1st embodiment. 第1の実施形態に係る制御システムの処理の例を示すシーケンス図である。It is a sequence diagram which shows the example of a process of the control system which concerns on 1st Embodiment. 第2の実施形態に係る制御システムのシステム構成の一例を示す図である。It is a figure which shows an example of the system configuration of the control system which concerns on 2nd Embodiment. 第2の実施形態に係る音声出力装置の機能構成の例を示す図である。It is a figure which shows the example of a functional structure of the audio output device which concerns on 2nd Embodiment. 第2の実施形態に係る出力制御処理の例を示すフローチャートである。It is a flow chart which shows an example of output control processing concerning a 2nd embodiment. 第2の実施形態に係る制御システムの処理の例を示すシーケンス図である。It is a sequence diagram which shows the example of a process of the control system which concerns on 2nd Embodiment. 第3の実施形態に係る音波による通信制御の例を示すフローチャートである。It is a flow chart which shows the example of communication control by the sound wave concerning a 3rd embodiment. 第3の実施形態に係る制御IDの登録処理の例を示すフローチャートである。It is a flow chart which shows an example of registration processing of a control ID concerning a 3rd embodiment. 第3の実施形態に係る制御IDの削除処理の例を示すフローチャートである。It is a flow chart which shows an example of control ID deletion processing concerning a 3rd embodiment. 第3の実施形態に係るタイマ処理の例を示すフローチャートである。11 is a flowchart showing an example of timer processing according to the third embodiment. 第3の実施形態に係るセンサ処理の例を示すフローチャートである。It is a flow chart which shows an example of sensor processing concerning a 3rd embodiment.

以下に、本発明の実施の形態について、添付の図面を参照して説明する。   Embodiments of the present invention will be described below with reference to the accompanying drawings.

<システム構成>
図1は、第1の実施形態に係る制御システムのシステム構成の一例を示す図である。制御システム100は、例えば、図1に示すように、音波出力装置101、制御装置102、制御対象となる機器103、及びユーザ105が利用する端末装置104等を含む。
<System configuration>
FIG. 1 is a diagram showing an example of a system configuration of a control system according to the first embodiment. The control system 100 includes, for example, as shown in FIG. 1, a sound wave output device 101, a control device 102, a device 103 to be controlled, a terminal device 104 used by a user 105, and the like.

音波出力装置101は、例えば、住宅や事務所等の建物107内に設置されており、通信ネットワーク106に接続されている。また、音波出力装置101は、通信ネットワーク106を介して端末装置104と通信可能であり、端末装置104から送信される、所定の識別情報(以下、制御IDと呼ぶ)を有する音波信号を受信して、当該制御IDを有する音波108を出力する。   The sound wave output device 101 is installed in, for example, a building 107 such as a house or an office, and is connected to the communication network 106. The sound wave output device 101 is capable of communicating with the terminal device 104 via the communication network 106, and receives a sound wave signal having predetermined identification information (hereinafter referred to as a control ID) transmitted from the terminal device 104. Then, the sound wave 108 having the control ID is output.

制御装置102は、例えば、建物107内に設置されており、音波出力装置101から出力される音波から制御IDを取得する。また、制御装置102は、記憶部等に予め記憶した制御IDと制御信号との対応関係に基づいて、制御IDに対応する制御信号を特定し、特定した制御信号を制御対象となる機器103に出力する。   The control device 102 is installed in, for example, the building 107, and acquires the control ID from the sound wave output from the sound wave output device 101. In addition, the control device 102 identifies the control signal corresponding to the control ID based on the correspondence relationship between the control ID and the control signal stored in advance in the storage unit or the like, and assigns the identified control signal to the device 103 to be controlled. Output.

例えば、機器103が、赤外線リモコンで電源のオン/オフが可能な空調装置であり、取得した制御IDに対応する制御信号が、空調装置の電源をオンさせるための赤外線信号であるものとする。この場合、制御装置102は、予め記憶した制御IDと制御信号との対応関係を参照して、制御IDに対応する赤外線の発光パターンを特定し、特定した発光パターンで赤外線信号(制御信号の一例)109を出力する。   For example, it is assumed that the device 103 is an air conditioner whose power can be turned on / off by an infrared remote controller, and the control signal corresponding to the acquired control ID is an infrared signal for turning on the power of the air conditioner. In this case, the control device 102 refers to the correspondence relationship between the control ID and the control signal stored in advance, identifies the infrared emission pattern corresponding to the control ID, and uses the identified emission pattern to detect the infrared signal (an example of the control signal). ) 109 is output.

機器103は、制御システム100の制御対象となる機器であり、例えば、無線通信や赤外線等により遠隔操作が可能な様々な機器、例えば、空調装置、照明、カーテン、ドア、スマートロボット等が含まれ得る。機器103は、制御装置102から出力される制御信号に従って、制御信号に応じた処理を実行する。例えば、機器103が、前述した空調装置であり、制御信号が「電源オン」を指示する赤外線信号109である場合、空調装置は、制御信号に応じて空調装置の電源をオンにする。   The device 103 is a device to be controlled by the control system 100, and includes, for example, various devices that can be remotely controlled by wireless communication or infrared rays, such as an air conditioner, lighting, curtains, doors, and smart robots. obtain. The device 103 executes processing according to the control signal according to the control signal output from the control device 102. For example, when the device 103 is the above-described air conditioner and the control signal is the infrared signal 109 for instructing “power on”, the air conditioner turns on the power of the air conditioner according to the control signal.

端末装置104は、例えば、ユーザ105が利用するスマートフォン、タブレット端末等の情報端末である。   The terminal device 104 is, for example, an information terminal such as a smartphone or a tablet terminal used by the user 105.

例えば、端末装置104は、制御システム100に対応するアプリケーションプログラム(以下、アプリと呼ぶ)を実行することにより、機器103の制御内容の一覧を、表示部に選択可能に表示する。また、端末装置104は、ユーザ105によって選択された制御内容を識別する制御IDを有する音波信号を生成し、生成した制御IDを有する音波信号を、通信ネットワーク106を介して音波出力装置101に送信する。   For example, the terminal device 104 displays a list of control contents of the device 103 in a selectable manner on the display unit by executing an application program (hereinafter referred to as an application) corresponding to the control system 100. Further, the terminal device 104 generates a sound wave signal having a control ID for identifying the control content selected by the user 105, and transmits the sound wave signal having the generated control ID to the sound wave output device 101 via the communication network 106. To do.

また、別の一例として、端末装置104は、音声認識機能を有し、ユーザ105が発声するボイスコマンド(音声命令)を認識して、ボイスコマンドに対応する制御IDを有する音波信号を作成するものであっても良い。   As another example, the terminal device 104 has a voice recognition function, recognizes a voice command (voice command) uttered by the user 105, and creates a sound wave signal having a control ID corresponding to the voice command. May be

なお、本実施形態では、制御IDを有する音波信号の作成方法について特に限定しないが、一例として、端末装置104は、所定の周波数の音波をオン/オフさせることにより、制御IDを表すものであっても良い。   In the present embodiment, the method of creating the sound wave signal having the control ID is not particularly limited, but as an example, the terminal device 104 represents the control ID by turning on and off sound waves of a predetermined frequency. May be.

具体的な一例として、周波数f1、f2、・・・、f7の7個の周波数の音波を用いて、7ビットの制御IDを表すことができる。例えば、各周波数は、周波数f1が第1のビット、周波数f2が第2のビット、・・・、周波数f7が第7のビットと、それぞれ、1つのビットに対応している。また、各ビットは、対応する周波数に音波が出力されているときデジタル値の「1」を表し、対応する出力されていないときデジタル値の「0」を表すことができる。なお、識別情報のビット数「7」は一例であり、他のビット数であっても良い。   As a specific example, a 7-bit control ID can be represented by using sound waves having seven frequencies f1, f2, ..., F7. For example, each frequency corresponds to one bit such that the frequency f1 is the first bit, the frequency f2 is the second bit, ..., And the frequency f7 is the seventh bit. Further, each bit can represent a digital value “1” when a sound wave is output to the corresponding frequency, and can represent a digital value “0” when the corresponding sound wave is not output. The bit number “7” of the identification information is an example, and another bit number may be used.

好ましくは、周波数f1、f2、・・・、f7は、予め定められた周波数帯の範囲内において、所定の周波数間隔で配置される。制御装置102は、音波出力装置101から音波を受信し、周波数f1、f2、・・・、f7の音波の有無を判断することにより、音波が表す制御IDを検出することができる。   Preferably, the frequencies f1, f2, ..., F7 are arranged at predetermined frequency intervals within the range of a predetermined frequency band. The control device 102 can detect the control ID represented by the sound wave by receiving the sound wave from the sound wave output device 101 and determining the presence or absence of the sound wave of the frequencies f1, f2, ..., F7.

なお、上記の制御IDを有する音波の作成方法は一例であり、制御装置102は他の方法により、制御IDを有する音波を作成するものであっても良い。   The method of creating the sound wave having the control ID is an example, and the control device 102 may create the sound wave having the control ID by another method.

上記の構成により、本実施形態によれば、端末装置104から、制御装置102を介して機器103を制御する制御システム100において、機器103を制御する制御装置102をより簡易な構成で実現できるようになる。例えば、音声認識機能や、ネットワーク通信機能等を有していなくても、制御装置102を実現できるようになる。   With the above configuration, according to the present embodiment, in the control system 100 that controls the device 103 from the terminal device 104 via the control device 102, the control device 102 that controls the device 103 can be realized with a simpler configuration. become. For example, the control device 102 can be realized without having a voice recognition function or a network communication function.

なお、図1に示す制御システム100のシステム構成は一例である。例えば、制御装置102は、図2に示すように、制御対象となる機器103が備えていても良いし、ケーブル等で機器103に有線接続されているものであっても良い。   The system configuration of the control system 100 shown in FIG. 1 is an example. For example, the control device 102 may be included in the device 103 to be controlled as shown in FIG. 2, or may be connected to the device 103 by a cable or the like by wire.

例えば、制御装置102は、スマートロボット等の機器103に内蔵され、スマートロボット等を制御するものであっても良い。また、制御装置102は、カーテンやブラインド等の機器103のモータに有線接続され、モータを駆動する駆動信号(制御信号の一例)により、カーテンやブラインド等の開閉を制御するもの等であっても良い。   For example, the control device 102 may be built in a device 103 such as a smart robot and control the smart robot or the like. Further, the control device 102 may be connected to the motor of the device 103 such as a curtain or a blind by wire, and may control the opening and closing of the curtain or the blind by a drive signal (an example of a control signal) for driving the motor. good.

<ハードウェア構成>
続いて、各装置のハードウェア構成の例について説明する。
<Hardware configuration>
Next, an example of the hardware configuration of each device will be described.

(音波出力装置のハードウェア構成)
図3は、第1の実施形態に係る音波出力装置のハードウェア構成の例を示す図である。音波出力装置101は、コンピュータの構成を備えており、例えば、CPU(Central Processing Unit)301、メモリ302、操作部303、ネットワークI/F(Interface)304、音声I/F305、マイク306、スピーカ307、センサI/F308、温度センサ309、照度センサ310、及びバス311等を有する。
(Hardware configuration of sound wave output device)
FIG. 3 is a diagram illustrating an example of the hardware configuration of the sound wave output device according to the first embodiment. The sound wave output device 101 has a computer configuration, and includes, for example, a CPU (Central Processing Unit) 301, a memory 302, an operation unit 303, a network I / F (Interface) 304, a voice I / F 305, a microphone 306, and a speaker 307. , A sensor I / F 308, a temperature sensor 309, an illuminance sensor 310, a bus 311 and the like.

CPU301は、メモリ302等に格納された所定のプログラムを実行することにより、音波出力装置101の各機能を実現する演算装置である。メモリ302には、例えば、RAM(Random Access Memory)、ROM(Read Only Memory)、ストレージデバイス等の各種の記憶装置が含まれる。   The CPU 301 is an arithmetic device that realizes each function of the sound wave output device 101 by executing a predetermined program stored in the memory 302 or the like. The memory 302 includes various storage devices such as a RAM (Random Access Memory), a ROM (Read Only Memory), and a storage device.

操作部303は、音波出力装置101の設定や操作等を受け付けるキー、ボタン、タッチパネル等の入力デバイスや、設定画面等を表示するディスプレイ、発光デバイス等を含む。ネットワークI/F304は、音波出力装置101を通信ネットワーク106に接続するための有線又は無線の通信インタフェースである。   The operation unit 303 includes keys, buttons, a touch panel, and other input devices that accept settings and operations of the sound wave output apparatus 101, a display that displays a setting screen, and a light emitting device. The network I / F 304 is a wired or wireless communication interface for connecting the sound wave output device 101 to the communication network 106.

音声I/F305は、例えば、マイク306から出力される音波信号を増幅するマイクアンプ、スピーカ307に出力する音波信号を増幅するスピーカアンプ等を含む。また、音声I/F305には、音波信号に各種の信号処理を実行する信号処理回路等が含まれていても良い。マイク306は、音波出力装置101の周辺の音波を取得し音波信号に変換するマイクロフォン等である。スピーカ307は、音波信号を音波に変換して出力するスピーカ等である。   The audio I / F 305 includes, for example, a microphone amplifier that amplifies the sound wave signal output from the microphone 306, a speaker amplifier that amplifies the sound wave signal output to the speaker 307, and the like. Further, the audio I / F 305 may include a signal processing circuit that executes various kinds of signal processing on the sound wave signal. The microphone 306 is a microphone or the like that acquires a sound wave around the sound wave output device 101 and converts the sound wave into a sound wave signal. The speaker 307 is a speaker or the like that converts a sound wave signal into a sound wave and outputs the sound wave.

センサI/F308は、音波出力装置101に、温度センサ309、照度センサ310等のセンサを接続するためのインタフェースである。温度センサ309は、音波出力装置101の周辺の温度を検知するセンサである。照度センサ310は、音波出力装置101の周辺の照度を検知するセンサである。バス311は、上記の各構成要素に接続され、アドレス信号、データ信号、及び各種の制御信号等を伝送する。   The sensor I / F 308 is an interface for connecting sensors such as the temperature sensor 309 and the illuminance sensor 310 to the sound wave output device 101. The temperature sensor 309 is a sensor that detects the temperature around the sound wave output device 101. The illuminance sensor 310 is a sensor that detects illuminance around the sound wave output device 101. The bus 311 is connected to each of the above components and transmits an address signal, a data signal, various control signals, and the like.

(制御装置のハードウェア構成)
図4は、一実施形態に係る制御装置のハードウェア構成の例を示す図である。制御装置102は、コンピュータの構成を備えており、例えば、CPU401、メモリ402、操作部403、音声I/F404、マイク405、スピーカ406、赤外線送受信機407、外部接続I/F408、及びバス409等を有する。
(Hardware configuration of control device)
FIG. 4 is a diagram illustrating an example of the hardware configuration of the control device according to the embodiment. The control device 102 has a computer configuration, and includes, for example, a CPU 401, a memory 402, an operation unit 403, a voice I / F 404, a microphone 405, a speaker 406, an infrared transceiver 407, an external connection I / F 408, a bus 409, and the like. Have.

CPU401は、メモリ402等に格納された所定のプログラムを実行することにより、制御装置102の各機能を実現する演算装置である。メモリ402には、例えば、RAM、ROM、ストレージデバイス等の各種の記憶装置が含まれる。操作部403は、制御装置102の設定や操作等を受け付けるキー、ボタン、タッチパネル等の入力デバイスや、設定画面等を表示するディスプレイ、発光デバイス等を含む。   The CPU 401 is an arithmetic device that realizes each function of the control device 102 by executing a predetermined program stored in the memory 402 or the like. The memory 402 includes various storage devices such as a RAM, a ROM, and a storage device. The operation unit 403 includes keys, buttons, touch panels, and other input devices that accept settings and operations of the control device 102, displays that display setting screens, and light-emitting devices.

音声I/F404は、例えば、マイク405から出力される音波信号を増幅するマイクアンプ、スピーカ406に出力する音波信号を増幅するスピーカアンプ等を含む。また、音声I/F404には、音波信号に各種の信号処理を実行する信号処理回路等が含まれていても良い。マイク405は、制御装置102の周辺の音波を取得し音波信号に変換するマイクロフォン等である。スピーカ406は、音波信号を音波に変換して出力するスピーカ等である。   The audio I / F 404 includes, for example, a microphone amplifier that amplifies a sound wave signal output from the microphone 405, a speaker amplifier that amplifies a sound wave signal output to the speaker 406, and the like. Further, the audio I / F 404 may include a signal processing circuit that executes various kinds of signal processing on the sound wave signal. The microphone 405 is a microphone or the like that acquires a sound wave around the control device 102 and converts the sound wave into a sound wave signal. The speaker 406 is a speaker or the like that converts a sound wave signal into a sound wave and outputs the sound wave.

赤外線送受信機407は、機器103を制御する赤外線信号109を送信する発光デバイス、機器103を制御するリモコンが出力する赤外線信号を受信する受光デバイス、及び赤外線信号を送受信する送受信回路等を含む回路、又はモジュールである。   The infrared transmitter / receiver 407 is a circuit including a light emitting device that transmits an infrared signal 109 that controls the device 103, a light receiving device that receives an infrared signal output by a remote controller that controls the device 103, and a transmission / reception circuit that transmits and receives the infrared signal. Or it is a module.

外部接続I/F408は、外部装置を接続するためのインタフェースである。外部装置には、例えば、外部記憶装置や、制御対象となる機器103、モータ等が含まれ得る。バス409は、上記の各構成要素に接続され、アドレス信号、データ信号、及び各種の制御信号等を伝送する。   The external connection I / F 408 is an interface for connecting an external device. The external device may include, for example, an external storage device, a device 103 to be controlled, a motor, and the like. The bus 409 is connected to each of the above components and transmits an address signal, a data signal, various control signals, and the like.

(端末装置の機能構成)
図5は、一実施形態に係る端末装置のハードウェア構成の例を示す図である。端末装置104は、コンピュータの構成を備えており、例えば、CPU501、メモリ502、入力装置503、表示装置504、通信I/F505、音声I/F506、マイク507、スピーカ508、及びバス509等を有する。
(Functional configuration of terminal device)
FIG. 5 is a diagram illustrating an example of the hardware configuration of the terminal device according to the embodiment. The terminal device 104 has a computer configuration and includes, for example, a CPU 501, a memory 502, an input device 503, a display device 504, a communication I / F 505, a voice I / F 506, a microphone 507, a speaker 508, a bus 509, and the like. ..

CPU501は、メモリ502等に格納された所定のプログラムを実行することにより、端末装置104の各機能を実現する演算装置である。メモリ402には、例えば、RAM、ROM、ストレージデバイス等の各種の記憶装置が含まれる。   The CPU 501 is an arithmetic device that realizes each function of the terminal device 104 by executing a predetermined program stored in the memory 502 or the like. The memory 402 includes various storage devices such as a RAM, a ROM, and a storage device.

入力装置503は、ユーザ105の入力操作を受け付ける、例えば、タッチパネル、キー、ボタン等の入力デバイスである。表示装置504は、操作画面や設定画面等を表示するディスプレイ等の表示デバイスである。なお、入力装置503、及び表示装置504は、一体化されたタッチパネルディスプレイ等の表示入力装置であっても良い。   The input device 503 is an input device such as a touch panel, a key, or a button that receives an input operation of the user 105. The display device 504 is a display device such as a display that displays an operation screen, a setting screen, and the like. The input device 503 and the display device 504 may be a display input device such as an integrated touch panel display.

通信I/F505は、例えば、無線通信により、端末装置104を通信ネットワーク106に接続する通信インタフェースである。音声I/F506は、例えば、マイク507から出力される音波信号を増幅するマイクアンプ、スピーカ508に出力する音波信号を増幅するスピーカアンプ等を含む。また、音声I/F506には、音波信号に各種の信号処理を実行する信号処理回路等が含まれていても良い。   The communication I / F 505 is a communication interface that connects the terminal device 104 to the communication network 106 by wireless communication, for example. The audio I / F 506 includes, for example, a microphone amplifier that amplifies the sound wave signal output from the microphone 507, a speaker amplifier that amplifies the sound wave signal output to the speaker 508, and the like. The audio I / F 506 may include a signal processing circuit that executes various kinds of signal processing on the sound wave signal.

マイク507は、端末装置104の周辺の音波を取得し音波信号に変換するマイクロフォン等である。スピーカ508は、音波信号を音波に変換して出力するスピーカ等である。バス509は、上記の各構成要素に接続され、アドレス信号、データ信号、及び各種の制御信号等を伝送する。   The microphone 507 is a microphone or the like that acquires a sound wave around the terminal device 104 and converts it into a sound wave signal. The speaker 508 is a speaker or the like that converts a sound wave signal into a sound wave and outputs the sound wave. The bus 509 is connected to each of the above components and transmits an address signal, a data signal, various control signals, and the like.

<機能構成>
図6は、第1の実施形態に係る制御システムの機能構成の例を示す図である。
<Functional configuration>
FIG. 6 is a diagram illustrating an example of a functional configuration of the control system according to the first embodiment.

(端末装置の機能構成)
端末装置104は、例えば、図5のCPU501で所定のプログラムを実行することにより、操作受付部611、音波信号生成部612、通信部613、音声取得部614、音声認識部615、及び記憶部616等を実現している。なお、上記の各構成要素のうち、少なくとも一部は、ハードウェアによって実現されるものであっても良い。
(Functional configuration of terminal device)
The terminal device 104, for example, by executing a predetermined program by the CPU 501 of FIG. 5, the operation reception unit 611, the sound wave signal generation unit 612, the communication unit 613, the voice acquisition unit 614, the voice recognition unit 615, and the storage unit 616. And so on. Note that at least a part of each of the above components may be realized by hardware.

操作受付部611は、ユーザ105による、制御対象となる機器103を制御する制御操作を受け付ける。例えば、操作受付部611は、機器103を制御する制御コマンドの一覧を、図5の表示装置504等に選択可能に表示させて、ユーザ105によって選択された制御コマンドを受け付ける。なお、操作受付部611は、機器103を制御する制御操作を受け付ける受付部の一例である。   The operation receiving unit 611 receives a control operation by the user 105 for controlling the device 103 to be controlled. For example, the operation reception unit 611 displays a list of control commands for controlling the device 103 in a selectable manner on the display device 504 or the like in FIG. 5, and receives the control command selected by the user 105. The operation reception unit 611 is an example of a reception unit that receives a control operation for controlling the device 103.

音波信号生成部(第1の音波信号生成部)612は、ユーザ105による制御操作に対応する制御ID(第1の識別情報)を有する音波信号(第1の音波信号)を生成する。   The sound wave signal generation unit (first sound wave signal generation unit) 612 generates a sound wave signal (first sound wave signal) having a control ID (first identification information) corresponding to the control operation by the user 105.

例えば、端末装置104は、表1に示すような、制御操作と制御IDとの対応関係を示す情報を有している。   For example, the terminal device 104 has information as shown in Table 1 indicating the correspondence between control operations and control IDs.

Figure 2020077940
表1は、制御操作と制御IDとの対応関係を示す情報の一例を示している。
Figure 2020077940
Table 1 shows an example of information indicating the correspondence between control operations and control IDs.

例えば、表1において、制御操作「空調装置 オン」は、制御ID「xxx1001」に対応付けられており、制御操作「テレビ オフ」は、制御ID「xxx2000」に対応付けられている。また、必須ではないが、制御操作と制御IDとの対応関係を示す情報には、ボイスコマンド(音声命令)と制御IDとの対応関係が記憶されていても良い。   For example, in Table 1, the control operation “air conditioner on” is associated with the control ID “xxx1001”, and the control operation “TV off” is associated with the control ID “xxx2000”. Although not essential, the information indicating the correspondence between the control operation and the control ID may store the correspondence between the voice command (voice command) and the control ID.

音波信号生成部612は、この対応関係に基づいて、ユーザ105による制御操作に対応する制御IDを特定することができる。また、音波信号生成部612は、例えば、前述したように、複数の周波数における音波のオン/オフ等により、特定した制御IDを表す音波信号を生成する。   The sound wave signal generation unit 612 can specify the control ID corresponding to the control operation by the user 105 based on this correspondence. Further, the sound wave signal generation unit 612, for example, as described above, generates a sound wave signal representing the specified control ID by turning on / off sound waves at a plurality of frequencies.

通信部613は、例えば、図5の通信I/F505を用いて、端末装置104を通信ネットワーク106に接続し、音波出力装置101と通信を行う。例えば、通信部613は、音波信号生成部612が生成した制御IDを有する音波信号(第1の音波信号)を、音波出力装置101に送信する送信部として機能する。   The communication unit 613 connects the terminal device 104 to the communication network 106 and communicates with the sound wave output device 101 using the communication I / F 505 of FIG. 5, for example. For example, the communication unit 613 functions as a transmission unit that transmits the sound wave signal (first sound wave signal) having the control ID generated by the sound wave signal generation unit 612 to the sound wave output device 101.

音声取得部614は、ユーザ105が発声する音声を取得する。例えば、音声取得部614は、ユーザ105がボイスコマンド(音声命令)を発声した音声等を取得する。   The voice acquisition unit 614 acquires a voice uttered by the user 105. For example, the voice acquisition unit 614 acquires a voice or the like generated by the user 105 issuing a voice command (voice command).

音声認識部(第1の音声認識部)615は、音声取得部614が取得した音声に対して音声認識処理を行い、ボイスコマンドを認識する。   The voice recognition unit (first voice recognition unit) 615 performs voice recognition processing on the voice acquired by the voice acquisition unit 614 and recognizes a voice command.

音声認識部615がボイスコマンドを認識することができた場合、音波信号生成部612は、音声認識部615が認識したボイスコマンドに対応する制御IDを有する音波信号を作成する。なお、ボイスコマンドに対応する制御IDは、例えば、前述した表1を用いて特定することができる。   When the voice recognition unit 615 can recognize the voice command, the sound wave signal generation unit 612 creates a sound wave signal having a control ID corresponding to the voice command recognized by the voice recognition unit 615. The control ID corresponding to the voice command can be specified using, for example, Table 1 described above.

なお、音声取得部614は、機器103を制御する制御操作を受け付ける受付部の別の一例である。端末装置104は、機器103を制御する制御操作を受け付ける受付部として、操作受付部611、音声取得部614のいずれか、又は両方を有している。   The voice acquisition unit 614 is another example of a reception unit that receives a control operation for controlling the device 103. The terminal device 104 has one or both of the operation reception unit 611 and the voice acquisition unit 614 as a reception unit that receives a control operation for controlling the device 103.

記憶部616は、例えば、図5のCPU501で実行されるプログラム、及びメモリ502等によって実現され、表1の対応関係を示す情報を含む様々な情報を記憶する。   The storage unit 616 is realized by, for example, the program executed by the CPU 501 in FIG. 5, the memory 502, and the like, and stores various information including information indicating the correspondence relationship in Table 1.

(音波出力装置の機能構成)
音波出力装置101は、例えば、図3のCPU301で所定のプログラムを実行することにより、通信部621、出力制御部622、音波出力部623、音波取得部624、状態情報取得部625、登録制御部626、タイマ制御部627、センサ制御部628、操作受付部629、及び記憶部630等を実現している。なお、上記の各構成要素のうち、少なくとも一部は、ハードウェアによって実現されるものであっても良い。
(Functional configuration of sound wave output device)
The sound wave output device 101, for example, by executing a predetermined program by the CPU 301 of FIG. 626, a timer control unit 627, a sensor control unit 628, an operation reception unit 629, a storage unit 630, and the like are realized. Note that at least a part of each of the above components may be realized by hardware.

通信部621は、例えば、図3のネットワークI/F304を用いて、音波出力装置101を通信ネットワーク106に接続し、端末装置104等と通信を行う。例えば、通信部621は、端末装置104から送信される、機器103を制御する制御操作に対応する制御ID(第1の識別情報)を有する音波信号(第1の音波信号)を受信する受信部として機能する。   The communication unit 621 connects the sound wave output device 101 to the communication network 106 by using, for example, the network I / F 304 in FIG. 3, and communicates with the terminal device 104 and the like. For example, the communication unit 621 receives a sound wave signal (first sound wave signal) having a control ID (first identification information) corresponding to a control operation for controlling the device 103, which is transmitted from the terminal device 104. Function as.

出力制御部622は、音波出力部623を制御して、制御IDを有する音波を出力させる。例えば、出力制御部622は、通信部621が、端末装置104から制御IDを有する音波信号を受信した場合、受信した音波信号を音波出力部623に出力し、音波出力部623に、制御IDを有する音波を出力させる。   The output control unit 622 controls the sound wave output unit 623 to output the sound wave having the control ID. For example, when the communication unit 621 receives the sound wave signal having the control ID from the terminal device 104, the output control unit 622 outputs the received sound wave signal to the sound wave output unit 623, and outputs the control ID to the sound wave output unit 623. The sound wave that it has is output.

音波出力部(第1の音波出力部)623は、出力制御部622の制御に従って、制御IDを有する音波を出力する。例えば、音波出力部623は、出力制御部622によって、通信部621が受信した制御IDを有する音波信号を入力された場合、図3の音声I/F305、スピーカ307等を用いて、入力された制御IDを有する音波信号を、制御IDを有する音波に変換して出力する。   The sound wave output unit (first sound wave output unit) 623 outputs a sound wave having a control ID under the control of the output control unit 622. For example, when the sound wave signal having the control ID received by the communication unit 621 is input to the sound wave output unit 623 by the output control unit 622, the sound wave output unit 623 is input using the sound I / F 305 and the speaker 307 in FIG. 3. The sound wave signal having the control ID is converted into a sound wave having the control ID and output.

音波取得部624は、例えば、図3のマイク306、音声I/F305等を用いて、音波出力装置101の周辺の音波を取得する。例えば、音波取得部624は、制御装置102が出力する音波等を取得する。   The sound wave acquisition unit 624 acquires sound waves around the sound wave output device 101 using, for example, the microphone 306 and the sound I / F 305 in FIG. 3. For example, the sound wave acquisition unit 624 acquires a sound wave or the like output by the control device 102.

状態情報取得部625は、音波取得部624が取得した音波に含まれる状態情報等を取得する。例えば、制御装置102は、必要に応じて、制御装置102の状態を示す識別情報(以下、状態IDと呼ぶ)を有する音波を出力する。状態情報取得部625は、音波取得部624が取得した音波に含まれる状態ID(状態情報の一例)を取得する。   The state information acquisition unit 625 acquires the state information included in the sound waves acquired by the sound wave acquisition unit 624. For example, the control device 102 outputs a sound wave having identification information (hereinafter, referred to as a state ID) indicating the state of the control device 102 as necessary. The state information acquisition unit 625 acquires the state ID (an example of state information) included in the sound wave acquired by the sound wave acquisition unit 624.

なお、状態IDを有する音波は、例えば、前述した制御IDを有する音波と同様にして生成することができる。   The sound wave having the state ID can be generated, for example, in the same manner as the sound wave having the control ID described above.

登録制御部626は、例えば、ユーザ105の操作等に応じて、音波出力装置101や制御装置102に、新たな制御IDと制御信号との対応関係を登録する登録処理、及び対応関係を削除する削除処理等を制御する。なお、登録制御部626による登録処理、及び削除処理について、第3の実施形態で後述する。   The registration control unit 626 deletes the registration process of registering the correspondence between the new control ID and the control signal in the sound wave output device 101 or the control device 102 and the correspondence, for example, according to the operation of the user 105 or the like. Controls the deletion process. The registration processing and the deletion processing by the registration control unit 626 will be described later in the third embodiment.

タイマ制御部627は、指定された時間に、制御IDを有する音波を音波出力部623に出力させるタイマ処理を制御する。なお、タイマ制御部627によるタイマ処理については、第3の実施形態で後述する。   The timer control unit 627 controls a timer process that causes the sound wave output unit 623 to output a sound wave having a control ID at a designated time. The timer processing by the timer control unit 627 will be described later in the third embodiment.

センサ制御部628は、例えば、図3の温度センサ309、照度センサ310等の所定のセンサが検知したセンサ量に応じて、制御IDを有する音波を音波出力部623に出力させるセンサ処理を制御する。なお、センサ制御部628によるセンサ処理については、第3の実施形態で後述する。   The sensor control unit 628 controls a sensor process that causes the sound wave output unit 623 to output a sound wave having a control ID according to the sensor amount detected by a predetermined sensor such as the temperature sensor 309 and the illuminance sensor 310 in FIG. .. The sensor processing by the sensor control unit 628 will be described later in the third embodiment.

操作受付部629は、例えば、図3の操作部303等へのユーザ105の操作を受け付ける。例えば、操作受付部629は、ユーザ105による制御IDの登録操作、削除操作等を受け付ける。   The operation reception unit 629 receives, for example, an operation of the user 105 on the operation unit 303 or the like in FIG. For example, the operation reception unit 629 receives a control ID registration operation, a deletion operation, or the like by the user 105.

記憶部630は、例えば、図3のCPU301で実行されるプログラム、及びメモリ302等によって実現され、様々な情報を記憶する。   The storage unit 630 is realized by, for example, the program executed by the CPU 301 of FIG. 3, the memory 302, and the like, and stores various information.

(制御装置の機能構成)
制御装置102は、例えば、図4のCPU401で所定のプログラムを実行することにより、音波取得部641、識別情報取得部642、変換部643、制御信号出力部644、音波出力部645、状態情報送信部646、赤外線送受信部647、制御情報管理部648、及び記憶部649等を実現している。なお、上記の各機能構成の内、少なくとも一部は、ハードウェアによって実現されるものであっても良い。
(Functional configuration of control device)
The control device 102 executes, for example, a predetermined program by the CPU 401 of FIG. 4, so that the sound wave acquisition unit 641, the identification information acquisition unit 642, the conversion unit 643, the control signal output unit 644, the sound wave output unit 645, the state information transmission. The unit 646, the infrared transmission / reception unit 647, the control information management unit 648, the storage unit 649, and the like are realized. Note that at least a part of the above functional configurations may be realized by hardware.

音波取得部641は、例えば、図4のマイク405、音声I/F404等を用いて、制御装置102の周辺の音波を取得する。例えば、音波取得部641は、音波出力装置101が出力する制御IDを有する音波を取得し、取得した音波を音波信号に変換して識別情報取得部642に出力する。   The sound wave acquisition unit 641 acquires sound waves around the control device 102 using, for example, the microphone 405 and the sound I / F 404 in FIG. 4. For example, the sound wave acquisition unit 641 acquires a sound wave having the control ID output by the sound wave output device 101, converts the acquired sound wave into a sound wave signal, and outputs the sound wave signal to the identification information acquisition unit 642.

識別情報取得部642は、音波取得部641が取得した音波に含まれる制御IDを取得する。例えば、前述したように、7個の周波数f1、f2、・・・、f7を用いて制御IDが表される場合、識別情報取得部642は、音波取得部641が出力する音波信号を解析して、周波数f1、f2、・・・、f7のそれぞれについて、音波の有無を判断する。また、識別情報取得部642は、周波数f1、f2、・・・、f7のそれぞれについて、音波が出力されている周波数に対応するビットを「1」、音波が出力されていない周波数に対応するビットを「0」とすることにより、制御IDを取得する。   The identification information acquisition unit 642 acquires the control ID included in the sound wave acquired by the sound wave acquisition unit 641. For example, as described above, when the control ID is represented by using the seven frequencies f1, f2, ..., F7, the identification information acquisition unit 642 analyzes the sound wave signal output by the sound wave acquisition unit 641. Then, the presence or absence of a sound wave is determined for each of the frequencies f1, f2, ..., F7. Further, the identification information acquisition unit 642 sets, for each of the frequencies f1, f2, ..., F7, the bit corresponding to the frequency at which the sound wave is output as “1”, and the bit corresponding to the frequency at which the sound wave is not output. The control ID is acquired by setting the value to "0".

変換部643は、識別情報取得部642が取得した制御IDを、機器103を制御する制御信号に変換する。例えば、制御情報管理部648は、表2に示すような、制御IDと、機器103を制御する制御信号との対応関係を示す情報を、記憶部649等に記憶して管理している。   The conversion unit 643 converts the control ID acquired by the identification information acquisition unit 642 into a control signal for controlling the device 103. For example, the control information management unit 648 stores and manages, in the storage unit 649 or the like, information indicating the correspondence relationship between the control ID and the control signal for controlling the device 103 as shown in Table 2.

Figure 2020077940
表2は、制御IDと制御信号との対応関係を示す情報の一例を示している。
Figure 2020077940
Table 2 shows an example of information indicating the correspondence between control IDs and control signals.

例えば、表2において、制御ID「xxx1001」は制御信号「発光パターンA」に対応付けられており、制御ID「xxx1000」は、制御信号「発光パターンB」に対応付けられている。   For example, in Table 2, the control ID “xxx1001” is associated with the control signal “light emission pattern A”, and the control ID “xxx1000” is associated with the control signal “light emission pattern B”.

変換部643は、この対応関係に基づいて、識別情報取得部642が取得した制御IDを、機器103を制御する制御信号に変換することができる。   Based on this correspondence, the conversion unit 643 can convert the control ID acquired by the identification information acquisition unit 642 into a control signal for controlling the device 103.

制御信号出力部644は、変換部に643によって変換された、機器103を制御する制御信号を出力する。例えば、変換部643によって変換された制御信号が「発光パターンA」である場合、制御信号出力部644は、赤外線送受信部647を用いて、「発光パターンA」で赤外線を発光させる。   The control signal output unit 644 outputs the control signal converted by the converter 643 for controlling the device 103. For example, when the control signal converted by the conversion unit 643 is the “light emission pattern A”, the control signal output unit 644 uses the infrared transmission / reception unit 647 to emit infrared light in the “light emission pattern A”.

音波出力部(第2の音波出力部)645は、例えば、図4のスピーカ406、音声I/F404等を用いて、音波を出力する。例えば、音波出力部645は、状態情報送信部646から出力された状態IDを有する音波信号を、音波に変換して出力する。   The sound wave output unit (second sound wave output unit) 645 outputs a sound wave using, for example, the speaker 406, the sound I / F 404, and the like in FIG. 4. For example, the sound wave output unit 645 converts the sound wave signal having the state ID output from the state information transmission unit 646 into a sound wave and outputs the sound wave.

状態情報送信部646は、制御装置102の状態を示す状態IDを有する音波信号を生成し、音波出力部645に出力することにより、音波出力部645に状態IDを有する音波を出力させる。   The state information transmission unit 646 generates a sound wave signal having a state ID indicating the state of the control device 102 and outputs the sound wave signal to the sound wave output unit 645, thereby causing the sound wave output unit 645 to output the sound wave having the state ID.

赤外線送受信部647は、例えば、図4の赤外線送受信機407を用いて、赤外線信号の送受信を行う。例えば、赤外線送受信部647は、制御信号出力部644の制御に従って、機器103を制御する赤外線信号を送信する。また、赤外線送受信部647は、制御情報管理部648の制御に従って、例えば、機器103用のリモコン等から出力される赤外線信号を受信する赤外線受信部として機能する。   The infrared transmission / reception unit 647 transmits / receives an infrared signal using the infrared transmission / reception device 407 of FIG. 4, for example. For example, the infrared transmission / reception unit 647 transmits an infrared signal that controls the device 103 under the control of the control signal output unit 644. Further, the infrared transmission / reception unit 647 functions as an infrared reception unit that receives an infrared signal output from, for example, a remote controller for the device 103, under the control of the control information management unit 648.

制御情報管理部648は、前述した表2に示すような、制御IDと制御信号との対応関係を示す情報を、記憶部649に記憶して管理する。また、制御情報管理部648は、音波出力装置101からの音波による制御に従って、新たな制御IDと制御信号との対応関係を、表2に示すような、制御IDと制御信号との対応関係を示す情報に登録することができる。さらに、制御情報管理部648は、音波出力装置101からの音波による制御に従って、表2に示すような、制御IDと制御信号との対応関係を示す情報から、指定された制御ID、及び対応関係を削除することができる。   The control information management unit 648 stores and manages, in the storage unit 649, information indicating the corresponding relationship between the control ID and the control signal as shown in Table 2 above. Further, the control information management unit 648, in accordance with the control by the sound wave from the sound wave output device 101, shows the correspondence relationship between the new control ID and the control signal, and the correspondence relationship between the control ID and the control signal as shown in Table 2. You can register to the information shown. Further, the control information management unit 648, in accordance with the control by the sound wave from the sound wave output device 101, specifies the control ID and the correspondence relationship from the information indicating the correspondence relationship between the control ID and the control signal as shown in Table 2. Can be deleted.

記憶部649は、例えば、表2に示すような、制御IDと制御信号との対応関係を示す情報を含む様々な情報を記憶する。   The storage unit 649 stores various kinds of information including information indicating the correspondence between the control ID and the control signal, as shown in Table 2, for example.

<処理の流れ>
続いて、第1の実施形態に係る制御方法の処理の流れについて説明する。
<Process flow>
Next, a processing flow of the control method according to the first embodiment will be described.

図7は、第1の実施形態に係る制御システムの処理の例を示すシーケンス図である。この処理は、例えば、図1に示すように、外出中のユーザ105が、端末装置104を用いて、機器103を遠隔操作する際に実行される制御システム100の処理の例を示している。なお、制御装置102は、音波出力装置101が出力する音波を取得可能な場所に設置されているものとする。   FIG. 7 is a sequence diagram showing an example of processing of the control system according to the first embodiment. For example, as shown in FIG. 1, this process shows an example of the process of the control system 100 executed when the user 105, who is out and about, remotely operates the device 103 using the terminal device 104. It is assumed that the control device 102 is installed in a place where the sound wave output by the sound wave output device 101 can be acquired.

ステップS701において、ユーザ105は、端末装置104において、制御システム100に対応するアプリの起動操作を行う。   In step S <b> 701, the user 105 operates the terminal device 104 to start an application corresponding to the control system 100.

ステップS702において、端末装置104は、制御システム100に対応するアプリを起動する。   In step S702, the terminal device 104 activates the application corresponding to the control system 100.

ステップS703において、端末装置104の操作受付部611は、例えば、図5の表示装置504に、制御操作の受付画面を表示させる。この制御操作の受付画面には、例えば、機器103を制御する制御コマンドの一覧が、選択可能に表示される。   In step S703, the operation reception unit 611 of the terminal device 104 displays the control operation reception screen on the display device 504 of FIG. 5, for example. On the control operation acceptance screen, for example, a list of control commands for controlling the device 103 is displayed in a selectable manner.

ステップS704において、ユーザ105は、端末装置104が表示する制御操作の受付画面に対して制御操作を行う。例えば、ユーザ105は、制御操作の受付画面に表示された制御コマンドの一覧から、1つの制御コマンドを選択する。   In step S704, the user 105 performs a control operation on the control operation acceptance screen displayed by the terminal device 104. For example, the user 105 selects one control command from the list of control commands displayed on the control operation acceptance screen.

ステップS705において、端末装置104の操作受付部611は、ユーザ105による制御操作を受付し、音波信号生成部612は、受け付けた制御操作に対応する制御IDを有する音波信号を生成する。例えば、音波信号生成部612は、表1に示すような、制御操作と制御IDとの対応関係を示す情報を用いて、制御操作に対応する制御IDを特定し、特定した制御IDを有する音波信号を生成する。   In step S705, the operation reception unit 611 of the terminal device 104 receives the control operation by the user 105, and the sound wave signal generation unit 612 generates a sound wave signal having a control ID corresponding to the received control operation. For example, the sound wave signal generation unit 612 specifies the control ID corresponding to the control operation by using the information indicating the correspondence relationship between the control operation and the control ID as shown in Table 1, and the sound wave having the specified control ID. Generate a signal.

ステップS706において、端末装置104の通信部613は、音波信号生成部612が作成した制御IDを有する音波信号を、通信ネットワーク106を介して、音波出力装置101に送信する。例えば、通信部613は、音波信号生成部612が生成した制御IDを有する音波信号(音声信号、又は音声データ)として、音波出力装置101に送信する。   In step S <b> 706, the communication unit 613 of the terminal device 104 transmits the sound wave signal having the control ID created by the sound wave signal generation unit 612 to the sound wave output device 101 via the communication network 106. For example, the communication unit 613 transmits the sound wave signal (sound signal or sound data) having the control ID generated by the sound wave signal generation unit 612 to the sound wave output device 101.

ステップS707において、音波出力装置101の出力制御部622は、通信部621が、端末装置104から送信された制御IDを有する音波信号を受信した場合、受信した音波信号を音波出力部623に出力する。   In step S707, when the communication unit 621 receives the sound wave signal having the control ID transmitted from the terminal device 104, the output control unit 622 of the sound wave output device 101 outputs the received sound wave signal to the sound wave output unit 623. .

ステップS708において、音波出力装置101の音波出力部623は、出力制御部622から出力された制御IDを有する音波信号を、制御IDを有する音波に変換して出力する。   In step S708, the sound wave output unit 623 of the sound wave output device 101 converts the sound wave signal having the control ID output from the output control unit 622 into a sound wave having the control ID and outputs the sound wave.

ステップS709において、制御装置102の音波取得部641は、音波出力装置101が出力した制御IDを有する音波を取得し、識別情報取得部642は、音波取得部641が取得した音波が有する制御IDを取得する。   In step S709, the sound wave acquisition unit 641 of the control device 102 acquires the sound wave having the control ID output by the sound wave output device 101, and the identification information acquisition unit 642 determines the control ID of the sound wave acquired by the sound wave acquisition unit 641. get.

ステップS710において、制御装置102の変換部643は、表2に示すような、制御IDと制御信号との対応関係を示す情報を用いて、識別情報取得部642が取得した制御IDを、機器103を制御する制御信号に変換する。   In step S710, the conversion unit 643 of the control device 102 uses the information indicating the correspondence relationship between the control ID and the control signal as shown in Table 2 to obtain the control ID acquired by the identification information acquisition unit 642 from the device 103. Is converted into a control signal for controlling.

ステップS711において、制御装置102の制御信号出力部644は、変換部643によって変換された、機器103を制御する制御信号を、機器103に出力する。   In step S711, the control signal output unit 644 of the control device 102 outputs the control signal converted by the conversion unit 643 for controlling the device 103 to the device 103.

例えば、音波出力装置101から出力された音波は制御ID「xxx1001」を有し、表2に示すように、制御ID「xxx1001」に対応する制御信号が「発光パターンA」であるものとする。この場合、制御装置102は、発光パターンAの赤外線信号を、機器103に出力する。   For example, it is assumed that the sound wave output from the sound wave output device 101 has the control ID “xxx1001”, and as shown in Table 2, the control signal corresponding to the control ID “xxx1001” is the “light emission pattern A”. In this case, the control device 102 outputs the infrared signal of the light emission pattern A to the device 103.

ステップS712において、機器103は、制御装置102から出力された制御信号に応じた処理を実行する。   In step S712, the device 103 executes processing according to the control signal output from the control device 102.

上記の処理により、例えば、ステップS704で、ユーザ105が選択した制御が「空調装置 オン」であり、かつ機器103が空調装置である場合、ユーザ105の操作に応じて、空調装置(機器103)の電源がオンに制御される。   By the above process, for example, when the control selected by the user 105 is “air conditioner on” in step S704 and the device 103 is the air conditioner, the air conditioner (device 103) is operated according to the operation of the user 105. Power is controlled to on.

本実施形態によれば、端末装置104から、制御装置102を介して機器103を制御する制御システム100において、機器103を制御する制御装置102をより簡易な構成で実現できる。   According to the present embodiment, in the control system 100 that controls the device 103 from the terminal device 104 via the control device 102, the control device 102 that controls the device 103 can be realized with a simpler configuration.

[第2の実施形態]
図8は、第2の実施形態に係る制御システムのシステム構成の一例を示す図である。図8に示すように、ユーザ105が、住宅や事務所等の建物107内にいる場合、端末装置104を用いなくても、機器103を制御できることが望ましい。
[Second Embodiment]
FIG. 8 is a diagram showing an example of the system configuration of the control system according to the second embodiment. As shown in FIG. 8, when the user 105 is in a building 107 such as a house or office, it is desirable that the device 103 can be controlled without using the terminal device 104.

第2の実施形態では、ユーザ105が、住宅や事務所等の建物107内にいる場合、端末装置104を用いなくても、機器103を制御できるようにする場合の例について説明する。   In the second embodiment, an example in which the user 105 can control the device 103 without using the terminal device 104 when the user 105 is in a building 107 such as a house or an office will be described.

<機能構成>
第2の実施形態に係る音波出力装置101、及び制御装置102のハードウェア構成は、第1の実施形態と同様で良い。また、第2の実施形態に係る制御装置102の機能構成は、第1の実施形態と同様で良い。ここでは、第2の実施形態に係る音波出力装置101の機能構成について説明する。
<Functional configuration>
The hardware configurations of the sound wave output device 101 and the control device 102 according to the second embodiment may be the same as those in the first embodiment. Further, the functional configuration of the control device 102 according to the second embodiment may be the same as that of the first embodiment. Here, the functional configuration of the sound wave output device 101 according to the second embodiment will be described.

図9は、第2の実施形態に係る音波出力装置101の機能構成の例を示す図である。図9に示すように、第2の実施形態に係る音波出力装置101は、図6に示す第1の実施形態に係る音波出力装置101の機能構成に加えて、音声取得部901、音声認識部902、及び音波信号生成部903等を有している。   FIG. 9 is a diagram illustrating an example of a functional configuration of the sound wave output device 101 according to the second embodiment. As shown in FIG. 9, a sound wave output device 101 according to the second embodiment has a functional configuration of the sound wave output device 101 according to the first embodiment shown in FIG. 902, a sound wave signal generation unit 903, and the like.

音声取得部901は、例えば、図3のCPU301で実行されるプログラムによって実現され、図3のマイク306、音声I/F305等を用いて、ユーザ105が発声する音声を取得する。例えば、音声取得部901は、ユーザ105がボイスコマンドを発声した音声を取得する。   The voice acquisition unit 901 is realized by a program executed by the CPU 301 of FIG. 3, for example, and acquires the voice uttered by the user 105 using the microphone 306, the voice I / F 305, and the like of FIG. For example, the voice acquisition unit 901 acquires the voice of the voice command issued by the user 105.

音声認識部(第2の音声認識部)902は、例えば、図3のCPU301で実行されるプログラムによって実現され、音声取得部901が取得した音声に対して音声認識処理を行い、ボイスコマンドを認識する。   The voice recognition unit (second voice recognition unit) 902 is realized by, for example, a program executed by the CPU 301 of FIG. 3, performs voice recognition processing on the voice acquired by the voice acquisition unit 901, and recognizes a voice command. To do.

音波信号生成部(第2の音波信号生成部)903は、例えば、図3のCPU301で実行されるプログラムによって実現される。音波信号生成部903は、音声認識部902がボイスコマンドを認識することができた場合、認識したボイスコマンドに対応する制御ID(第2の識別情報)を有する音波信号(第2の音波信号)を生成する。   The sound wave signal generation unit (second sound wave signal generation unit) 903 is realized by, for example, a program executed by the CPU 301 of FIG. When the voice recognition unit 902 can recognize the voice command, the sound wave signal generation unit 903 has a sound wave signal (second sound wave signal) having a control ID (second identification information) corresponding to the recognized voice command. To generate.

例えば、音波出力装置101は、表3に示すような、ボイスコマンドと制御IDとの対応関係を示す情報を有している。   For example, the sound wave output device 101 has information as shown in Table 3 indicating the correspondence between voice commands and control IDs.

Figure 2020077940
表3は、ボイスコマンドと制御IDとの対応関係を示す情報の一例を示している。
Figure 2020077940
Table 3 shows an example of information indicating the correspondence between voice commands and control IDs.

例えば、表3において、ボイスコマンド「エアコン オン」は、制御ID「xxx1001」に対応付けられており、ボイスコマンド「テレビ オフ」は、制御ID「xxx2000」に対応付けられている。   For example, in Table 3, the voice command “air conditioner on” is associated with the control ID “xxx1001”, and the voice command “television off” is associated with the control ID “xxx2000”.

音波信号生成部903は、この対応関係に基づいて、認識したボイスコマンドに対応する制御IDを特定することができる。また、音波信号生成部903は、例えば、前述したように、複数の周波数における音波のオン/オフ等により、特定した制御IDを表す音波信号を生成する。   The sound wave signal generation unit 903 can specify the control ID corresponding to the recognized voice command based on this correspondence. Further, the sound wave signal generation unit 903 generates a sound wave signal representing the specified control ID by turning on / off sound waves at a plurality of frequencies, for example, as described above.

また、第2の実施形態に係る出力制御部622は、通信部621が、制御ID(第1の識別情報)を有する音波信号(第1の音波信号)を受信した場合、受信した音波信号を音波出力部623に出力する。   Further, when the communication unit 621 receives a sound wave signal (first sound wave signal) having a control ID (first identification information), the output control unit 622 according to the second embodiment outputs the received sound wave signal. The sound is output to the sound wave output unit 623.

一方、出力制御部622は、音声取得部901が、音声を取得した場合、取得した音声を音声認識部902に出力する。これにより、音声取得部901が取得した音声にボイスコマンドが含まれている場合、音波出力部623は、ボイスコマンドに対応する制御ID(第2の識別情報)を有する音波を出力する。   On the other hand, when the voice acquisition unit 901 acquires voice, the output control unit 622 outputs the acquired voice to the voice recognition unit 902. Thus, when the voice acquired by the voice acquisition unit 901 includes a voice command, the sound wave output unit 623 outputs a sound wave having a control ID (second identification information) corresponding to the voice command.

なお、上記以外の音波出力装置101の各機能構成は、第1の実施形態と同様で良い。   The functional configuration of the sound wave output device 101 other than the above may be the same as that of the first embodiment.

<処理の流れ>
続いて、第2の実施形態に係る制御方法の処理の流れについて説明する。
<Process flow>
Next, a processing flow of the control method according to the second embodiment will be described.

(出力制御処理)
図10は、第2の実施形態に係る出力制御処理の例を示すフローチャートである。この処理は、音波出力装置101の出力制御部622が実行する出力制御処理の例を示している。例えば、音波出力装置101は、図10に示す出力制御処理を繰り返し実行する。
(Output control process)
FIG. 10 is a flowchart showing an example of output control processing according to the second embodiment. This process shows an example of the output control process executed by the output control unit 622 of the sound wave output device 101. For example, the sound wave output device 101 repeatedly executes the output control process shown in FIG. 10.

ステップS1001において、音波出力装置101の出力制御部622は、音声取得部901が音声を取得したか否かを判断する。一例として、出力制御部622は、音声取得部901が、所定の音量より大きい音声を取得した場合、音声を取得したと判断しても良い。   In step S1001, the output control unit 622 of the sound wave output device 101 determines whether the sound acquisition unit 901 has acquired sound. As an example, the output control unit 622 may determine that the sound has been acquired when the sound acquisition unit 901 has acquired a sound volume higher than a predetermined volume.

音声取得部901が音声を取得した場合、出力制御部622は、処理をステップS1002に移行させる。一方、音声取得部901が音声を取得していない場合、出力制御部622は、処理をステップS1007に移行させる。   When the voice acquisition unit 901 acquires a voice, the output control unit 622 shifts the processing to step S1002. On the other hand, when the audio acquisition unit 901 has not acquired the audio, the output control unit 622 shifts the processing to step S1007.

ステップS1002に移行すると、出力制御部622は、音声取得部901が取得した音声を、音声認識部902に出力する。   When the process proceeds to step S1002, the output control unit 622 outputs the voice acquired by the voice acquisition unit 901 to the voice recognition unit 902.

ステップS1003において、音声認識部902は、音声取得部901が取得した音声に対して音声認識処理を実行し、ボイスコマンドを認識する。   In step S1003, the voice recognition unit 902 performs voice recognition processing on the voice acquired by the voice acquisition unit 901 and recognizes a voice command.

ステップS1004において、音声認識部902は、ボイスコマンドが認識されたか否かに応じて、処理を分岐させる。ボイスコマンドが認識された場合、音声認識部902は、処理をステップS1005に移行させる。一方、ボイスコマンドが認識されない場合、音声認識部902は、処理を終了させる。   In step S1004, the voice recognition unit 902 branches the process depending on whether a voice command is recognized. When the voice command is recognized, the voice recognition unit 902 shifts the processing to step S1005. On the other hand, when the voice command is not recognized, the voice recognition unit 902 ends the process.

ステップS1005に移行すると、音声認識部902は、認識したボイスコマンドを音波信号生成部903に通知する。また、音波信号生成部903は、通知されたボイスコマンドに対応する制御IDを有する音波信号を作成し、音波出力部623に出力する。   Upon proceeding to step S1005, the voice recognition unit 902 notifies the sound wave signal generation unit 903 of the recognized voice command. Further, the sound wave signal generation unit 903 creates a sound wave signal having a control ID corresponding to the notified voice command, and outputs the sound wave signal to the sound wave output unit 623.

一方、ステップS1001からS1007に移行すると、音波出力装置101の出力制御部622は、通信部621が、端末装置104から、制御IDを有する音波信号を受信したか否かを判断する。   On the other hand, when the process proceeds from step S1001 to step S1007, the output control unit 622 of the sound wave output device 101 determines whether the communication unit 621 has received the sound wave signal having the control ID from the terminal device 104.

端末装置104から制御IDを有する音波信号を受信していない場合、出力制御部622は、処理を終了させる。一方、端末装置104から制御IDを有する音波信号を受信した場合、出力制御部622は、受信した音波信号を音波出力部623に出力する。   When the sound wave signal having the control ID is not received from the terminal device 104, the output control unit 622 ends the process. On the other hand, when the sound wave signal having the control ID is received from the terminal device 104, the output control unit 622 outputs the received sound wave signal to the sound wave output unit 623.

上記の処理により、音波出力装置101は、ユーザ105が、住宅や事務所等の建物107内にいる場合、端末装置104を用いなくても、ユーザ105が発声するボイスコマンドに応じて、制御IDを有する音波を出力することができるようになる。   Through the above processing, when the user 105 is inside the building 107 such as a house or office, the sound wave output device 101 can control the control ID according to the voice command uttered by the user 105 without using the terminal device 104. It becomes possible to output a sound wave having

(制御システムの処理)
図11は、第2の実施形態に係る制御システムの処理の例を示すシーケンス図である。この処理は、図8に示すように、ユーザ105が、住宅や事務所等の建物107内にいる場合における制御システム100の処理の例を示している。
(Processing of control system)
FIG. 11 is a sequence diagram showing an example of processing of the control system according to the second embodiment. This process shows an example of the process of the control system 100 when the user 105 is in a building 107 such as a house or office, as shown in FIG.

なお、図1に示すように、ユーザ105が、建物107の外部にいる場合は、第2の実施形態においても、図7に示す第1の実施形態に係る制御システムの処理と同様の処理が実行される。また、図11のステップS708以降の処理は、図7に示す第1の実施形態に係る制御システムの処理と同様なので、ここでは、第1の実施形態との相違点を中心に説明を行う。   As shown in FIG. 1, when the user 105 is outside the building 107, the same processing as the processing of the control system according to the first embodiment shown in FIG. 7 is performed also in the second embodiment. Executed. Further, since the processing after step S708 of FIG. 11 is the same as the processing of the control system according to the first embodiment shown in FIG. 7, a description will be given here focusing on the differences from the first embodiment.

ステップS1101において、ユーザ105は、例えば、図8に示すように、音波出力装置101に対して、ボイスコマンドを発声するものとする。   In step S1101, the user 105, for example, as shown in FIG. 8, utters a voice command to the sound wave output device 101.

ステップS1102において、音波出力装置101の音声取得部901が、ユーザ105が発生した音声を取得すると、出力制御部622は、取得した音声を音声認識部902に出力する。なお、この処理は、図10のステップS1001、S1002の処理に対応している。   In step S1102, when the voice acquisition unit 901 of the sound wave output device 101 acquires the voice generated by the user 105, the output control unit 622 outputs the acquired voice to the voice recognition unit 902. Note that this processing corresponds to the processing of steps S1001 and S1002 in FIG.

ステップS1103において、音波出力装置101の音声認識部902は、音声取得部901が取得した音声に対して音声認識処理を行い、ボイスコマンドを認識する。なお、この処理は、図10のステップS1003の処理に対応している。また、ここでは、ステップS1101において、ユーザ105が発声したボイスコマンドが認識されるものとする。   In step S1103, the voice recognition unit 902 of the sound wave output device 101 performs voice recognition processing on the voice acquired by the voice acquisition unit 901 and recognizes a voice command. Note that this process corresponds to the process of step S1003 in FIG. In addition, here, it is assumed that the voice command uttered by the user 105 is recognized in step S1101.

ステップS1104において、音波出力装置101の音波信号生成部903は、音声認識部902が認識したボイスコマンドに対応する制御IDを有する音波信号を生成する。なお、この処理は、図10のステップS1005の処理に対応している。   In step S1104, the sound wave signal generation unit 903 of the sound wave output device 101 generates a sound wave signal having a control ID corresponding to the voice command recognized by the voice recognition unit 902. Note that this process corresponds to the process of step S1005 of FIG.

ステップS1005において、音波出力装置101の音波信号生成部903は、作成した音波信号を音波出力部623に出力する。なお、この処理は、図10のステップS1006の処理に対応している。   In step S1005, the sound wave signal generation unit 903 of the sound wave output apparatus 101 outputs the created sound wave signal to the sound wave output unit 623. Note that this process corresponds to the process of step S1006 in FIG.

上記の処理により、音波出力装置101は、ユーザ105が発生したボイスコマンドに対応する制御IDを有する音波を出力することができる。   Through the above processing, the sound wave output device 101 can output the sound wave having the control ID corresponding to the voice command generated by the user 105.

従って、第2の実施形態によれば、ユーザ105が、住宅や事務所等の建物107内にいる場合、端末装置104を用いなくても、機器103を制御できるようになる。   Therefore, according to the second embodiment, when the user 105 is inside the building 107 such as a house or an office, the device 103 can be controlled without using the terminal device 104.

[第3の実施形態]
第3の実施形態では、第1、2の実施形態に適用可能な好適な処理の例について説明する。
[Third Embodiment]
In the third embodiment, an example of suitable processing applicable to the first and second embodiments will be described.

(音波による通信制御)
図12は、第3の実施形態に係る音波による通信制御の例を示すフローチャートである。この処理は、音波出力装置101と制御装置102との間で、音波による通信を行う際に好適な通信制御の一例を示している。例えば、図7、11のステップS708において、音波出力装置101から制御装置102に対して、制御IDを有する音波を出力する際に、図12に示す通信制御処理を適用することができる。
(Communication control by sound waves)
FIG. 12 is a flowchart showing an example of communication control by sound waves according to the third embodiment. This process shows an example of communication control suitable when performing communication by sound waves between the sound wave output device 101 and the control device 102. For example, in step S708 of FIGS. 7 and 11, when outputting the sound wave having the control ID from the sound wave output device 101 to the control device 102, the communication control process shown in FIG. 12 can be applied.

初めに、図12を参照して、制御装置102の処理について説明する。   First, the processing of the control device 102 will be described with reference to FIG.

ステップS1201において、制御装置102は待機状態であるものとする。この状態で、例えば、ステップS1212において、音波出力装置101から制御装置102に対して、制御信号の出力を指示する、制御IDを有する音波が出力されるものとする。   In step S1201, the control device 102 is in a standby state. In this state, for example, in step S1212, the sound wave output device 101 outputs a sound wave having a control ID, which instructs the control device 102 to output a control signal.

ステップS1202において、制御装置102は、例えば、図7のステップS709〜S711に示す制御信号の出力処理を開始する。   In step S1202, the control device 102 starts the output processing of the control signal shown in steps S709 to S711 of FIG. 7, for example.

ステップS1203において、制御装置102の状態情報送信部646は、制御信号の出力を開始したことを示す状態ID(状態情報)を有する音波を、音波出力部645を用いて出力する。   In step S1203, the state information transmission unit 646 of the control device 102 outputs the sound wave having the state ID (state information) indicating that the output of the control signal is started, using the sound wave output unit 645.

なお、状態IDを有する音波は、例えば、前述した制御IDを有する音波と同様にして生成することができる。   The sound wave having the state ID can be generated, for example, in the same manner as the sound wave having the control ID described above.

ステップS1204、S1205において、制御装置102が、制御信号の出力を終了すると、状態情報送信部646は、制御信号の出力を終了したことを示す状態ID(状態情報)を有する音波を、音波出力部645を用いて出力する。   In steps S1204 and S1205, when the control device 102 ends the output of the control signal, the state information transmission unit 646 transmits the sound wave having the state ID (state information) indicating that the output of the control signal has ended to the sound wave output unit. And output using 645.

続いて、図12を参照して、音波出力装置101の処理について説明する。   Next, the processing of the sound wave output device 101 will be described with reference to FIG.

ステップS1211、S1212において、音波出力装置101の音波出力部623は、制御信号の出力を指示する、制御IDを有する音波を出力するものとする。なお、この処理は、例えば、図7のステップS708の処理等に対応している。   In steps S1211 and S1212, the sound wave output unit 623 of the sound wave output apparatus 101 outputs a sound wave having a control ID, which instructs the output of the control signal. It should be noted that this process corresponds to, for example, the process of step S708 in FIG.

ステップS1213において、音波出力装置101の状態情報取得部625は、カウンタiの値を、例えば、「0」にリセットする。   In step S1213, the state information acquisition unit 625 of the sound wave output device 101 resets the value of the counter i to, for example, “0”.

ステップS1214において、音波出力装置101の状態情報取得部625は、制御装置102が制御信号の出力を開始したか否かを判断する。例えば、状態情報取得部625は、制御装置102から、制御信号の出力を開始したことを示す状態IDを取得した場合、制御装置102が制御信号の出力を開始したと判断することができる。   In step S1214, the state information acquisition unit 625 of the sound wave output device 101 determines whether or not the control device 102 has started the output of the control signal. For example, the state information acquisition unit 625 can determine that the control device 102 has started the output of the control signal when the state ID indicating that the output of the control signal has been started is acquired from the control device 102.

制御装置102が制御信号の出力を開始した場合、音波出力装置101は、処理をステップS1218に移行させる。一方、制御装置102が制御信号の出力を開始していない場合、音波出力装置101は、処理をステップS1215に移行させる。   When the control device 102 starts outputting the control signal, the sound wave output device 101 shifts the processing to step S1218. On the other hand, when the control device 102 has not started to output the control signal, the sound wave output device 101 shifts the processing to step S1215.

ステップS1215に移行すると、状態情報取得部625は、カウンタiの値が、所定のタイマ値T1より大きいか否かを判断する。カウンタiの値がタイマ値T1より大きい場合、状態情報取得部625は、処理をステップS1217に移行させる。一方、カウンタ値iの値がタイマ値T1以下である場合、状態情報取得部625は、処理をステップS1216に移行させる。   When the process proceeds to step S1215, the state information acquisition unit 625 determines whether the value of the counter i is larger than the predetermined timer value T1. When the value of the counter i is larger than the timer value T1, the state information acquisition unit 625 shifts the processing to step S1217. On the other hand, when the value of the counter value i is less than or equal to the timer value T1, the state information acquisition unit 625 shifts the processing to step S1216.

ステップS1216に移行すると、状態情報取得部625は、カウンタiの値に「1」を加算して、処理をステップS1214に戻し、同様の処理を再び実行する。   When the process proceeds to step S1216, the state information acquisition unit 625 adds "1" to the value of the counter i, returns the process to step S1214, and executes the same process again.

一方、ステップS1217に移行すると、状態情報取得部625は、音波による通信が正しく行えなかったと判断し、ユーザ105に対して異常を通知する。   On the other hand, when the process proceeds to step S1217, the state information acquisition unit 625 determines that the communication using the sound wave has not been correctly performed, and notifies the user 105 of the abnormality.

ステップS1214からS1218に移行すると、状態情報取得部625は、カウンタjの値を、例えば、「0」にリセットする。   When the process proceeds from step S1214 to S1218, the state information acquisition unit 625 resets the value of the counter j to “0”, for example.

ステップS1219において、音波出力装置101の状態情報取得部625は、制御装置102が制御信号の出力を終了したか否かを判断する。例えば、状態情報取得部625は、制御装置102から、制御信号の出力を終了したことを示す状態IDを取得した場合、制御装置102が制御信号の出力を終了したと判断することができる。   In step S1219, the state information acquisition unit 625 of the sound wave output device 101 determines whether the control device 102 has finished outputting the control signal. For example, when the status information acquisition unit 625 acquires from the control device 102 a status ID indicating that the output of the control signal has ended, the control device 102 can determine that the control device 102 has ended the output of the control signal.

制御装置102が制御信号の出力を終了した場合、音波出力装置101は、音波による通信制御処理を終了させる。一方、制御装置102が制御信号の出力を終了していない場合、音波出力装置101は、処理をステップS1220に移行させる。   When the control device 102 ends the output of the control signal, the sound wave output device 101 ends the communication control process by the sound wave. On the other hand, when the control device 102 has not finished outputting the control signal, the sound wave output device 101 shifts the processing to step S1220.

ステップS1220に移行すると、状態情報取得部625は、カウンタjの値が、所定のタイマ値T2より大きいか否かを判断する。カウンタjの値がタイマ値T2より大きい場合、状態情報取得部625は、処理をステップS1222に移行させる。一方、カウンタjの値がタイマ値T2以下である場合、状態情報取得部625は、処理をステップS1221に移行させる。   When the process proceeds to step S1220, the state information acquisition unit 625 determines whether the value of the counter j is larger than the predetermined timer value T2. When the value of the counter j is larger than the timer value T2, the state information acquisition unit 625 shifts the processing to step S1222. On the other hand, when the value of the counter j is less than or equal to the timer value T2, the state information acquisition unit 625 shifts the processing to step S1221.

ステップS1221に移行すると、状態情報取得部625は、カウンタjの値に「1」を加算して、処理をステップS1219に戻し、同様の処理を再び実行する。   When the process proceeds to step S1221, the state information acquisition unit 625 adds “1” to the value of the counter j, returns the process to step S1219, and executes the same process again.

一方、ステップS1222に移行すると、状態情報取得部625は、音波による通信が正しく完了しなかったと判断し、ユーザ105に対して異常を通知する。   On the other hand, when the process proceeds to step S1222, the state information acquisition unit 625 determines that the communication by the sound wave has not been correctly completed, and notifies the user 105 of the abnormality.

上記の処理により、音波出力装置101は、制御装置102から送信される状態IDを有する音波に基づいて、制御装置102の状態を確認しながら、音波による通信を行うことができる。   Through the above processing, the sound wave output device 101 can perform communication by sound waves while confirming the state of the control device 102 based on the sound wave having the state ID transmitted from the control device 102.

(制御IDの登録処理)
図13は、第3の実施形態に係る制御IDの登録処理の例を示すフローチャートである。この処理は、例えば、機器103を制御するリモコンが出力する赤外線信号(制御信号の一例)を、新たな制御IDと対応付けて制御システム100に登録する登録処理の例を示している。
(Registration process of control ID)
FIG. 13 is a flowchart showing an example of control ID registration processing according to the third embodiment. This process shows an example of a registration process of registering an infrared signal (an example of a control signal) output by a remote controller controlling the device 103 in the control system 100 in association with a new control ID.

ステップS1301、S1302において、音波出力装置101、及び制御装置102が待機モード(待機状態)であるものとする。   In steps S1301 and S1302, it is assumed that the sound wave output device 101 and the control device 102 are in the standby mode (standby state).

ステップS1303、S1304において、ユーザ105が、音波出力装置101に対して、登録モードへの切り替え操作を行う。例えば、ユーザ105は、音波出力装置101の操作部303に対して、予め定められた登録モードへの切り替え操作を行う。或いは、ユーザ105は、例えば、「新規登録開始」等のボイスコマンドにより、登録モードへの切り替え操作を行うものであっても良い。   In steps S1303 and S1304, the user 105 operates the sound wave output apparatus 101 to switch to the registration mode. For example, the user 105 performs an operation of switching the operation unit 303 of the sound wave output device 101 to a predetermined registration mode. Alternatively, the user 105 may perform the switching operation to the registration mode by a voice command such as “start new registration”.

ステップS1305において、音波出力装置101の登録制御部626は、登録モードの準備を開始する。   In step S1305, the registration control unit 626 of the sound wave output apparatus 101 starts preparation for the registration mode.

ステップS1306において、音波出力装置101の登録制御部は、所定の制御IDを有する音波を出力することにより、制御装置102に登録モードへの切り替えを指示する。   In step S1306, the registration control unit of the sound wave output device 101 outputs a sound wave having a predetermined control ID to instruct the control device 102 to switch to the registration mode.

ステップS1307、S1308において、制御装置102の制御情報管理部648は、登録モードの準備を行い、準備が完了すると、所定の状態IDを有する音波を出力することにより、音波出力装置101に登録モードの準備が完了したことを報告する。   In steps S1307 and S1308, the control information management unit 648 of the control device 102 prepares for the registration mode, and when the preparation is completed, the sound wave having the predetermined state ID is output to output the sound wave output device 101 to the registration mode. Report that the preparation is complete.

ステップS1309、S1310において、音波出力装置101の登録制御部626は、登録モードの準備が完了したことを、例えば、図3の操作部303によるLED表示や画面表示により、ユーザ105に通知する。或いは、登録制御部626は、例えば、「登録を開始します」等の音声メッセージにより、登録モードの準備が完了したことをユーザ105に通知しても良い。   In steps S1309 and S1310, the registration control unit 626 of the sound wave output apparatus 101 notifies the user 105 that the preparation for the registration mode is completed, for example, by LED display or screen display by the operation unit 303 in FIG. Alternatively, the registration control unit 626 may notify the user 105 that the preparation for the registration mode is completed, for example, by a voice message such as “Start registration”.

ステップS1311、S1312において、ユーザ105は、音波出力装置101に対して、ボイスコマンドを登録する。例えば、ユーザ105は、「テレビ オン」等、登録したいボイスコマンドを発声する。   In steps S1311, S1312, the user 105 registers a voice command with the sound wave output device 101. For example, the user 105 utters a voice command that he / she wants to register, such as “Television on”.

ステップS1313において、音波出力装置101の登録制御部626は、ユーザ105が発声したボイスコマンドと、新たに登録する制御ID(以下、新規IDと呼ぶ)との対応関係を登録する。例えば、登録制御部626は、表3に示すような、ボイスコマンドと制御IDとの対応関係を示す情報に、ユーザ105が発声したボイスコマンドと新規IDとの対応関係を登録する。   In step S1313, the registration control unit 626 of the sound wave output device 101 registers the correspondence relationship between the voice command uttered by the user 105 and the control ID to be newly registered (hereinafter referred to as a new ID). For example, the registration control unit 626 registers the correspondence between the voice command uttered by the user 105 and the new ID in the information indicating the correspondence between the voice command and the control ID as shown in Table 3.

ステップS1314において、音波出力装置101の登録制御部626は、例えば、新規IDを有する音波を出力すること等により、新規IDの情報を制御装置102に通知する。   In step S1314, the registration control unit 626 of the sound wave output device 101 notifies the control device 102 of the information of the new ID, for example, by outputting a sound wave having the new ID.

ステップS1315において、音波出力装置101の登録制御部626は、IDの登録が完了したことを、例えば、図3の操作部303によるLED表示や画面表示により、ユーザ105に通知する。或いは、登録制御部626は、例えば、「登録したいボタンを押して下さい」等の音声メッセージにより、登録モードの準備が完了したことをユーザ105に通知しても良い。   In step S1315, the registration control unit 626 of the sound wave output device 101 notifies the user 105 that the ID registration is completed, for example, by LED display or screen display by the operation unit 303 in FIG. Alternatively, the registration control unit 626 may notify the user 105 that the preparation for the registration mode is completed, for example, by a voice message such as “please press the button to register”.

ステップS1316、S1317において、ユーザ105は、機器103を制御するリモコンを制御装置102に向けて、ボイスコマンドと対応付けるボタンを操作する。これにより、操作したボタンに対応する発光パターンの赤外線信号が、リモコンから制御装置102に出力される。   In steps S1316 and S1317, the user 105 points the remote controller controlling the device 103 toward the control device 102 and operates the button associated with the voice command. Thereby, the infrared signal of the light emission pattern corresponding to the operated button is output from the remote controller to the control device 102.

ステップS1318において、制御装置102の制御情報管理部648は、赤外線送受信部647を用いて、リモコンから出力される赤外線信号の発光パターンを取得する。また、制御情報管理部648は、取得した赤外線信号の発光パターンと、ステップS1314で取得した新規IDとの対応関係を、例えば、表2に示すような、制御IDと制御信号との対応関係を示す情報に登録する。   In step S1318, the control information management unit 648 of the control device 102 uses the infrared transmission / reception unit 647 to acquire the light emission pattern of the infrared signal output from the remote controller. Further, the control information management unit 648 shows the correspondence relationship between the emission pattern of the acquired infrared signal and the new ID acquired in step S1314, for example, the correspondence relationship between the control ID and the control signal as shown in Table 2. Register with the information shown.

ステップS1319において、制御装置102の制御情報管理部648は、所定の状態IDを有する音波を出力することにより、音波出力装置101に新規IDの登録が完了したことを報告する。   In step S1319, the control information management unit 648 of the control device 102 outputs a sound wave having a predetermined state ID to report to the sound wave output device 101 that the registration of the new ID is completed.

ステップS1320、S1321において、音波出力装置101の登録制御部626は、制御IDの登録を完了したことを、例えば、図3の操作部303によるLED表示や画面表示により、ユーザ105に通知する。或いは、登録制御部626は、例えば、「登録が完了しました」等の音声メッセージにより、登録モードの準備が完了したことをユーザ105に通知しても良い。   In steps S1320 and S1321, the registration control unit 626 of the sound wave output apparatus 101 notifies the user 105 that the control ID registration is completed, for example, by LED display or screen display by the operation unit 303 in FIG. Alternatively, the registration control unit 626 may notify the user 105 that the preparation for the registration mode is completed, for example, by a voice message such as “registration is completed”.

上記の処理により、ユーザ105は、新たな制御IDを、ボイスコマンドと対応付けて制御システム100に登録することができる。   Through the above processing, the user 105 can register the new control ID in the control system 100 in association with the voice command.

(制御IDの削除処理)
図14は、第3の実施形態に係る制御IDの削除処理の例を示すフローチャートである。この処理は、制御システム100に登録済の制御IDを削除する削除処理の例を示している。
(Control ID deletion processing)
FIG. 14 is a flowchart showing an example of control ID deletion processing according to the third embodiment. This processing shows an example of the deletion processing for deleting the control ID registered in the control system 100.

ステップS1401、S1402において、音波出力装置101、及び制御装置102が待機モードであるものとする。   In steps S1401 and S1402, it is assumed that the sound wave output device 101 and the control device 102 are in the standby mode.

ステップS1403、S1404において、ユーザ105が、音波出力装置101に対して、削除モードへの切り替え操作を行う。例えば、ユーザ105は、音波出力装置101の操作部303に対して、予め定められた削除モードへの切り替え操作を行う。或いは、ユーザ105は、例えば、「削除開始」等のボイスコマンドにより、登録モードへの切り替え操作を行うものであっても良い。   In steps S1403 and S1404, the user 105 operates the sound wave output device 101 to switch to the deletion mode. For example, the user 105 operates the operation unit 303 of the sound wave output device 101 to switch to a predetermined deletion mode. Alternatively, the user 105 may perform the switching operation to the registration mode by a voice command such as “start deletion”.

ステップS1405において、音波出力装置101の登録制御部626は、削除モードの準備を開始する。   In step S1405, the registration control unit 626 of the sound wave output apparatus 101 starts preparation for the deletion mode.

ステップS1406において、音波出力装置101の登録制御部は、所定の制御IDを有する音波を出力することにより、制御装置102に削除モードへの切り替えを指示する。   In step S1406, the registration control unit of the sound wave output device 101 outputs a sound wave having a predetermined control ID to instruct the control device 102 to switch to the deletion mode.

ステップS1407、S1408において、制御装置102の制御情報管理部648は、削除モードの準備を行い、準備が完了すると、所定の状態IDを有する音波を出力することにより、音波出力装置101に削除モードの準備が完了したことを報告する。   In steps S1407 and S1408, the control information management unit 648 of the control device 102 prepares for the deletion mode, and when the preparation is completed, the sound wave having the predetermined state ID is output to output the sound wave output device 101 to the deletion mode. Report that the preparation is complete.

ステップS1409、S1410において、音波出力装置101の登録制御部626は、削除モードの準備が完了したことを、例えば、図3の操作部303によるLED表示や画面表示により、ユーザ105に通知する。或いは、登録制御部626は、例えば、「削除したいコマンドを指定して下さい」等の音声メッセージにより、削除モードの準備が完了したことをユーザ105に通知しても良い。   In steps S1409 and S1410, the registration control unit 626 of the sound wave output apparatus 101 notifies the user 105 that the preparation for the deletion mode is completed, for example, by LED display or screen display by the operation unit 303 in FIG. Alternatively, the registration control unit 626 may notify the user 105 that the preparation for the deletion mode is completed, for example, by a voice message such as “Please specify a command to be deleted”.

ステップS1411、S1412において、ユーザ105は、音波出力装置101に対して、ボイスコマンド、又はボタン操作等により、削除対象となる制御IDを指定する操作を行う。例えば、「テレビ オン」のボイスコマンドに対応する制御IDを削除する場合、ユーザ105は、音波出力装置101に対して、「テレビ オン」のボイスコマンドを発声する。   In steps S <b> 1411 and S <b> 1412, the user 105 operates the sound wave output device 101 to specify a control ID to be deleted by a voice command, a button operation, or the like. For example, when deleting the control ID corresponding to the “TV ON” voice command, the user 105 utters the “TV ON” voice command to the sound wave output device 101.

ステップS1413において、音波出力装置101の登録制御部626は、ユーザ105が発声したボイスコマンドと、ボイスコマンドに対応する制御ID(以下、指定IDと呼ぶ)との対応関係を削除する。例えば、登録制御部626は、表3に示すような、ボイスコマンドと制御IDとの対応関係を示す情報に登録されている、指定IDとボイスコマンドとの対応関係を削除する。   In step S1413, the registration control unit 626 of the sound wave output device 101 deletes the correspondence between the voice command uttered by the user 105 and the control ID (hereinafter, referred to as a designated ID) corresponding to the voice command. For example, the registration control unit 626 deletes the correspondence between the designated ID and the voice command, which is registered in the information indicating the correspondence between the voice command and the control ID as shown in Table 3.

ステップS1414において、音波出力装置101の登録制御部626は、例えば、指定IDを有する音波を出力すること等により、指定IDの情報を制御装置102に通知する。   In step S1414, the registration control unit 626 of the sound wave output device 101 notifies the control device 102 of the information of the specified ID, for example, by outputting a sound wave having the specified ID.

ステップS1415において、音波出力装置101の登録制御部626は、指定IDの削除作業を開始したことを、例えば、図3の操作部303によるLED表示や画面表示により、ユーザ105に通知する。或いは、登録制御部626は、例えば、「指定IDの削除を開始します」等の音声メッセージにより、削除作業を開始したことをユーザ105に通知しても良い。   In step S1415, the registration control unit 626 of the sound wave output device 101 notifies the user 105 of the start of the deletion work of the designated ID, for example, by LED display or screen display by the operation unit 303 in FIG. Alternatively, the registration control unit 626 may notify the user 105 that the deletion work has started by a voice message such as “Start deletion of the designated ID”.

ステップS1416において、制御装置102の制御情報管理部648は、ステップS1414で取得した指定IDと制御信号との対応関係を、例えば、表2に示すような、制御IDと制御信号との対応関係を示す情報から削除する。   In step S1416, the control information management unit 648 of the control device 102 determines the correspondence relationship between the designated ID and the control signal acquired in step S1414, for example, the correspondence relationship between the control ID and the control signal as shown in Table 2. Delete from the information shown.

ステップS1417において、制御装置102の制御情報管理部648は、所定の状態IDを有する音波を出力することにより、音波出力装置101に指定IDの削除が完了したことを報告する。   In step S1417, the control information management unit 648 of the control device 102 outputs a sound wave having a predetermined state ID to report to the sound wave output device 101 that the deletion of the designated ID is completed.

ステップS1418、S1419において、音波出力装置101の登録制御部626は、指定IDの削除登録を完了したことを、例えば、図3の操作部303によるLED表示や画面表示により、ユーザ105に通知する。或いは、登録制御部626は、例えば、「指定IDの削除が完了しました」等の音声メッセージにより、登録モードの準備が完了したことをユーザ105に通知しても良い。   In steps S1418 and S1419, the registration control unit 626 of the sound wave output apparatus 101 notifies the user 105 that deletion registration of the designated ID is completed, for example, by LED display or screen display by the operation unit 303 in FIG. Alternatively, the registration control unit 626 may notify the user 105 that the preparation for the registration mode is completed, for example, by a voice message such as “deletion of designated ID is completed”.

上記の処理により、ユーザ105は、ボイスコマンドと対応付けて制御システム100に登録した制御IDを、制御システム100から削除することができる。   Through the above processing, the user 105 can delete the control ID registered in the control system 100 in association with the voice command from the control system 100.

(タイマ処理)
図15は、第3の実施形態に係るタイマ処理の例を示すフローチャートである。音波出力装置101は、指定された時間に、所定の制御IDを有する音波を音波出力部623に出力させるタイマ制御部627を有している。図15は、タイマ制御部627によるタイマ処理の一例を示している。なお、図15に示す処理の開始時点において、音波出力装置101には、タイマ処理により出力する所定の制御IDを有する音波、及び所定の制御IDを有する音波を出力する時間等が、予め設定されているものとする。
(Timer processing)
FIG. 15 is a flowchart showing an example of timer processing according to the third embodiment. The sound wave output device 101 includes a timer control unit 627 that causes the sound wave output unit 623 to output a sound wave having a predetermined control ID at a designated time. FIG. 15 shows an example of timer processing by the timer control unit 627. At the start of the process shown in FIG. 15, the sound wave output device 101 is preset with a sound wave having a predetermined control ID to be output by the timer process, a time for outputting a sound wave having a predetermined control ID, and the like. It is assumed that

ステップS1501、S1502において、音波出力装置101、及び制御装置102は、待機状態にあるものとする。   In steps S1501 and S1502, the sound wave output device 101 and the control device 102 are in a standby state.

ステップS1503において、音波出力装置101のタイマ制御部627は、予め設定された指定時間になったか否かを判断し、指定時間になった場合、処理をステップS1504に移行させる。   In step S1503, the timer control unit 627 of the sound wave output device 101 determines whether or not a preset designated time has come, and when the designated time has arrived, the process proceeds to step S1504.

ステップS1504に移行すると、音波出力装置101のタイマ制御部627は、所定の制御IDを有する音波信号を音波出力部623に出力する。これにより、ステップS1505において、音波出力部623は、所定の制御IDを有する音波を出力する。   After shifting to step S1504, the timer control unit 627 of the sound wave output device 101 outputs a sound wave signal having a predetermined control ID to the sound wave output unit 623. Thereby, in step S1505, the sound wave output unit 623 outputs a sound wave having a predetermined control ID.

ステップS1506において、制御装置102は、音波出力装置101から出力された音波から制御IDを取得し、取得した制御IDに対応する制御信号の出力を開始する。   In step S1506, the control device 102 acquires the control ID from the sound wave output from the sound wave output device 101, and starts outputting the control signal corresponding to the acquired control ID.

上記の処理により、ユーザ105は、例えば、遠隔地などから、機器103に対して、指定した時間に所定の動作(例えば、電源のオン/オフ等)を実行させることができるようになる。   Through the above processing, the user 105 can cause the device 103 to perform a predetermined operation (for example, turning on / off the power) at a designated time from a remote place or the like.

なお、図15では、音波出力装置101が、指定された時間に所定の制御IDを出力する場合の例について説明したが、音波出力装置101は、図16に示すように、所定のセンサが検知したセンサ量に応じて、所定の制御IDを有する音波を出力することもできる。   Note that, in FIG. 15, an example in which the sound wave output device 101 outputs a predetermined control ID at a designated time has been described, but the sound wave output device 101 detects a predetermined sensor as shown in FIG. 16. It is also possible to output a sound wave having a predetermined control ID in accordance with the sensor amount.

(センサ処理1)
図16(a)は、音波出力装置101が、温度センサ309が検知した温度に応じて、所定の制御IDを有する音波を出力するセンサ処理の例を示している。なお、図15(a)に示す処理の開始時点において、音波出力装置101には、温度が指定温度以下になった場合、所定の制御IDを有する音波を出力するように、予め設定されているものとする。
(Sensor processing 1)
FIG. 16A shows an example of a sensor process in which the sound wave output device 101 outputs a sound wave having a predetermined control ID according to the temperature detected by the temperature sensor 309. At the start of the process shown in FIG. 15A, the sound wave output device 101 is preset to output a sound wave having a predetermined control ID when the temperature falls below a specified temperature. I shall.

ステップS1601、S1602において、音波出力装置101、及び制御装置102は、待機状態にあるものとする。   In steps S1601 and S1602, the sound wave output device 101 and the control device 102 are in a standby state.

ステップS1603において、音波出力装置101のセンサ制御部628は、温度センサ309が検知した温度が予め設定された指定温度以下であるか否かを判断し、指定温度以下である場合、処理をステップS1604に移行させる。   In step S1603, the sensor control unit 628 of the sound wave output device 101 determines whether or not the temperature detected by the temperature sensor 309 is equal to or lower than a preset designated temperature. If the temperature is equal to or lower than the designated temperature, the process proceeds to step S1604. Move to.

ステップS1604に移行すると、音波出力装置101のセンサ制御部628は、所定の制御IDを有する音波信号を音波出力部623に出力する。これにより、ステップS1605において、音波出力部623は、所定の制御IDを有する音波を出力する。   Upon proceeding to step S1604, the sensor control unit 628 of the sound wave output device 101 outputs a sound wave signal having a predetermined control ID to the sound wave output unit 623. Thereby, in step S1605, the sound wave output unit 623 outputs a sound wave having a predetermined control ID.

ステップS1606において、制御装置102は、音波出力装置101から出力された音波から制御IDを取得し、取得した制御IDに対応する制御信号の出力を開始する。   In step S1606, the control device 102 acquires a control ID from the sound wave output from the sound wave output device 101, and starts outputting a control signal corresponding to the acquired control ID.

上記の処理により、ユーザ105は、例えば、遠隔地などから、機器103に対して、指定温度以下になったときに、所定の動作(例えば、電源のオン/オフ等)を実行させることができるようになる。   Through the above processing, the user 105 can cause the device 103 to perform a predetermined operation (for example, power on / off) from a remote place or the like when the temperature falls below a specified temperature. Like

(センサ処理2)
図16(b)は、音波出力装置101が、照度センサ310が検知した温度に応じて、所定の制御IDを有する音波を出力するセンサ処理の例を示している。なお、図15(b)に示す処理の開始時点において、音波出力装置101には、照度が指定照度以下になった場合、所定の制御IDを有する音波を出力するように、予め設定されているものとする。
(Sensor processing 2)
FIG. 16B shows an example of sensor processing in which the sound wave output device 101 outputs a sound wave having a predetermined control ID according to the temperature detected by the illuminance sensor 310. At the start of the process shown in FIG. 15B, the sound wave output device 101 is preset to output a sound wave having a predetermined control ID when the illuminance is equal to or lower than the specified illuminance. I shall.

ステップS1611、S1612において、音波出力装置101、及び制御装置102は、待機状態にあるものとする。   In steps S1611, S1612, the sound wave output device 101 and the control device 102 are in a standby state.

ステップS1613において、音波出力装置101のセンサ制御部628は、照度センサ310が検知した照度が予め設定された指定照度以下であるか否かを判断し、指定照度以下である場合、処理をステップS1614に移行させる。   In step S1613, the sensor control unit 628 of the sound wave output device 101 determines whether or not the illuminance detected by the illuminance sensor 310 is equal to or lower than a preset designated illuminance. If the illuminance is equal to or lower than the designated illuminance, the process proceeds to step S1614. Move to.

ステップS1614に移行すると、音波出力装置101のセンサ制御部628は、所定の制御IDを有する音波信号を音波出力部623に出力する。これにより、ステップS1605において、音波出力部623は、所定の制御IDを有する音波を出力する。   When the process proceeds to step S1614, the sensor control unit 628 of the sound wave output device 101 outputs a sound wave signal having a predetermined control ID to the sound wave output unit 623. Thereby, in step S1605, the sound wave output unit 623 outputs a sound wave having a predetermined control ID.

ステップS1616において、制御装置102は、音波出力装置101から出力された音波から制御IDを取得し、取得した制御IDに対応する制御信号の出力を開始する。   In step S1616, the control device 102 acquires a control ID from the sound wave output from the sound wave output device 101, and starts outputting a control signal corresponding to the acquired control ID.

上記の処理により、ユーザ105は、例えば、遠隔地などから、機器103に対して、指定照度以下になったときに、所定の動作(例えば、電源のオン/オフ等)を実行させることができるようになる。   Through the above processing, the user 105 can cause the device 103 to perform a predetermined operation (for example, power on / off) from a remote location when the illuminance becomes less than or equal to the specified illuminance. Like

以上、本発明の各実施形態によれば、端末装置104から、制御装置102を介して機器103を制御する制御システム100において、機器103を制御する制御装置102をより簡易な構成で実現できるようになる。   As described above, according to the embodiments of the present invention, in the control system 100 that controls the device 103 from the terminal device 104 via the control device 102, the control device 102 that controls the device 103 can be realized with a simpler configuration. become.

100 制御システム
101 音波出力装置
102 制御装置
103 機器
104 端末装置
611 操作受付部
612 音波信号生成部(第1の音波信号生成部)
613 通信部(送信部)
615 音声認識部(第1の音声認識部)
621 通信部(受信部)
622 出力制御部
623 音波出力部(第1の音波出力部)
625 状態情報取得部
627 タイマ制御部
628 センサ制御部
642 識別情報取得部
643 変換部
644 制御信号出力部
645 音波出力部(第2の音波出力部)
647 赤外線送受信部(赤外線受信部)
648 制御情報管理部
901 音声取得部
902 音声認識部(第2の音声認識部)
903 音波信号生成部(第2の音波信号生成部)
100 Control System 101 Sound Wave Output Device 102 Control Device 103 Equipment 104 Terminal Device 611 Operation Receiving Unit 612 Sound Wave Signal Generating Unit (First Sound Wave Signal Generating Unit)
613 communication unit (transmission unit)
615 Speech recognition unit (first speech recognition unit)
621 communication unit (reception unit)
622 Output control unit 623 Sound wave output unit (first sound wave output unit)
625 State information acquisition unit 627 Timer control unit 628 Sensor control unit 642 Identification information acquisition unit 643 Conversion unit 644 Control signal output unit 645 Sound wave output unit (second sound wave output unit)
647 Infrared transmitter / receiver (infrared receiver)
648 Control information management unit 901 Speech acquisition unit 902 Speech recognition unit (second speech recognition unit)
903 Sound wave signal generation unit (second sound wave signal generation unit)

特開2004−096204号公報JP, 2004-096204, A

Claims (15)

音波出力装置と、機器を制御する制御装置とを有する制御システムであって、
前記音波出力装置は、
端末装置から送信される、前記機器を制御する制御操作に対応する第1の識別情報を有する第1の音波信号を受信する受信部と、
前記受信部が受信した前記第1の音波信号に基づいて、前記第1の識別情報を有する音波を出力する第1の音波出力部と、
を有し、
前記制御装置は、
前記音波出力装置が出力する音波が有する前記第1の識別情報を取得する識別情報取得部と、
前記識別情報取得部が取得した前記第1の識別情報を、前記機器を制御する制御信号に変換する変換部と、
前記機器を制御する制御信号を前記機器に出力する制御信号出力部と、
を有する、制御システム。
A control system having a sound wave output device and a control device for controlling a device,
The sound wave output device,
A receiving unit for receiving a first sound wave signal having first identification information corresponding to a control operation for controlling the device, which is transmitted from the terminal device;
A first sound wave output unit that outputs a sound wave having the first identification information based on the first sound wave signal received by the receiving unit;
Have
The control device is
An identification information acquisition unit that acquires the first identification information included in the sound wave output by the sound wave output device;
A conversion unit that converts the first identification information acquired by the identification information acquisition unit into a control signal that controls the device;
A control signal output unit for outputting a control signal for controlling the device to the device,
A control system.
前記端末装置は、
前記機器を制御する制御操作を受け付ける受付部と、
前記制御操作に対応する前記第1の識別情報を有する前記第1の音波信号を生成する第1の音波信号生成部と、
前記第1の音波信号を前記音波出力装置に送信する送信部と、
を有する、請求項1に記載の制御システム。
The terminal device,
A reception unit that receives a control operation for controlling the device,
A first sound wave signal generation unit that generates the first sound wave signal having the first identification information corresponding to the control operation;
A transmitter for transmitting the first sound wave signal to the sound wave output device;
The control system according to claim 1, comprising:
前記機器を制御する制御操作は、前記機器を制御する音声命令の入力を含み、
前記端末装置は、
前記音声命令を認識する第1の音声認識部を有する、請求項2に記載の制御システム。
The control operation for controlling the device includes input of a voice command for controlling the device,
The terminal device,
The control system according to claim 2, further comprising a first voice recognition unit that recognizes the voice command.
前記音波出力装置は、
音声を取得する音声取得部と、
前記音声から前記機器を制御する音声命令を認識する第2の音声認識部と、
前記第2の音声認識部が認識した前記音声命令に対応する第2の識別情報を有する第2の音波信号を生成し、前記第1の音波出力部に出力する第2の音波信号生成部と、
前記受信部が前記第1の音波信号を受信した場合、前記第1の音波出力部に前記第1の音波信号を出力し、前記音声取得部が前記音声を取得した場合、前記第2の音声認識部に前記音声を出力する出力制御部と、
を有する、請求項1乃至3のいずれか一項に記載の制御システム。
The sound wave output device,
A voice acquisition unit that acquires voice,
A second voice recognition unit that recognizes a voice command for controlling the device from the voice;
A second sound wave signal generation unit that generates a second sound wave signal having second identification information corresponding to the voice command recognized by the second voice recognition unit and outputs the second sound wave signal to the first sound wave output unit; ,
When the reception unit receives the first sound wave signal, outputs the first sound wave signal to the first sound wave output unit, and when the sound acquisition unit acquires the sound, the second sound An output control unit for outputting the voice to the recognition unit,
The control system according to any one of claims 1 to 3, further comprising:
前記制御装置は、前記制御装置の状態を示す状態情報を有する音波を出力する第2の音波出力部を有し、
前記音波出力装置は、前記第2の音波出力部が出力する音波が有する前記状態情報を取得する状態情報取得部を有する、請求項1乃至4のいずれか一項に記載の制御システム。
The control device includes a second sound wave output unit that outputs a sound wave having state information indicating a state of the control device,
The control system according to claim 1, wherein the sound wave output device includes a state information acquisition unit that acquires the state information included in the sound wave output by the second sound wave output unit.
前記制御信号出力部が出力する前記機器を制御する制御信号は、赤外線信号を含む、請求項1乃至5のいずれか一項に記載の制御システム。   The control system according to claim 1, wherein the control signal output from the control signal output unit for controlling the device includes an infrared signal. 前記制御装置は、
赤外線信号を受信する赤外線受信部と、
前記赤外線受信部が受信した前記赤外線信号の発光パターンを、前記機器を制御する制御信号と対応付けて管理する制御情報管理部と、
を有する、請求項6に記載の制御システム。
The control device is
An infrared receiver for receiving infrared signals,
A light emitting pattern of the infrared signal received by the infrared receiving unit, a control information management unit managing in association with a control signal for controlling the device,
The control system according to claim 6, comprising:
前記制御信号出力部が出力する前記機器を制御する制御信号は、モータを駆動する駆動信号を含む、請求項1乃至7のいずれか一項に記載の制御システム。   The control system according to claim 1, wherein the control signal output from the control signal output unit for controlling the device includes a drive signal for driving a motor. 前記音波出力装置は、指定された時間に、所定の識別情報を有する音波を前記第1の音波出力部に出力させるタイマ制御部を有する、請求項1乃至8のいずれか一項に記載の制御システム。   9. The control according to claim 1, wherein the sound wave output device includes a timer control unit that causes a sound wave having predetermined identification information to be output to the first sound wave output unit at a designated time. system. 前記音波出力装置は、所定のセンサが検知したセンサ量に応じて、所定の識別情報を有する音波を前記第1の音波出力部に出力させるセンサ制御部を有する、請求項1乃至9のいずれか一項に記載の制御システム。   10. The sound wave output device according to claim 1, further comprising a sensor control unit that outputs a sound wave having predetermined identification information to the first sound wave output unit according to a sensor amount detected by a predetermined sensor. The control system according to one item. 音波出力装置と、機器を制御する制御装置とを有する制御システムの制御方法であって、
前記音波出力装置が、
端末装置から送信される識別情報を有する音波信号を受信する受信処理と、
前記受信処理で受信した前記音波信号に基づいて、前記識別情報を有する音波を出力する処理と、
を実行し、
前記制御装置が、
前記音波出力装置が出力する音波に含まれる識別情報を取得する取得処理と、
前記取得処理で取得した識別情報を、前記機器を制御する制御信号に変換する処理と、
前記機器を制御する制御信号を前記機器に出力する処理と、
を実行する、制御方法。
A control method for a control system having a sound wave output device and a control device for controlling a device, comprising:
The sound wave output device,
A reception process of receiving a sound wave signal having identification information transmitted from the terminal device,
Based on the sound wave signal received in the reception process, a process of outputting a sound wave having the identification information,
Run
The control device is
An acquisition process of acquiring identification information included in a sound wave output by the sound wave output device,
A process of converting the identification information acquired in the acquisition process into a control signal for controlling the device,
A process of outputting a control signal for controlling the device to the device,
Control method to execute.
機器を制御する制御装置に音波を出力する音波出力装置と通信可能な端末装置であって
前記機器を制御する制御操作を受け付ける受付部と、
前記制御操作に対応する識別情報を有する音波信号を生成する音波信号生成部と、
生成された前記音波信号を前記音波出力装置に送信する送信部と、
を含む端末装置。
A reception unit that is a terminal device capable of communicating with a sound wave output device that outputs sound waves to a control device that controls a device, and that accepts a control operation that controls the device
A sound wave signal generation unit that generates a sound wave signal having identification information corresponding to the control operation;
A transmitter for transmitting the generated sound wave signal to the sound wave output device;
Terminal device including.
前記機器を制御する制御操作は、前記機器を制御する音声命令の入力を含み、
当該端末装置は、前記音声命令を認識する音声認識部を有する、請求項12に記載の端末装置。
The control operation for controlling the device includes input of a voice command for controlling the device,
The terminal device according to claim 12, wherein the terminal device includes a voice recognition unit that recognizes the voice command.
コンピュータを、
機器を制御する制御操作を受け付ける受付部と、
前記制御操作に対応する識別情報を有する音波信号を生成する音波信号生成部と、
生成された前記音波信号を音波出力装置に送信する送信部と、を含む、機器を制御する制御装置に音波を出力する前記音波出力装置と通信可能な端末装置として機能させるプログラム。
Computer,
A reception unit that receives control operations for controlling the device,
A sound wave signal generation unit that generates a sound wave signal having identification information corresponding to the control operation;
A program that causes a control device that controls a device to function as a terminal device that can communicate with the sound wave output device, the transmitter including the transmission unit that transmits the generated sound wave signal to the sound wave output device.
機器を制御する制御装置に音波を出力する音波出力装置であって、
端末装置から送信される、前記機器を制御する制御操作に対応する識別情報を有する音波信号を受信する受信部と、
前記受信部が受信した前記音波信号に基づいて、前記識別情報を有する音波を出力する音波出力部と、を含む音波出力装置。
A sound wave output device for outputting a sound wave to a control device for controlling equipment,
A receiving unit that receives a sound wave signal having identification information corresponding to a control operation for controlling the device, transmitted from the terminal device,
A sound wave output unit that outputs a sound wave having the identification information based on the sound wave signal received by the reception unit.
JP2018209105A 2018-11-06 2018-11-06 Control system, control method, and program Active JP7172461B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2018209105A JP7172461B2 (en) 2018-11-06 2018-11-06 Control system, control method, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018209105A JP7172461B2 (en) 2018-11-06 2018-11-06 Control system, control method, and program

Publications (2)

Publication Number Publication Date
JP2020077940A true JP2020077940A (en) 2020-05-21
JP7172461B2 JP7172461B2 (en) 2022-11-16

Family

ID=70724452

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018209105A Active JP7172461B2 (en) 2018-11-06 2018-11-06 Control system, control method, and program

Country Status (1)

Country Link
JP (1) JP7172461B2 (en)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0637912A (en) * 1992-07-13 1994-02-10 Tokyo Electric Co Ltd Remote controller
JP2003511913A (en) * 1999-10-04 2003-03-25 エリクソン インコーポレイテッド Voice-driven signaling for performing mid-call functions
US20140333439A1 (en) * 2011-11-30 2014-11-13 Illinois Tool Works Inc. Remote monitoring systems

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0637912A (en) * 1992-07-13 1994-02-10 Tokyo Electric Co Ltd Remote controller
JP2003511913A (en) * 1999-10-04 2003-03-25 エリクソン インコーポレイテッド Voice-driven signaling for performing mid-call functions
US20140333439A1 (en) * 2011-11-30 2014-11-13 Illinois Tool Works Inc. Remote monitoring systems

Also Published As

Publication number Publication date
JP7172461B2 (en) 2022-11-16

Similar Documents

Publication Publication Date Title
JP5421316B2 (en) Portable terminal, pairing system, and pairing method
WO2018113672A1 (en) Smart speaker, smart home system, and implementation method thereof
CN107135443B (en) Signal processing method and electronic equipment
US10521183B2 (en) Control terminal device and audio system control method that displays a source selection screen with an area image background
CN107767867B (en) Method, device, system and storage medium for realizing voice control network
KR100769156B1 (en) Home network system and control method thereof
CN204680196U (en) A kind of voice universal remote control based on robot
CN108353219A (en) Wireless sound production device and system for remotely controlling sound-producing device
CN105700392A (en) VOICE input SYSTEM for vehicle AND METHOD FOR CONTROLLING THEREOF
CN106023566B (en) Bluetooth remote control device, system and method based on voice recognition
CN112838967B (en) Main control equipment, intelligent home and control device, control system and control method thereof
JP7172461B2 (en) Control system, control method, and program
CN111583922A (en) Intelligent voice hearing aid and intelligent furniture system
CN106878785A (en) A kind of TV with acoustic control program guide
JPH06149534A (en) Voice screen operation unit
CN111865728A (en) Voice control system and method, voice suite and voice device
JP2015207999A (en) Integrated system of infrared remote controller
CN104202580A (en) Visual talkback device
CN212750365U (en) Intelligent voice hearing aid and intelligent furniture system
JP2016066930A (en) Server, control method for server, control program for server, control system, control equipment, control program for control equipment, and equipment
KR101465967B1 (en) Dongle type digital device control system capable of interface expanding using smart terminal
CN114019815B (en) Intelligent household equipment configuration system and method
JPH05219575A (en) Remote controller
CN113497744B (en) Method and system for controlling smart home, wearable device and readable storage medium
CN204465675U (en) Communication equipment control system and communication equipment

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210806

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20220414

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220426

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220624

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20221004

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20221017

R151 Written notification of patent or utility model registration

Ref document number: 7172461

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151