JP2021009190A - Remote operation device and video acoustic apparatus - Google Patents

Remote operation device and video acoustic apparatus Download PDF

Info

Publication number
JP2021009190A
JP2021009190A JP2019121827A JP2019121827A JP2021009190A JP 2021009190 A JP2021009190 A JP 2021009190A JP 2019121827 A JP2019121827 A JP 2019121827A JP 2019121827 A JP2019121827 A JP 2019121827A JP 2021009190 A JP2021009190 A JP 2021009190A
Authority
JP
Japan
Prior art keywords
control
unit
voice
command
remote control
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2019121827A
Other languages
Japanese (ja)
Other versions
JP7223423B2 (en
Inventor
秀郎 鴫原
Hideo Shigihara
秀郎 鴫原
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Iris Ohyama Inc
Original Assignee
Iris Ohyama Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Iris Ohyama Inc filed Critical Iris Ohyama Inc
Priority to JP2019121827A priority Critical patent/JP7223423B2/en
Publication of JP2021009190A publication Critical patent/JP2021009190A/en
Application granted granted Critical
Publication of JP7223423B2 publication Critical patent/JP7223423B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • User Interface Of Digital Computer (AREA)
  • Selective Calling Equipment (AREA)

Abstract

To provide a remote operation device that operates with voice commands and is suppressed from misrecognizing the commands.SOLUTION: A remote operation device comprises: a voice input part which acquires a voice; an apparatus control command sending-out part which sends out commands to a controlled apparatus by radio; and a control part which controls the voice input part and the apparatus control command sending-out part. The control part enters a control word recognition mode in which a control word for operating the controlled apparatus is recognized when predetermined conditions are met, sends out a command to lower sound volume of the controlled apparatus from the apparatus control command sending-out part, and sends out a command to return the sound volume of the controlled apparatus to the original one from the apparatus control command sending-out part after recognizing the control word.SELECTED DRAWING: Figure 4

Description

本発明の一態様は、家電製品等の操作対象を遠隔操作可能な遠隔操作装置等に関する。 One aspect of the present invention relates to a remote control device or the like capable of remotely controlling an operation target of a home electric appliance or the like.

従来から、音声指令に基づいて家電製品等の操作対象を操作可能な遠隔操作装置がある。例えば、特許文献1には、家電製品のリモコン命令語を認識するための音声認識システムが開示されている。 Conventionally, there is a remote control device capable of operating an operation target of a home electric appliance or the like based on a voice command. For example, Patent Document 1 discloses a voice recognition system for recognizing remote control command words of home appliances.

特開平6−161496号公報Japanese Unexamined Patent Publication No. 6-161496

従来の音声指令により動作する遠隔操作装置を使用する際、音を発する機器が付近で稼働していると、この付近の機器が発する音が原因となって遠隔操作装置が音声による指令を誤認識してしまう場合があった。また、このような遠隔操作装置を操作するための制御ワードは予め設定されており、使用者の習慣等によっては制御ワードの発音が困難であり、遠隔操作装置による音声の認識率が悪化する場合があった。また、操作対象機器が限定されており、操作したい機器を任意に設定できない場合があった。 When using a remote control device that operates by a conventional voice command, if a device that emits sound is operating in the vicinity, the remote control device erroneously recognizes the command by voice due to the sound emitted by the device in the vicinity. There was a case that I did. Further, the control word for operating such a remote control device is set in advance, and it is difficult to pronounce the control word depending on the habit of the user or the like, and the voice recognition rate by the remote control device deteriorates. was there. In addition, the devices to be operated are limited, and there are cases where the device to be operated cannot be arbitrarily set.

本発明は、少なくとも上記課題のいずれかを解決するために次のような手段を採る。なお、以下の説明において、発明の理解を容易にするために図面中の符号等を括弧書きで付記する場合があるが、本発明の各構成要素はこれらの付記したものに限定されるものではなく、当業者が技術的に理解しうる範囲にまで広く解釈されるべきものである。 The present invention employs the following means in order to solve at least one of the above problems. In the following description, reference numerals and the like in the drawings may be added in parentheses in order to facilitate understanding of the invention, but each component of the present invention is not limited to those added. It should be broadly interpreted to the extent that those skilled in the art can technically understand it.

本発明の一の手段は、
音声を取得する音声入力部(70)と、
被制御機器に無線で指令を送出する機器制御指令送出部(30)と、
前記音声入力部及び前記機器制御指令送出部を制御する制御部(10)と、を備え、
前記制御部(10)は、
所定条件を満たしたときに前記被制御機器を操作するための制御ワードを認識する制御ワード認識モードに移行するとともに、前記被制御機器の音量を下げる指令を前記機器制御指令送出部から送出し(S102)、
前記制御ワードを認識した後に、前記被制御機器の音量を元に戻す指令を前記機器制御指令送出部から送出する(S152)、
遠隔操作装置(1)である。
One means of the present invention is
A voice input unit (70) for acquiring voice and
The device control command sending unit (30) that wirelessly sends commands to the controlled device,
A control unit (10) for controlling the voice input unit and the device control command transmission unit is provided.
The control unit (10)
The control word recognition mode for recognizing the control word for operating the controlled device when a predetermined condition is satisfied is entered, and a command for lowering the volume of the controlled device is sent from the device control command sending unit ( S102),
After recognizing the control word, a command for returning the volume of the controlled device to the original level is sent from the device control command sending unit (S152).
It is a remote control device (1).

上記構成の遠隔操作装置によれば、被制御機器自身が発する音声が制御ワードとともに音声入力部に入力されることで制御ワードの音声認識率が低下することを抑制することができる。 According to the remote control device having the above configuration, it is possible to suppress a decrease in the voice recognition rate of the control word due to the voice emitted by the controlled device itself being input to the voice input unit together with the control word.

上記構成の遠隔操作装置において好ましくは、
前記被制御機器は、音響機器または映像機器であり、
前記制御部は、前記制御ワードが前記被制御機器の音量を変更する指令に対応するものであったとき(S200)、前記被制御機器の音量を元に戻すとともに(S202)、前記被制御機器の音量を変更する前記制御ワードに対応した指令を前記機器制御指令送出部から送出する(S203)。
The remote control device having the above configuration is preferably
The controlled device is an audio device or a video device.
When the control word corresponds to a command for changing the volume of the controlled device (S200), the control unit restores the volume of the controlled device (S202) and the controlled device. A command corresponding to the control word for changing the volume of the device is sent from the device control command sending unit (S203).

上記構成の遠隔操作装置によれば、音量を変更する指令に応じて変更された音量を、使用者が速やかに確認することができる。 According to the remote control device having the above configuration, the user can quickly confirm the volume changed in response to the command to change the volume.

上記構成の遠隔操作装置において好ましくは、
前記制御部(10)は、前記制御ワード認識モードに移行してから第1所定時間の間、前記制御ワードが認識されなかったとき、前記被制御機器の音量を元に戻す指令を送出する(S111、S152)。
The remote control device having the above configuration is preferably
When the control word is not recognized for the first predetermined time after shifting to the control word recognition mode, the control unit (10) sends a command to restore the volume of the controlled device (the control word) (10). S111, S152).

上記構成の遠隔操作装置によれば、被制御機器の音量を下げることで生じる不都合を、第1所定時間後に自動的に解消することができる。 According to the remote control device having the above configuration, the inconvenience caused by lowering the volume of the controlled device can be automatically eliminated after the first predetermined time.

上記構成の遠隔操作装置において好ましくは、
前記制御部(10)は、
前記制御ワードを認識してから第2所定時間後に、前記被制御機器の音量を元に戻す指令を前記機器制御指令送出部から送出し、
前記制御ワードを認識してから第3所定時間の間、前記制御ワード認識モードを維持する(S111)。
The remote control device having the above configuration is preferably
The control unit (10)
A second predetermined time after recognizing the control word, a command for returning the volume of the controlled device to the original level is sent from the device control command sending unit.
The control word recognition mode is maintained for a third predetermined time after recognizing the control word (S111).

上記構成の遠隔操作装置によれば、複数の制御ワードを連続的に認識させ指定の操作を行いたいときにも、被制御機器自身の音声により音声認識率が低下してしまうことを抑制することができる。 According to the remote control device having the above configuration, even when it is desired to continuously recognize a plurality of control words and perform a specified operation, it is possible to prevent the voice recognition rate from being lowered by the voice of the controlled device itself. Can be done.

上記構成の遠隔操作装置において好ましくは、
前記第2所定時間と前記第3所定時間とが略同じ長さである。
The remote control device having the above configuration is preferably
The second predetermined time and the third predetermined time have substantially the same length.

上記構成の遠隔操作装置によれば、制御ワード認識モードが終了するのと略同じタイミングで被制御機器の音量を元に戻すことが可能となる。 According to the remote control device having the above configuration, the volume of the controlled device can be restored at substantially the same timing as the control word recognition mode ends.

上記構成の遠隔操作装置において好ましくは、
前記制御ワード認識モードで動作中であることを示す第1通知手段(50)をさらに備える。
The remote control device having the above configuration is preferably
It further includes a first notification means (50) indicating that it is operating in the control word recognition mode.

上記構成の遠隔操作装置によれば、制御ワード認識モードで動作中であることを使用者に認識させることができる。 According to the remote control device having the above configuration, the user can be made to recognize that the operation is in the control word recognition mode.

上記構成の遠隔操作装置において好ましくは、
前記制御ワードを認識した時、前記制御ワードを認識したことを示す第2通知手段(60)をさらに備える。
The remote control device having the above configuration is preferably
When the control word is recognized, a second notification means (60) indicating that the control word is recognized is further provided.

上記構成の遠隔操作装置によれば、装置によって制御ワードが認識されたことを使用者が確認することができる。 According to the remote control device having the above configuration, the user can confirm that the control word has been recognized by the device.

上記構成の遠隔操作装置において好ましくは、
前記制御部(10)は、
前記制御ワード認識モードに移行するときに、複数の前記被制御機器に対して音量を下げる指令を送出する(S102)。
The remote control device having the above configuration is preferably
The control unit (10)
When shifting to the control word recognition mode, a command for lowering the volume is sent to the plurality of controlled devices (S102).

上記構成の遠隔操作装置によれば、音を発する被制御機器が周囲に複数稼働している場合に、これらの稼働している被制御機器の音量を下げることで、制御ワードの音声認識率が低下することを抑制することができる。 According to the remote control device having the above configuration, when a plurality of controlled devices that emit sound are operating in the surroundings, the voice recognition rate of the control word can be increased by lowering the volume of these operating controlled devices. It is possible to suppress the decrease.

また、本発明の別の手段は、
音声を取得する音声入力部(70)と、
被制御機器に無線で指令を送出する機器制御指令送出部(30)と、
前記音声入力部及び前記機器制御指令送出部を制御する制御部(10)と、を備え、
前記制御部は、音声登録モードで動作中に取得した前記音声に関する情報を、制御ワード認識モードに移行するためのウェイクアップワードとして登録し(S413)、
前記制御部は、前記音声入力部が取得した音声が登録された前記ウェイクアップワードであるときに制御ワード認識モードに移行する(S110)、
遠隔操作装置である。
In addition, another means of the present invention is
A voice input unit (70) for acquiring voice and
The device control command sending unit (30) that wirelessly sends commands to the controlled device,
A control unit (10) for controlling the voice input unit and the device control command transmission unit is provided.
The control unit registers the information related to the voice acquired during operation in the voice registration mode as a wake-up word for shifting to the control word recognition mode (S413).
The control unit shifts to the control word recognition mode when the voice acquired by the voice input unit is the registered wakeup word (S110).
It is a remote control device.

上記構成の遠隔操作装置によれば、使用者が、自身の習慣や発音のしやすさを考慮した任意のウェイクアップワードを登録することが可能となり、ウェイクアップワードの音声認識率を向上させることができる。 According to the remote control device having the above configuration, the user can register an arbitrary wake-up word in consideration of his / her habit and ease of pronunciation, and improve the voice recognition rate of the wake-up word. Can be done.

また、本発明の別の手段は、
音声を取得する音声入力部(70)と、
被制御機器に無線で指令を送出する機器制御指令送出部(30)と、
前記音声入力部及び前記機器制御指令送出部を制御する制御部(10)と、を備え、
前記制御部は、音声登録モードで動作中に取得した前記音声に関する情報を、前記被制御機器を操作するための制御ワードとして登録し(S451)、
前記制御部(10)は、
前記制御ワードを認識する制御ワード認識モードで動作中に前記音声入力部が取得した音声が登録された前記制御ワードであるとき、前記制御ワードに対応する指令を前記機器制御指令送出部から送出する(S302)、
遠隔操作装置である。
In addition, another means of the present invention is
A voice input unit (70) for acquiring voice and
The device control command sending unit (30) that wirelessly sends commands to the controlled device,
A control unit (10) for controlling the voice input unit and the device control command transmission unit is provided.
The control unit registers the information related to the voice acquired during operation in the voice registration mode as a control word for operating the controlled device (S451).
The control unit (10)
Recognizing the control word When the voice acquired by the voice input unit is the registered control word during operation in the control word recognition mode, a command corresponding to the control word is transmitted from the device control command sending unit. (S302),
It is a remote control device.

上記構成の遠隔操作装置によれば、使用者が、自身の習慣や発音のしやすさを考慮した任意の制御ワードを登録することが可能となり、制御ワードの音声認識率を向上させることができる。 According to the remote control device having the above configuration, the user can register an arbitrary control word in consideration of his / her own habit and ease of pronunciation, and the voice recognition rate of the control word can be improved. ..

上記構成の遠隔操作装置において好ましくは、
音声を出力する音声出力部(80)をさらに備え、
前記制御部は、前記音声登録モードで動作中に、使用者の音声登録をガイドするガイド音声を前記音声出力部から出力する(S420〜S450)。
The remote control device having the above configuration is preferably
Further equipped with an audio output unit (80) for outputting audio,
While operating in the voice registration mode, the control unit outputs a guide voice for guiding the voice registration of the user from the voice output unit (S420 to S450).

上記構成の遠隔操作装置によれば、使用者が容易に音声登録をすることができる。 According to the remote control device having the above configuration, the user can easily perform voice registration.

また、本発明の別の手段は、
音声を取得する音声入力部(70)と、
被制御機器に無線で指令を送出する機器制御指令送出部(30)と、
前記被制御機器を操作する無線操作機器から送出される指令を受信する機器制御指令受信部(40)と、
記憶部(20)と、
前記音声入力部が取得した音声に関する情報と、前記機器制御指令受信部が受信した指令とを関連づけて前記記憶部に記憶させる制御部(10)と、を備え、
前記制御部(10)は、前記音声入力部が取得した音声に基づき、前記記憶部に登録された前記音声に関する情報に関連づけられた前記指令(S451)を前記機器制御指令送出部から送出する(S302)。
In addition, another means of the present invention is
A voice input unit (70) for acquiring voice and
The device control command sending unit (30) that wirelessly sends commands to the controlled device,
A device control command receiving unit (40) that receives a command sent from a wireless operating device that operates the controlled device, and a device control command receiving unit (40).
Memory unit (20) and
A control unit (10) for associating information about voice acquired by the voice input unit with a command received by the device control command receiving unit and storing the information in the storage unit is provided.
The control unit (10) transmits the command (S451) associated with the information related to the voice registered in the storage unit from the device control command transmission unit based on the voice acquired by the voice input unit (10). S302).

上記構成の遠隔操作装置によれば、装置に予め設定された機器だけでなく、使用者が操作したい任意の機器を被制御機器として操作することができる。 According to the remote control device having the above configuration, not only the device preset in the device but also any device that the user wants to operate can be operated as the controlled device.

上記構成の遠隔操作装置において好ましくは、
前記記憶部は、前記機器制御指令受信部が受信した指令を、前記音声入力部が取得した使用者の音声に関する情報に関連づけて前記記憶部に記憶させる。
The remote control device having the above configuration is preferably
The storage unit stores the command received by the device control command receiving unit in the storage unit in association with the information regarding the user's voice acquired by the voice input unit.

上記構成の遠隔操作装置によれば、使用者の習慣等に合わせた使用者自身の音声に基づく処理を可能とし、音声認識率を向上させることができる。 According to the remote control device having the above configuration, it is possible to perform processing based on the user's own voice according to the user's habits and the like, and it is possible to improve the voice recognition rate.

また、本発明の別の手段は、
遠隔操作装置により無線で操作される映像音響機器(2)であって、
前記遠隔操作装置から指令を受信する指令受信部(140)と、
音声出力部(180)と、
前記遠隔制御装置から電源投入指令を受信したとき、前記音声出力部から出力される音量を下げた状態で動作を開始するよう制御する制御部(100)と、を備える、
映像音響機器である。
In addition, another means of the present invention is
Audio-visual equipment (2) that is wirelessly operated by a remote control device.
A command receiving unit (140) that receives a command from the remote control device, and
Audio output unit (180) and
It includes a control unit (100) that controls to start operation with the volume output from the voice output unit lowered when a power-on command is received from the remote control device.
It is an audio-visual equipment.

上記構成の映像音響機器によれば、使用者が映像音響機器の操作を行いたい電源投入直後のタイミングにおいて、当該映像音響機器が発する音声が音声認識の対象の音声に悪影響を与え、音声認識率が低下してしまうことを抑制することができる。 According to the audio-visual equipment having the above configuration, the voice emitted by the audio-visual equipment adversely affects the voice to be recognized at the timing immediately after the power is turned on when the user wants to operate the audio-visual equipment, and the voice recognition rate. Can be suppressed from decreasing.

また、本発明の別の手段は、
遠隔操作装置により無線で操作される映像音響機器(2)であって、
前記遠隔操作装置から指令を受信する指令受信部(140)と、
音声出力部(180)と、
制御部(100)と、を備え、
前記制御部は、
前記遠隔制御装置から制御ワード認識モード移行中のハーフミュート指令を受信したとき、前記音声出力部から出力される音量を所定比率で下げ、
前記遠隔制御装置から前記ハーフミュート指令をさらに受信したとき、前記音声出力部から出力される音量を、さらに所定比率で下げる、
映像音響機器である。
In addition, another means of the present invention is
Audio-visual equipment (2) that is wirelessly operated by a remote control device.
A command receiving unit (140) that receives a command from the remote control device, and
Audio output unit (180) and
With a control unit (100)
The control unit
When a half mute command during the transition to the control word recognition mode is received from the remote control device, the volume output from the voice output unit is lowered by a predetermined ratio.
When the half mute command is further received from the remote control device, the volume output from the audio output unit is further lowered by a predetermined ratio.
It is an audio-visual equipment.

上記構成の映像音響機器によれば、出力する音声の音量を所定比率で段階的に下げることができるため、音声で操作される遠隔操作装置の音声認識率の低下を効果的に抑制することができる。 According to the audio-visual equipment having the above configuration, the volume of the output voice can be gradually lowered by a predetermined ratio, so that it is possible to effectively suppress the decrease in the voice recognition rate of the remote control device operated by the voice. it can.

図1は、遠隔操作装置1の機能的構成を示すブロック図である。FIG. 1 is a block diagram showing a functional configuration of the remote control device 1. 図2は、遠隔操作装置1の外観図である。FIG. 2 is an external view of the remote control device 1. 図3は、テレビ2の機能的構成を示すブロック図である。FIG. 3 is a block diagram showing a functional configuration of the television 2. 図4は、遠隔操作装置で行われる遠隔操作処理を示すフローチャートである。FIG. 4 is a flowchart showing a remote control process performed by the remote control device. 図5は、遠隔操作装置における音声変更処理を示すフローチャートである。FIG. 5 is a flowchart showing a voice change process in the remote control device. 図6は、遠隔操作装置における機器制御処理を示すフローチャートである。FIG. 6 is a flowchart showing a device control process in the remote control device. 図7は、遠隔操作装置における設定モード処理を示すフローチャートである。FIG. 7 is a flowchart showing the setting mode processing in the remote control device. 図8は、実施例1の遠隔操作装置で行われる各動作を示すシーケンス図である。FIG. 8 is a sequence diagram showing each operation performed by the remote control device of the first embodiment. 図9は、実施例2の遠隔操作装置で行われる各動作を示すシーケンス図である。FIG. 9 is a sequence diagram showing each operation performed by the remote control device of the second embodiment. 図10は、実施例3の遠隔操作装置で行われる各動作を示すシーケンス図である。FIG. 10 is a sequence diagram showing each operation performed by the remote control device of the third embodiment. 図11は、実施例4の遠隔操作装置で行われる各動作を示すシーケンス図である。FIG. 11 is a sequence diagram showing each operation performed by the remote control device of the fourth embodiment. 図12は、実施例5の遠隔操作装置で行われる各動作を示すシーケンス図である。FIG. 12 is a sequence diagram showing each operation performed by the remote control device of the fifth embodiment. 図13は、実施例6の遠隔操作装置で行われる各動作を示すシーケンス図である。FIG. 13 is a sequence diagram showing each operation performed by the remote control device of the sixth embodiment. 図14は、変形例の遠隔操作装置の配置例を示す図である。FIG. 14 is a diagram showing an arrangement example of the remote control device of the modified example. 図15は、変形例の遠隔操作装置の構成例を示す図である。FIG. 15 is a diagram showing a configuration example of a remote control device of a modified example.

本発明の遠隔操作装置は、例えば、使用者の音声を認識して被制御機器であるテレビ等に対して無線で指令を送信する高機能リモコンである。本発明の遠隔操作装置は、特に、制御ワードの音声認識率を向上させるために、ウェイクアップワードを認識した後にテレビの音量をハーフミュートにすることで音量を下げる動作を行う構成としている点を特徴のひとつとしている。その他の本発明の特徴については以下の説明にて詳述する。 The remote control device of the present invention is, for example, a high-performance remote controller that recognizes a user's voice and wirelessly transmits a command to a controlled device such as a television. In particular, the remote control device of the present invention is configured to reduce the volume by half-muting the volume of the television after recognizing the wake-up word in order to improve the voice recognition rate of the control word. It is one of the features. Other features of the present invention will be described in detail below.

本明細書で「音声」という場合には、音声そのものだけでなく、音声における特徴点を抽出した符号の情報(データ)など、音声に基づいて生成された情報(データ)を含む場合がある。 In the present specification, the term "voice" may include not only the voice itself but also information (data) generated based on the voice, such as code information (data) obtained by extracting feature points in the voice.

本発明の遠隔操作装置について、以下の構成に従って図面を参照しながら具体的に説明する。ただし、以下で説明する実施形態はあくまで本発明の一例にすぎず、本発明の技術的範囲を限定的に解釈させるものではない。なお、各図面において、同一の構成要素には同一の符号を付しており、その説明を省略する場合がある。
1.実施形態
2.実施例
(1)実施例1
(2)実施例2
(3)実施例3
(4)実施例4
(5)実施例5
(6)実施例6
3.変形例
(1)変形例1
(2)変形例2
4.本発明の特徴
5.補足事項
The remote control device of the present invention will be specifically described with reference to the drawings according to the following configuration. However, the embodiments described below are merely examples of the present invention, and do not limit the technical scope of the present invention. In each drawing, the same components are designated by the same reference numerals, and the description thereof may be omitted.
1. 1. Embodiment 2. Example (1) Example 1
(2) Example 2
(3) Example 3
(4) Example 4
(5) Example 5
(6) Example 6
3. 3. Modification example (1) Modification example 1
(2) Modification example 2
4. Features of the present invention 5. Supplementary information

<1.実施形態>
<遠隔操作装置1>
図1は、本実施形態の遠隔操作装置1の機能的構成を示すブロック図である。図1に示されるように、本実施形態の遠隔操作装置1は、制御部10、記憶部20、機器制御指令送出部30、機器制御指令受信部40、第1通知手段50、第2通知手段60、音声入力部70、音声出力部80、及び出力音声作成部81を含んで構成される。
<1. Embodiment>
<Remote control device 1>
FIG. 1 is a block diagram showing a functional configuration of the remote control device 1 of the present embodiment. As shown in FIG. 1, the remote control device 1 of the present embodiment includes a control unit 10, a storage unit 20, a device control command sending unit 30, a device control command receiving unit 40, a first notification means 50, and a second notification means. 60, a voice input unit 70, a voice output unit 80, and an output voice creation unit 81 are included.

図2は、遠隔操作装置1の外観を示す図である。遠隔操作装置1は、円筒状の本体下部分と、上に向かって縮径する本体上部分とからなる。遠隔操作装置1の本体上面には、赤外線を透過する樹脂で覆われた機器制御指令受信部40が配置される。機器制御指令受信部40は、赤外線受光素子を含む。本体上部分の傾斜面には、第1通知手段50、第2通知手段60、及び音声入力部70が配置される。第1通知手段50は、例えば赤色に発光するLED素子である。第2通知手段60は、例えば緑色に発光するLED素子である。本体下部分の側面には、赤外線を透過する樹脂で覆われた機器制御指令送出部30が配置される。機器制御指令送出部30は、赤外線発光素子を含む。本体底面には、音声出力部80が配置される。音声出力部80は、所謂スピーカーである。遠隔操作装置1は、例えば、充電用の電力供給のためのUSB端子Aを含む。なお、USB端子Aは充電用ではなく、可動用の電力供給を行うものであってもよい。遠隔操作装置1は、必ずしも充電された電力により稼働するものでなくてもよい。 FIG. 2 is a diagram showing the appearance of the remote control device 1. The remote control device 1 includes a cylindrical lower part of the main body and an upper part of the main body whose diameter is reduced upward. On the upper surface of the main body of the remote control device 1, a device control command receiving unit 40 covered with a resin that transmits infrared rays is arranged. The device control command receiving unit 40 includes an infrared light receiving element. The first notification means 50, the second notification means 60, and the voice input unit 70 are arranged on the inclined surface of the upper part of the main body. The first notification means 50 is, for example, an LED element that emits red light. The second notification means 60 is, for example, an LED element that emits green light. A device control command sending unit 30 covered with a resin that transmits infrared rays is arranged on the side surface of the lower portion of the main body. The device control command sending unit 30 includes an infrared light emitting element. An audio output unit 80 is arranged on the bottom surface of the main body. The audio output unit 80 is a so-called speaker. The remote control device 1 includes, for example, a USB terminal A for supplying power for charging. The USB terminal A may supply electric power for movement, not for charging. The remote control device 1 does not necessarily have to be operated by the charged electric power.

以下、遠隔操作装置1を構成する各要素について簡単に説明する。各要素の具体的な動作については、フローチャートを用いて後ほど説明する。なお、本実施形態における各要素の説明、及びフローチャートを用いた動作の説明は、いずれも本実施形態において特徴的な部分のみの説明であって、従来技術と同様の構成及び動作についてはその説明を省略している。 Hereinafter, each element constituting the remote control device 1 will be briefly described. The specific operation of each element will be described later using a flowchart. It should be noted that the explanation of each element in the present embodiment and the explanation of the operation using the flowchart are only the explanations of the characteristic parts in the present embodiment, and the same configuration and operation as in the prior art will be described. Is omitted.

<制御部10>
制御部10は、遠隔操作装置1の各構成の動作を制御する。制御部10による具体的な制御については後述する。
<Control unit 10>
The control unit 10 controls the operation of each configuration of the remote control device 1. Specific control by the control unit 10 will be described later.

<記憶部20>
記憶部20は、ROMまたはRAMであって、制御部10の制御により種々の情報を記憶する。記憶部20は、例えば、音声または情報化された音声に関する音声情報、及び音声情報に応じて実行される制御処理に関する制御情報等を記憶する。
<Memory unit 20>
The storage unit 20 is a ROM or RAM, and stores various information under the control of the control unit 10. The storage unit 20 stores, for example, voice information related to voice or computerized voice, control information related to control processing executed in response to the voice information, and the like.

具体的には、記憶部20は、後述のウェイクアップワードと、制御ワード及び制御ワードに関連づけられた指令とを記憶する。ウェイクアップワード及び制御ワードは、予め登録されているものと、使用者自身が登録可能なものとがある。ウェイクアップワード及び制御ワードは、音声そのものとして記憶されていてもよいし、音声に基づいて生成された情報(データ)であってもよい。音声に基づいて生成されたデータとは、例えば、使用者の発声の特徴点を抽出して符号化した情報(データ)などである。 Specifically, the storage unit 20 stores the wake-up word described later, the control word, and the command associated with the control word. The wakeup word and the control word may be registered in advance or may be registered by the user himself / herself. The wake-up word and the control word may be stored as the voice itself, or may be information (data) generated based on the voice. The data generated based on the voice is, for example, information (data) obtained by extracting and encoding the characteristic points of the voice of the user.

<機器制御指令送出部30>
機器制御指令送出部30は、例えば赤外線を用いた無線通信により、被制御機器であるテレビ2、エアコン、及びシーリングライト等に指令を送出する。機器制御指令送出部30は、赤外線通信に代えて、または赤外線通信に加えて、Bluetoothまたは無線LANなどを用いた無線通信を用いてもよい。
<Device control command sending unit 30>
The device control command sending unit 30 sends a command to a controlled device such as a television 2, an air conditioner, and a ceiling light by wireless communication using infrared rays, for example. The device control command sending unit 30 may use wireless communication using Bluetooth, wireless LAN, or the like in place of infrared communication or in addition to infrared communication.

<機器制御指令受信部40>
機器制御指令受信部40は、例えば赤外線を用いた無線通信によって、他の機器から無線で送信された指令を受信する。機器制御指令受信部40は、赤外線通信に代えて、または赤外線通信に加えて、Bluetoothまたは無線LANなどを用いた無線通信を用いてもよい。
<Device control command receiver 40>
The device control command receiving unit 40 receives commands wirelessly transmitted from other devices, for example, by wireless communication using infrared rays. The device control command receiving unit 40 may use wireless communication using Bluetooth, wireless LAN, or the like in place of infrared communication or in addition to infrared communication.

<第1通知手段50>
第1通知手段50は、例えば赤色LEDを含んで構成され、制御部10の制御により発光する。第1通知手段50は、発光することで、使用者に視覚情報として所定の状態等を通知する。第1通知手段50は、例えば点灯または点滅により通知を行う。
<First notification means 50>
The first notification means 50 is configured to include, for example, a red LED, and emits light under the control of the control unit 10. The first notification means 50 notifies the user of a predetermined state or the like as visual information by emitting light. The first notification means 50 notifies by, for example, lighting or blinking.

<第2通知手段60>
第2通知手段60は、例えば緑色LEDを含んで構成され、制御部10の制御により発光する。第2通知手段60は、発光することで、使用者に視覚情報として所定の状態等を通知する。第2通知手段60は、例えば点灯または点滅により通知を行う。
<Second notification means 60>
The second notification means 60 is configured to include, for example, a green LED, and emits light under the control of the control unit 10. The second notification means 60 notifies the user of a predetermined state or the like as visual information by emitting light. The second notification means 60 notifies by, for example, lighting or blinking.

<音声入力部70>
音声入力部70は、所謂マイクなどであって、周囲の音声を電気信号に変換して制御部10に出力する。なお、音声入力部70が使用者の声を取得して認識することに特化する場合、人の声の周波数帯の音声だけを取得するバンドパスフィルタを有する構成としても良い。
<Voice input unit 70>
The voice input unit 70 is a so-called microphone or the like, and converts surrounding voice into an electric signal and outputs it to the control unit 10. When the voice input unit 70 specializes in acquiring and recognizing the user's voice, it may be configured to have a bandpass filter that acquires only the voice in the frequency band of the human voice.

また、音声入力部70は、図2に示された遠隔操作装置1の本体上部分の傾斜面の位置と、この位置とは対称の位置に配置されてもよい。 Further, the voice input unit 70 may be arranged at a position symmetrical to the position of the inclined surface of the upper part of the main body of the remote control device 1 shown in FIG.

<音声出力部80>
音声出力部80は、所謂スピーカーなどであって、与えられた電気信号に応じて音声を出力する。音声出力部80は、出力音声作成部81で作成された電気信号が与えられ、この電気信号に応じた音声を出力する。
<Audio output unit 80>
The audio output unit 80 is a so-called speaker or the like, and outputs audio in response to a given electric signal. The voice output unit 80 is given an electric signal created by the output voice creation unit 81, and outputs a voice corresponding to the electric signal.

<出力音声作成部81>
出力音声作成部81は、制御部10の制御により、出力すべき音声に対応する信号を作成して音声出力部80に出力する。出力音声作成部81は、音声の合成によって出力する音声を作成してもよいし、予め録音された音声を選択して連結することで音声を作成してもよい。
<Output audio creation unit 81>
The output voice creation unit 81 creates a signal corresponding to the voice to be output under the control of the control unit 10 and outputs the signal to the voice output unit 80. The output voice creation unit 81 may create a voice to be output by synthesizing voices, or may create voices by selecting and concatenating pre-recorded voices.

<テレビ2>
図3は、遠隔操作装置1による遠隔操作の対象となるテレビ2を示す図である。テレビ2は、制御部100、記憶部120、指令受信部140、及び音声出力部180を含んで構成される。テレビ2は、これら以外に、画像が表示される画像表示部、及び電源装置などの周知の構成を含むが、このような周知の構成及び動作については説明を省略する。テレビ2は、本発明の「映像音響機器」の一具体例である。
<TV 2>
FIG. 3 is a diagram showing a television 2 to be remotely controlled by the remote control device 1. The television 2 includes a control unit 100, a storage unit 120, a command receiving unit 140, and an audio output unit 180. In addition to these, the television 2 includes a well-known configuration such as an image display unit for displaying an image and a power supply device, but the description of such a well-known configuration and operation will be omitted. The television 2 is a specific example of the "audio-visual equipment" of the present invention.

<制御部100>
制御部100は、テレビ2の各構成の動作を制御する。例えば、制御部100は指令受信部140が受信した指令に応じて、音声出力部180から出力される音声の音量を変化させる。
<Control unit 100>
The control unit 100 controls the operation of each configuration of the television 2. For example, the control unit 100 changes the volume of the voice output from the voice output unit 180 in response to the command received by the command reception unit 140.

<記憶部120>
記憶部120は、ROMまたはRAMであって、制御部100の制御により種々の情報を記憶する。記憶部120は、例えば、受信した指令に対応する処理に関する情報、及びテレビ2で表示するチャンネルに関する情報などを記憶する。
<Memory unit 120>
The storage unit 120 is a ROM or RAM, and stores various information under the control of the control unit 100. The storage unit 120 stores, for example, information on processing corresponding to the received command, information on the channel displayed on the television 2, and the like.

<指令受信部140>
指令受信部140は、例えば赤外線を用いた無線通信により、遠隔操作装置1または別の遠隔操作装置(リモコン)から送出された指令を受信し、制御部100に出力する。
<Command receiver 140>
The command receiving unit 140 receives a command sent from the remote control device 1 or another remote control device (remote controller) by, for example, wireless communication using infrared rays, and outputs the command to the control unit 100.

制御部100は、指令受信部140が遠隔操作装置1から電源オンの指令を受けると、テレビ2の状態をスリープ状態(またはスタンバイ状態)から起動状態へと変化させる。このとき、遠隔操作装置1により電源がオンにされた直後は、遠隔操作装置1から続く指令が送出されることが想定される。そのため、制御部100は、遠隔操作装置1から送出された指令により電源をオンにする場合には、音声出力部180から出力される音量を一時的に下げた状態とする。 When the command receiving unit 140 receives a power-on command from the remote control device 1, the control unit 100 changes the state of the television 2 from the sleep state (or standby state) to the activated state. At this time, immediately after the power is turned on by the remote control device 1, it is assumed that a subsequent command is sent from the remote control device 1. Therefore, when the power is turned on by the command sent from the remote control device 1, the control unit 100 temporarily lowers the volume output from the voice output unit 180.

また、制御部100は、遠隔操作装置1から後述のハーフミュート指令を受信すると、音声出力部180から出力される音量を下げる。この音量を下げる割合は、1/n(nは1以上の実数)とする。制御部100は、このハーフミュート指令を繰り返し受信した場合には、音量を1/nの割合でさらに下げる。すなわち、ハーフミュート指令がm回繰り返されると、音声出力部180から出力される音声の音量は、(1/n)のm乗となる。なお、ハーフミュート指令を繰り返し受信したときに定められた割合で音量を下げていく設定であれば良く、その値は例えば1回目が(1/n)、2回目が(1/p)、3回目が(1/q)と回数によって異なる割合であっても良い(p及びqはそれぞれ1以上の実数)。 Further, when the control unit 100 receives the half mute command described later from the remote control device 1, the control unit 100 lowers the volume output from the voice output unit 180. The ratio of lowering the volume is 1 / n (n is a real number of 1 or more). When the control unit 100 repeatedly receives this half mute command, the control unit 100 further lowers the volume at a rate of 1 / n. That is, when the half mute command is repeated m times, the volume of the sound output from the sound output unit 180 becomes the m power of (1 / n). The volume may be lowered at a predetermined rate when the half mute command is repeatedly received, and the values are, for example, (1 / n) for the first time and (1 / p) for the second time. The number of times may be (1 / q) and the ratio may differ depending on the number of times (p and q are real numbers of 1 or more, respectively).

<音声出力部180>
音声出力部180は、テレビ2に内蔵されたスピーカーなどであって、与えられた電気信号に応じて音声を出力する。音声出力部180から出力される音声は、制御部100によってその音量が調整される。
<Audio output unit 180>
The audio output unit 180 is a speaker or the like built in the television 2, and outputs audio in response to a given electric signal. The volume of the voice output from the voice output unit 180 is adjusted by the control unit 100.

<遠隔操作装置1における遠隔操作処理>
次に、遠隔操作装置1で行われる遠隔操作処理について、図4のフローチャートを参照しながら説明する。ここでは、遠隔操作装置1がテレビ2を被制御機器として操作(制御)する処理における、本実施形態の特徴部分について説明する。
<Remote control processing in remote control device 1>
Next, the remote control process performed by the remote control device 1 will be described with reference to the flowchart of FIG. Here, a feature portion of the present embodiment in the process in which the remote control device 1 operates (controls) the television 2 as a controlled device will be described.

<S100>
遠隔操作装置1は、動作前のスタンバイ状態においてウェイクアップワードによる遠隔操作処理の開始を待つ。遠隔操作装置1は、音声入力部70が取得した音声を制御部10に出力する。制御部10は、この音声が、記憶部20に登録されたウェイクアップワードであるかどうかを確認する(S100)。この音声がウェイクアップワードではない場合には(S100でN)、制御部10及び音声入力部70は、引き続きウェイクアップワードの音声を待つ。
<S100>
The remote control device 1 waits for the start of the remote control process by the wakeup word in the standby state before the operation. The remote control device 1 outputs the voice acquired by the voice input unit 70 to the control unit 10. The control unit 10 confirms whether or not this voice is a wake-up word registered in the storage unit 20 (S100). If this voice is not a wakeup word (N in S100), the control unit 10 and the voice input unit 70 continue to wait for the voice of the wakeup word.

<S101、S102>
制御部10が、この音声がウェイクアップワードであると認識した場合(S100でY)、制御部10は、制御ワード認識モードに移行し、第1通知手段50を作動させて赤色LEDを点滅させる(S101)。この第1通知手段50の赤色LEDは、制御ワード認識モードで動作中に点滅する。次に、制御部10は、機器制御指令送出部30を介して、被制御機器であるテレビ2に対して、音量を下げる指令であるハーフミュート指令を送出する(S102)。また、制御部10は、機器制御指令送出部30を介して、テレビ2以外の周辺の機器に対して、作動音を低減させる静音制御信号を送出する(S102)。
<S101, S102>
When the control unit 10 recognizes that this voice is a wake-up word (Y in S100), the control unit 10 shifts to the control word recognition mode, operates the first notification means 50, and blinks the red LED. (S101). The red LED of the first notification means 50 blinks during operation in the control word recognition mode. Next, the control unit 10 transmits a half mute command, which is a command to lower the volume, to the television 2, which is a controlled device, via the device control command sending unit 30 (S102). Further, the control unit 10 transmits a silent control signal for reducing the operating noise to peripheral devices other than the television 2 via the device control command sending unit 30 (S102).

静音制御信号は、例えば、テレビ2の周囲の扇風機、サーキュレータ、エアコン、空気清浄機、及びAV機器等に対して、それぞれの作動音を低減させるための指令である。例えば、扇風機、サーキュレータ、エアコン、及び空気清浄機等に対する、その作動を停止させたり、風量を低減させたりすることで、ファンの回転する音などを低減させるための指令が静音制御信号となる。また、AV機器等の音声を発する機器に対しては、その音量を一時的に低減させる指令が静音制御信号となる。これらの周囲の機器も、遠隔操作装置1により操作される機器であるため、被制御機器と呼ぶことがある。 The silent control signal is a command for, for example, a fan, a circulator, an air conditioner, an air purifier, an AV device, or the like around the television 2 to reduce the operating noise of each. For example, a command for reducing the sound of fan rotation by stopping the operation of an electric fan, a circulator, an air conditioner, an air purifier, or the like or reducing the air volume becomes a silent control signal. Further, for a device that emits sound such as an AV device, a command for temporarily reducing the volume is a silent control signal. Since these peripheral devices are also devices operated by the remote control device 1, they may be called controlled devices.

本明細書において「ハーフミュート」とは、ある装置において操作前の音量を下げる操作を指す。操作後の音量は、操作前の音量と最低音量との間の任意の音量となる。操作後の音量は、例えば、装置における音量がデジタル値で定量的な音量値として示される場合、操作前の音量値の1/n(nは1以上の実数)の音量値にする。ここで、nを2とし、操作前の音量値の半分の音量値にすることが好ましい。 As used herein, the term "half mute" refers to an operation of lowering the volume before an operation in a certain device. The volume after the operation is an arbitrary volume between the volume before the operation and the lowest volume. The volume after the operation is, for example, 1 / n (n is a real number of 1 or more) of the volume value before the operation when the volume in the device is indicated as a quantitative volume value by a digital value. Here, it is preferable that n is set to 2 and the volume value is half the volume value before the operation.

<S103>
次に、制御部10は、ウェイクアップワードを認識してから経過した時間を計測するため、タイマーによる時間計測を開始する(S103)。タイマーは、制御部10の内蔵タイマー等を使用してもよいし、外部のタイマーを使用してもよいし、単なるカウンターであってもよい。
<S103>
Next, the control unit 10 starts time measurement by a timer in order to measure the time elapsed since the wakeup word is recognized (S103). As the timer, the built-in timer of the control unit 10 or the like may be used, an external timer may be used, or a simple counter may be used.

なお、音量変更処理(S200)、または機器制御処理(S300)が終了した際には、上記のS103以降の処理が繰り返し行われる。 When the volume change process (S200) or the device control process (S300) is completed, the above processes S103 and subsequent steps are repeated.

<S110、S111>
次に、音声入力部70は、ウェイクアップワードに続いて取得した音声を制御部10に出力する。制御部10は、音声入力部70が取得した音声が、記憶部20に登録された制御ワードであるかどうかを確認する(S110)。この音声が制御ワードでない場合、または制御ワードが入力されない場合には(S110でN)、所定時間(例えば5秒)が経過するまで(S111)、制御部10及び音声入力部70は制御ワードを待つ。
<S110, S111>
Next, the voice input unit 70 outputs the voice acquired following the wake-up word to the control unit 10. The control unit 10 confirms whether or not the voice acquired by the voice input unit 70 is a control word registered in the storage unit 20 (S110). If this voice is not a control word, or if the control word is not input (N in S110), the control unit 10 and the voice input unit 70 use the control word until a predetermined time (for example, 5 seconds) elapses (S111). wait.

<S120>
制御部10が制御ワードを確認したら(S110)、制御部10は、記憶部20に記憶された制御ワードを確認し、入力された制御ワードがテレビ2の音量を変更する制御ワードであるかどうかを確認する(S120)。制御ワードがテレビ2の音量を変更する制御ワードであった場合(S120でY)、遠隔操作装置1は後述の音量変更処理を行う(S200)。
<S120>
When the control unit 10 confirms the control word (S110), the control unit 10 confirms the control word stored in the storage unit 20, and whether or not the input control word is a control word for changing the volume of the television 2. Is confirmed (S120). When the control word is a control word for changing the volume of the television 2 (Y in S120), the remote control device 1 performs the volume change process described later (S200).

<S130>
次に、制御部10は、記憶部20に記憶された制御ワードを確認し、入力された制御ワードがテレビ2を含む被制御機器を制御(操作)する制御ワードであるかどうかを確認する(S130)。制御ワードが被制御機器を制御する制御ワードであった場合(S130でY)、遠隔操作装置1は後述の機器制御処理を行う(S300)。
<S130>
Next, the control unit 10 confirms the control word stored in the storage unit 20, and confirms whether or not the input control word is a control word that controls (operates) the controlled device including the television 2. S130). When the control word is a control word that controls the controlled device (Y in S130), the remote control device 1 performs the device control process described later (S300).

<S140>
次に、制御部10は、記憶部20に記憶された制御ワードを確認し、入力された制御ワードが設定モードを実行する制御ワードであるかどうかを確認する(S140)。制御ワードが制御モードを実行する制御ワードであった場合(S140でY)、遠隔操作装置1は後述の設定モードを実行する(S400)。なお、設定モードは、本発明の「音声登録モード」の一具体例である。
<S140>
Next, the control unit 10 confirms the control word stored in the storage unit 20, and confirms whether or not the input control word is a control word that executes the setting mode (S140). When the control word is a control word that executes the control mode (Y in S140), the remote control device 1 executes the setting mode described later (S400). The setting mode is a specific example of the "voice registration mode" of the present invention.

<S151、S152>
次に、制御部10は、第1通知手段50の赤色LEDの点滅を停止させて消灯する(S151)。制御部10は、機器制御指令送出部30を介して、テレビ2に対してハーフミュート状態を解除して音量を元の状態まで上げるためのハーフミュート解除信号を送出する(S152)。制御部10は、機器制御指令送出部30を介して、テレビ2以外の周辺の機器に対して、静音制御信号により変更された状態を元に戻すための、静音解除信号を送出する(S152)。
<S151, S152>
Next, the control unit 10 stops blinking of the red LED of the first notification means 50 and turns it off (S151). The control unit 10 transmits a half mute release signal for releasing the half mute state to the television 2 and raising the volume to the original state via the device control command transmission unit 30 (S152). The control unit 10 transmits a silent release signal to peripheral devices other than the television 2 via the device control command sending unit 30 to restore the state changed by the silent control signal (S152). ..

なお、設定モード(S400)が終了した際には、上記のS151以降の処理が行われる。 When the setting mode (S400) is completed, the above-mentioned processes after S151 are performed.

以上の処理によって、遠隔操作装置1における遠隔操作処理が終了する。その後、遠隔操作装置1は、ウェイクアップワードを待つ状態に戻る。 By the above processing, the remote control processing in the remote control device 1 is completed. After that, the remote control device 1 returns to the state of waiting for the wakeup word.

<音量変更処理(S200)>
次に、音量変更処理(S200)の具体的な内容を、図5を参照しながら説明する。
<Volume change process (S200)>
Next, the specific contents of the volume change process (S200) will be described with reference to FIG.

<S201>
音量変更処理において、まず、制御部10は第2通知手段60を作動させて緑色LEDを所定期間(例えば2秒)点滅させる(S201)。この第2通知手段60の点滅は、使用者からの音量変更に関する制御ワードを認識した旨を、使用者に通知するものである。
<S201>
In the volume change process, first, the control unit 10 operates the second notification means 60 to blink the green LED for a predetermined period (for example, 2 seconds) (S201). The blinking of the second notification means 60 notifies the user that the control word related to the volume change from the user has been recognized.

<S202>
次に、制御部10は、機器制御指令送出部30を介して、テレビ2に対してハーフミュート状態を解除して音量を元の状態まで上げるためのハーフミュート解除信号を送出する(S202)。
<S202>
Next, the control unit 10 transmits a half mute release signal for releasing the half mute state and raising the volume to the original state to the television 2 via the device control command transmission unit 30 (S202).

<S203>
次に、制御部10は、機器制御指令送出部30を介して、テレビ2に対して音量を変更する音量変更信号を送出する(S203)。
<S203>
Next, the control unit 10 transmits a volume change signal for changing the volume to the television 2 via the device control command transmission unit 30 (S203).

音量変更処理では、上記のように、テレビ2の音量を変更する指令を送出する前にハーフミュート状態を解除することで、変更後のテレビ2の音量を使用者が適切に認識できるようにしている。上記処理が終了したら、図4の遠隔操作処理のS103の処理に戻る(A)。 In the volume change process, as described above, the half-mute state is released before sending the command to change the volume of the TV 2, so that the user can appropriately recognize the changed volume of the TV 2. There is. When the above processing is completed, the process returns to the processing of S103 of the remote control processing of FIG. 4 (A).

<機器制御処理(S300)>
次に、機器制御処理(S300)の具体的な内容を、図6を参照しながら説明する。
<Device control process (S300)>
Next, the specific contents of the device control process (S300) will be described with reference to FIG.

<S301>
機器制御処理において、まず、制御部10は第2通知手段60を作動させて緑色LEDを所定期間(例えば2秒)点滅させる(S301)。この第2通知手段60の点滅は、使用者からの被制御機器を制御(操作)する制御ワードを認識した旨を、使用者に通知するものである。
<S301>
In the device control process, first, the control unit 10 operates the second notification means 60 to blink the green LED for a predetermined period (for example, 2 seconds) (S301). The blinking of the second notification means 60 notifies the user that the control word for controlling (operating) the controlled device from the user has been recognized.

<S302>
次に、制御部10は、記憶部20を参照し、機器制御指令送出部30を介して、制御ワードに対応する制御信号(指令)を、対象の被制御機器に対して送出する(S302)。被制御機器は、テレビ2のみでなく、扇風機、サーキュレータ、エアコン、空気清浄機、AV機器、またはシーリングライト等の機器が含まれる。被制御機器がテレビ2である場合には、テレビ2のチャンネルを変更する指令などが送出される。被制御機器が扇風機である場合には、風量を変更したり、電源をオン・オフしたりする指令などが送出される。被制御機器がシーリングライトである場合には、明るさを変更したり、電源をオン・オフしたりする指令が送出される。
<S302>
Next, the control unit 10 refers to the storage unit 20 and transmits a control signal (command) corresponding to the control word to the target controlled device via the device control command sending unit 30 (S302). .. The controlled device includes not only the television 2 but also a device such as a fan, a circulator, an air conditioner, an air purifier, an AV device, or a ceiling light. When the controlled device is the television 2, a command or the like for changing the channel of the television 2 is sent. When the controlled device is an electric fan, a command to change the air volume or turn the power on / off is sent. When the controlled device is a ceiling light, a command to change the brightness or turn the power on / off is sent.

上記処理が終了したら、図4の遠隔操作処理のS103の処理に戻る(A)。 When the above processing is completed, the process returns to the processing of S103 of the remote control processing of FIG. 4 (A).

<設定モード処理(S400)>
次に、設定モード処理(S400)の具体的な内容を、図7を参照しながら説明する。設定モード処理では、ウェイクアップワードの登録または変更、及び制御ワードと制御ワードに対応した操作内容との登録が行われる。この、制御ワードと、制御ワードに対応した操作内容との登録を、「リモコン学習」と呼ぶことがある。
<Setting mode processing (S400)>
Next, the specific contents of the setting mode processing (S400) will be described with reference to FIG. 7. In the setting mode processing, the wakeup word is registered or changed, and the control word and the operation content corresponding to the control word are registered. The registration of the control word and the operation content corresponding to the control word may be referred to as "remote control learning".

<S410>
設定モード処理において、まず、制御部10は、使用者が設定しようとするものが、ウェイクアップワードの登録か、リモコン学習か、を使用者に確認する(S410)。具体的には、制御部10は、音声出力部80から、設定したい機能について確認する音声を出力し、これに応答した使用者の音声に基づき、ウェイクアップワードの登録か、リモコン学習かを判定する。
<S410>
In the setting mode processing, first, the control unit 10 confirms with the user whether what the user intends to set is the registration of the wakeup word or the remote control learning (S410). Specifically, the control unit 10 outputs a voice confirming the function to be set from the voice output unit 80, and determines whether to register a wake-up word or remote control learning based on the voice of the user who responds to the voice. To do.

<S411、S412、S413、S414>
制御部10は、ウェイクアップワードの登録を行うという音声入力が確認されたら(S410でY)、音声出力部80を介して、使用者に登録したいウェイクアップワードの確認を行う(S411)。制御部10が、音声入力部70を介して使用者が発する音声を確認したら(S411でY)、制御部10は、音声出力部80を介して、使用者が登録したいウェイクアップワードを登録してよいか、使用者に承認を求める(S412)。制御部10は、音声入力部70を介して使用者の承認が確認されたら(S412でY)、使用者により入力された音声を、ウェイクアップワードとして記憶部20に登録することで記憶させる(S413)。一方、ウェイクアップワードが所定時間以上適切に確認できない場合(S411でN)、またはウェイクアップワードの登録を使用者が承認しなかった場合(S412でN)には、制御部10はそれぞれの状態に対応したエラーメッセージを、音声出力部80を介して出力する(S414)。これらの処理が終了したら、図4の遠隔操作処理のS151の処理に戻る(B)。
<S411, S412, S413, S414>
When the voice input for registering the wakeup word is confirmed (Y in S410), the control unit 10 confirms the wakeup word to be registered in the user via the voice output unit 80 (S411). When the control unit 10 confirms the voice emitted by the user via the voice input unit 70 (Y in S411), the control unit 10 registers the wakeup word that the user wants to register via the voice output unit 80. Ask the user for approval (S412). When the approval of the user is confirmed via the voice input unit 70 (Y in S412), the control unit 10 stores the voice input by the user in the storage unit 20 as a wake-up word (Y in S412). S413). On the other hand, if the wakeup word cannot be properly confirmed for a predetermined time or longer (N in S411), or if the user does not approve the registration of the wakeup word (N in S412), the control unit 10 is in each state. The error message corresponding to is output via the voice output unit 80 (S414). When these processes are completed, the process returns to the process of S151 of the remote control process of FIG. 4 (B).

<S420>
一方、制御部10は、制御ワードの登録を行うという音声入力が確認されたら(S410でN)、音声出力部80を介して、使用者に設定したい機能についての確認を行う(S420)。
<S420>
On the other hand, when the voice input for registering the control word is confirmed (N in S410), the control unit 10 confirms the function to be set by the user via the voice output unit 80 (S420).

具体的には、制御ワードの登録に際して遠隔操作装置1は、使用者が音声によって操作したい機器の名称及び操作内容を、送出すべき指令の内容と関連づけて記憶する。例えば、操作対象機器としてオーディオ、操作内容として電源、送出すべき指令の内容が赤外線による電源トグルの指令、という内容を、制御部10が記憶部20に記憶させる(登録する)こととなる。 Specifically, when registering a control word, the remote control device 1 stores the name and operation content of the device that the user wants to operate by voice in association with the content of the command to be transmitted. For example, the control unit 10 stores (registers) in the storage unit 20 the content that the audio is the operation target device, the power supply is the operation content, and the content of the command to be transmitted is the power toggle command by infrared rays.

<S430、S440、S450>
次に、制御部10は、音声出力部80を介して、使用者に操作対象機器を確認する(S430)。制御部10は、この確認に応答して使用者が発した音声を取得して、記憶部20に記憶させる。続いて、制御部10は、音声出力部80を介して、登録したい操作に対応した操作対象機器のリモコンの操作ボタンを押すよう使用者に促す。その後、制御部10は、機器制御指令受信部40を介して、操作対象機器のリモコンから発せられた赤外線信号等の無線指令を受信する(S440)。制御部10は、受信した無線指令を記憶部20に記憶させる。続いて、制御部10は、音声出力部80を介して、使用者に登録する操作内容を確認する(S450)。制御部10は、この確認に応答して使用者が発した音声を取得して、記憶部20に記憶させる。
<S430, S440, S450>
Next, the control unit 10 confirms the operation target device with the user via the voice output unit 80 (S430). The control unit 10 acquires the voice emitted by the user in response to this confirmation and stores it in the storage unit 20. Subsequently, the control unit 10 urges the user to press the operation button on the remote controller of the operation target device corresponding to the operation to be registered via the voice output unit 80. After that, the control unit 10 receives a radio command such as an infrared signal issued from the remote controller of the operation target device via the device control command receiving unit 40 (S440). The control unit 10 stores the received radio command in the storage unit 20. Subsequently, the control unit 10 confirms the operation content to be registered in the user via the voice output unit 80 (S450). The control unit 10 acquires the voice emitted by the user in response to this confirmation and stores it in the storage unit 20.

<S451>
次に、制御部10は、制御ワードを登録するため、記憶部20に記憶していた操作対象機器、無線指令、及び操作内容、を互いに関連づける。これにより、記憶部20には、操作対象機器及び操作内容に関連づけられた無線指令が記憶される。制御部10は、操作対象機器と操作内容とを指定する制御ワードを使用者が発したときに、この音声に応答して機器制御指令送出部30から無線指令を送出する処理を行うことができるようになる。
上記処理が終了したら、図4の遠隔操作処理のS151の処理に戻る(B)。
<S451>
Next, in order to register the control word, the control unit 10 associates the operation target device, the radio command, and the operation content stored in the storage unit 20 with each other. As a result, the storage unit 20 stores the radio command associated with the operation target device and the operation content. When the user issues a control word that specifies the device to be operated and the operation content, the control unit 10 can perform a process of transmitting a wireless command from the device control command sending unit 30 in response to this voice. Will be.
When the above processing is completed, the process returns to the processing of S151 of the remote control processing of FIG. 4 (B).

このとき、音声は、使用者自身の特徴に合わせた情報(データ)として登録されるため、使用者の話し方の習慣等に合わせた内容として登録される。ただし、敢えて使用者の特徴を排除し、単語として登録するようにすることもできる。この場合、使用者以外であっても、登録されたワードに基づいて被制御機器を操作することが可能となる。 At this time, since the voice is registered as information (data) according to the characteristics of the user himself / herself, the voice is registered as the content according to the user's speaking habits and the like. However, it is also possible to intentionally exclude the characteristics of the user and register it as a word. In this case, even a person other than the user can operate the controlled device based on the registered word.

なお、上記の遠隔操作処理では、制御部10が音声出力部80を介して、使用者による操作を補助するためのガイド音声を出力する構成とすることが好ましい。 In the above remote control process, it is preferable that the control unit 10 outputs a guide voice for assisting the operation by the user via the voice output unit 80.

以上の遠隔操作処理によって、遠隔操作装置1における遠隔操作等が行われる。 By the above remote control processing, remote control and the like in the remote control device 1 are performed.

<2.実施例>
次に、上記の実施形態で説明した遠隔操作装置1の動作について、さらに具体的な実施例を挙げて説明する。
<2. Example>
Next, the operation of the remote control device 1 described in the above embodiment will be described with reference to more specific examples.

<(1)実施例1>
実施例1では、操作者が遠隔操作装置1を用いてテレビ2の音量を上げる操作を行うときの処理の流れを、図8のシーケンス図を参照しながら説明する。
<(1) Example 1>
In the first embodiment, the flow of processing when the operator uses the remote control device 1 to raise the volume of the television 2 will be described with reference to the sequence diagram of FIG.

まず、操作者が、ウェイクアップワードとして「ねえ、ルカ」という音声を発する。音声入力部70はこの音声を取得して制御部10に出力する。制御部10は、この音声が記憶部20に記憶されているウェイクアップワードであることを確認し(S100)、第1通知手段50の赤色LEDを点滅させる(S101)。さらに制御部10は、機器制御指令送出部30を介して、テレビ2に対してハーフミュート指令を送出し、エアコン等の周囲の機器に対して静音制御信号を送出する(S102)。この後、遠隔操作装置1は、制御ワードを待機する状態となる(S110)。 First, the operator emits the voice "Hey, Luka" as a wake-up word. The voice input unit 70 acquires this voice and outputs it to the control unit 10. The control unit 10 confirms that this voice is a wake-up word stored in the storage unit 20 (S100), and blinks the red LED of the first notification means 50 (S101). Further, the control unit 10 sends a half mute command to the television 2 via the device control command sending unit 30, and sends a silent control signal to surrounding devices such as an air conditioner (S102). After that, the remote control device 1 is in a state of waiting for the control word (S110).

テレビ2は、指令受信部140によってハーフミュート指令を受信する。テレビ2の制御部100は、ハーフミュート指令に対応して、音声出力部180から出力される音声の音量を下げる。静音制御信号を受信したエアコン等は、ファンの回転による音の発生を抑制するよう作動する。具体例としては、エアコンでは風量を自動から弱に変更し、サーキュレータでは電源をオンからオフに変更する。 The television 2 receives the half mute command by the command receiving unit 140. The control unit 100 of the television 2 lowers the volume of the sound output from the sound output unit 180 in response to the half mute command. The air conditioner or the like that has received the silent control signal operates so as to suppress the generation of noise due to the rotation of the fan. As a specific example, the air volume is changed from automatic to weak in the air conditioner, and the power is changed from on to off in the circulator.

次に、操作者が、制御ワードとして「音量アップ」という音声を発する。音声入力部70はこの音声を取得して制御部10に出力する。制御部10は、この音声が記憶部20に記憶されている、テレビ2の音量をアップするという音量変更の制御ワードであることを認識する(S120でY、S200)。そして、制御部10は、第2通知手段60の緑色LEDを所定時間(例えば2秒間)点滅させ(S201)、機器制御指令送出部30を介してテレビ2に対してハーフミュート解除信号を送出し(S202)、さらに音量を変更する信号を送出する(S203)。 Next, the operator emits a voice "volume up" as a control word. The voice input unit 70 acquires this voice and outputs it to the control unit 10. The control unit 10 recognizes that this voice is a volume change control word stored in the storage unit 20 for increasing the volume of the television 2 (Y in S120, S200). Then, the control unit 10 blinks the green LED of the second notification means 60 for a predetermined time (for example, 2 seconds) (S201), and transmits a half mute release signal to the television 2 via the device control command transmission unit 30. (S202), and further sends a signal for changing the volume (S203).

テレビ2は、指令受信部140によってハーフミュート解除信号及び音量変更信号を受信し、ハーフミュートを解除してハーフミュート前の音量に戻すとともに、この音量を基準に音量を上げる処理を行う。 The television 2 receives the half mute release signal and the volume change signal by the command receiving unit 140, releases the half mute to return to the volume before the half mute, and performs a process of raising the volume based on this volume.

その後、操作者が所定時間(例えば5秒間)、音声による操作を行わなければ(S111でY)、遠隔操作装置1は第1通知手段50の赤色LEDを消灯し(S151)、エアコン等の周囲の機器に対して静音解除信号を送出し(S152)、処理を終了する。なお、テレビ2に対するハーフミュート解除信号は既に既に送出されているため(S202)、ここでは送出されなくてよい(S152)。このとき、遠隔操作装置1の制御部10は、音声出力部80を介して、「次の制御ワードが認識できません」などという音声入力失敗の通知を行ってもよい。 After that, if the operator does not perform a voice operation for a predetermined time (for example, 5 seconds) (Y in S111), the remote control device 1 turns off the red LED of the first notification means 50 (S151), and surrounds the air conditioner or the like. A silent release signal is sent to the device of (S152), and the process is terminated. Since the half mute release signal for the television 2 has already been transmitted (S202), it does not have to be transmitted here (S152). At this time, the control unit 10 of the remote control device 1 may notify the voice input failure such as "The next control word cannot be recognized" via the voice output unit 80.

静音解除信号を受信したエアコン等の周囲の機器は、静音制御信号に基づいて行われた作動状態の変化を、元の状態に戻すよう作動する。 Peripheral devices such as an air conditioner that have received the silence release signal operate to return the change in the operating state based on the silence control signal to the original state.

<(2)実施例2>
実施例2では、操作者が遠隔操作装置1を用いてテレビ2のチャンネルを変更する操作を行うときの処理の流れを、図9のシーケンス図を参照しながら説明する。
<(2) Example 2>
In the second embodiment, the flow of processing when the operator performs an operation of changing the channel of the television 2 by using the remote control device 1 will be described with reference to the sequence diagram of FIG.

まず、操作者が、ウェイクアップワードとして「ねえ、ルカ」という音声を発する。音声入力部70はこの音声を取得して制御部10に出力する。制御部10は、この音声が記憶部20に記憶されているウェイクアップワードであることを確認し(S100)、第1通知手段50の赤色LEDを点滅させる(S101)。さらに制御部10は、機器制御指令送出部30を介して、テレビ2に対してハーフミュート指令を送出し、エアコン等の周囲の機器に対して静音制御信号を送出する(S102)。この後、遠隔操作装置1は、制御ワードを待機する状態となる(S110)。 First, the operator emits the voice "Hey, Luka" as a wake-up word. The voice input unit 70 acquires this voice and outputs it to the control unit 10. The control unit 10 confirms that this voice is a wake-up word stored in the storage unit 20 (S100), and blinks the red LED of the first notification means 50 (S101). Further, the control unit 10 sends a half mute command to the television 2 via the device control command sending unit 30, and sends a silent control signal to surrounding devices such as an air conditioner (S102). After that, the remote control device 1 is in a state of waiting for the control word (S110).

テレビ2は、指令受信部140によってハーフミュート指令を受信する。テレビ2の制御部100は、ハーフミュート指令に対応して、音声出力部180から出力される音声の音量を下げる。静音制御信号を受信したエアコン等は、ファンの回転による音の発生を抑制するよう作動する。具体例としては、エアコンでは風量を自動から弱に変更し、サーキュレータでは電源をオンからオフに変更する。 The television 2 receives the half mute command by the command receiving unit 140. The control unit 100 of the television 2 lowers the volume of the sound output from the sound output unit 180 in response to the half mute command. The air conditioner or the like that has received the silent control signal operates so as to suppress the generation of noise due to the rotation of the fan. As a specific example, the air volume is changed from automatic to weak in the air conditioner, and the power is changed from on to off in the circulator.

次に、操作者が、制御ワードとして「チャンネルアップ」という音声を発する。音声入力部70はこの音声を取得して制御部10に出力する。制御部10は、この音声が記憶部20に記憶されている、テレビ2のチャンネルをアップ(変更)するという機器制御の制御ワードであることを認識する(S130でY、S300)。そして、制御部10は、第2通知手段60の緑色LEDを所定時間(例えば2秒間)点滅させ(S301)、機器制御指令送出部30を介してテレビ2に対してチャンネルを上げる制御信号(指令)を送出する(S302)。 Next, the operator emits a voice "channel up" as a control word. The voice input unit 70 acquires this voice and outputs it to the control unit 10. The control unit 10 recognizes that this voice is a control word for device control that raises (changes) the channel of the television 2 stored in the storage unit 20 (Y in S130, S300). Then, the control unit 10 blinks the green LED of the second notification means 60 for a predetermined time (for example, 2 seconds) (S301), and raises a channel to the television 2 via the device control command sending unit 30 (command). ) Is sent (S302).

テレビ2は、指令受信部140によってチャンネルを上げる制御信号を受信し、チャンネルを上げる処理を行う。 The television 2 receives a control signal for raising the channel by the command receiving unit 140, and performs a process of raising the channel.

その後、操作者が所定時間(例えば5秒間)、音声による操作を行わなければ(S111でY)、遠隔操作装置1は第1通知手段50の赤色LEDを消灯し(S151)、テレビ2に対してハーフミュート解除信号を送出し(S152)、エアコン等の周囲の機器に対して静音解除信号を送出して(S152)、処理を終了する。このとき、遠隔操作装置1の制御部10は、音声出力部80を介して、「次の制御ワードが認識できません」などという音声入力失敗の通知を行ってもよい。 After that, if the operator does not perform a voice operation for a predetermined time (for example, 5 seconds) (Y in S111), the remote control device 1 turns off the red LED of the first notification means 50 (S151), and the television 2 is turned on. A half mute release signal is sent (S152), a silent release signal is sent to surrounding devices such as an air conditioner (S152), and the process ends. At this time, the control unit 10 of the remote control device 1 may notify the voice input failure such as "The next control word cannot be recognized" via the voice output unit 80.

ハーフミュート解除信号を受信したテレビ2は、制御部100が音声出力部180から出力される音声の音量をハーフミュート前の音量に戻す。また、静音解除信号を受信したエアコン等の周囲の機器は、静音制御信号に基づいて行われた作動状態の変化を、元の状態に戻すよう作動する。 Upon receiving the half mute release signal, the control unit 100 returns the volume of the sound output from the sound output unit 180 to the volume before the half mute. In addition, peripheral devices such as an air conditioner that have received the silent release signal operate to return the change in the operating state based on the silent control signal to the original state.

<(3)実施例3>
実施例3では、操作者が遠隔操作装置1を用いて、シーリングライトをオンにする操作を行うときの処理の流れを、図10のシーケンス図を参照しながら説明する。
<(3) Example 3>
In the third embodiment, the flow of processing when the operator performs an operation of turning on the ceiling light by using the remote control device 1 will be described with reference to the sequence diagram of FIG.

まず、操作者が、ウェイクアップワードとして「ねえ、ルカ」という音声を発する。音声入力部70はこの音声を取得して制御部10に出力する。制御部10は、この音声が記憶部20に記憶されているウェイクアップワードであることを確認し(S100)、第1通知手段50の赤色LEDを点滅させる(S101)。さらに制御部10は、機器制御指令送出部30を介して、テレビ2に対してハーフミュート指令を送出し、エアコン等の周囲の機器に対して静音制御信号を送出する(S102)。この後、遠隔操作装置1は、制御ワードを待機する状態となる(S110)。 First, the operator emits the voice "Hey, Luka" as a wake-up word. The voice input unit 70 acquires this voice and outputs it to the control unit 10. The control unit 10 confirms that this voice is a wake-up word stored in the storage unit 20 (S100), and blinks the red LED of the first notification means 50 (S101). Further, the control unit 10 sends a half mute command to the television 2 via the device control command sending unit 30, and sends a silent control signal to surrounding devices such as an air conditioner (S102). After that, the remote control device 1 is in a state of waiting for the control word (S110).

テレビ2は、指令受信部140によってハーフミュート指令を受信する。テレビ2の制御部100は、ハーフミュート指令に対応して、音声出力部180から出力される音声の音量を下げる。静音制御信号を受信したエアコン等は、ファンの回転による音の発生を抑制するよう作動する。具体例としては、エアコンでは風量を自動から弱に変更し、サーキュレータでは電源をオンからオフに変更する。 The television 2 receives the half mute command by the command receiving unit 140. The control unit 100 of the television 2 lowers the volume of the sound output from the sound output unit 180 in response to the half mute command. The air conditioner or the like that has received the silent control signal operates so as to suppress the generation of noise due to the rotation of the fan. As a specific example, the air volume is changed from automatic to weak in the air conditioner, and the power is changed from on to off in the circulator.

次に、操作者が、制御ワードとして「照明つけて」という音声を発する。音声入力部70はこの音声を取得して制御部10に出力する。制御部10は、この音声が記憶部20に記憶されている、シーリングライトをオンにして照明をつける、機器制御の制御ワードであることを認識する(S130でY、S300)。そして、制御部10は、第2通知手段60の緑色LEDを所定時間(例えば2秒間)点滅させ(S301)、機器制御指令送出部30を介してシーリングライトに対してシーリングライトをオンする制御信号(指令)を送出する(S302)。 Next, the operator emits a voice "Turn on the light" as a control word. The voice input unit 70 acquires this voice and outputs it to the control unit 10. The control unit 10 recognizes that this voice is a control word for device control, which is stored in the storage unit 20 and turns on the ceiling light (Y, S300 in S130). Then, the control unit 10 blinks the green LED of the second notification means 60 for a predetermined time (for example, 2 seconds) (S301), and turns on the ceiling light with respect to the ceiling light via the device control command sending unit 30. (Command) is sent (S302).

シーリングライトは、遠隔操作装置1から送出された電源オンの制御信号を受信して、電源をオンにする。 The ceiling light receives the power-on control signal sent from the remote control device 1 and turns on the power.

その後の処理は、実施例2と同様であるため説明を省略する。 Since the subsequent processing is the same as that of the second embodiment, the description thereof will be omitted.

<(4)実施例4>
実施例4では、ウェイクアップワードの後に制御ワードが発せられず、遠隔操作装置1が被制御機器に対して指令を送信しない場合の流れを、図11のシーケンス図を参照しながら説明する。
<(4) Example 4>
In the fourth embodiment, the flow when the control word is not issued after the wake-up word and the remote control device 1 does not transmit the command to the controlled device will be described with reference to the sequence diagram of FIG.

まず、操作者が、ウェイクアップワードとして「ねえ、ルカ」という音声を発する。音声入力部70はこの音声を取得して制御部10に出力する。制御部10は、この音声が記憶部20に記憶されているウェイクアップワードであることを確認し(S100)、第1通知手段50の赤色LEDを点滅させる(S101)。さらに制御部10は、機器制御指令送出部30を介して、テレビ2に対してハーフミュート指令を送出し、エアコン等の周囲の機器に対して静音制御信号を送出する(S102)。この後、遠隔操作装置1は、制御ワードを待機する状態となる(S110)。 First, the operator emits the voice "Hey, Luka" as a wake-up word. The voice input unit 70 acquires this voice and outputs it to the control unit 10. The control unit 10 confirms that this voice is a wake-up word stored in the storage unit 20 (S100), and blinks the red LED of the first notification means 50 (S101). Further, the control unit 10 sends a half mute command to the television 2 via the device control command sending unit 30, and sends a silent control signal to surrounding devices such as an air conditioner (S102). After that, the remote control device 1 is in a state of waiting for the control word (S110).

テレビ2は、指令受信部140によってハーフミュート指令を受信する。テレビ2の制御部100は、ハーフミュート指令に対応して、音声出力部180から出力される音声の音量を下げる。静音制御信号を受信したエアコン等は、ファンの回転による音の発生を抑制するよう作動する。具体例としては、エアコンでは風量を自動から弱に変更し、サーキュレータでは電源をオンからオフに変更する。 The television 2 receives the half mute command by the command receiving unit 140. The control unit 100 of the television 2 lowers the volume of the sound output from the sound output unit 180 in response to the half mute command. The air conditioner or the like that has received the silent control signal operates so as to suppress the generation of noise due to the rotation of the fan. As a specific example, the air volume is changed from automatic to weak in the air conditioner, and the power is changed from on to off in the circulator.

ここで、遠隔操作装置1が所定時間(例えば5秒間)制御ワードを認識しない場合(S111でY)、制御部10は第1通知手段50の赤色LEDを消灯し(S151)、テレビ2に対してハーフミュート解除信号を送出し(S152)、エアコン等の周囲の機器に対して静音解除信号を送出して(S152)、処理を終了する。このとき、遠隔操作装置1の制御部10は、音声出力部80を介して、「制御ワードが認識できません」または「制御ワードが検知されませんでした」などという音声入力失敗の通知を行ってもよい。 Here, when the remote control device 1 does not recognize the control word for a predetermined time (for example, 5 seconds) (Y in S111), the control unit 10 turns off the red LED of the first notification means 50 (S151) to the television 2. A half mute release signal is sent (S152), a silent release signal is sent to surrounding devices such as an air conditioner (S152), and the process ends. At this time, even if the control unit 10 of the remote control device 1 notifies the voice input failure such as "the control word cannot be recognized" or "the control word was not detected" via the voice output unit 80. Good.

その後の処理は、実施例2と同様であるため説明を省略する。 Since the subsequent processing is the same as that of the second embodiment, the description thereof will be omitted.

<(5)実施例5>
実施例5では、操作者が遠隔操作装置1におけるウェイクアップワードを登録する操作を行うときの処理の流れを、図12のシーケンス図を参照しながら説明する。
<(5) Example 5>
In the fifth embodiment, the flow of processing when the operator performs the operation of registering the wakeup word in the remote control device 1 will be described with reference to the sequence diagram of FIG.

まず、操作者が、ウェイクアップワードとして「ねえ、ルカ」という音声を発する。音声入力部70はこの音声を取得して制御部10に出力する。制御部10は、この音声が記憶部20に記憶されているウェイクアップワードであることを確認し(S100)、第1通知手段50の赤色LEDを点滅させる(S101)。さらに制御部10は、機器制御指令送出部30を介して、テレビ2に対してハーフミュート指令を送出し、エアコン等の周囲の機器に対して静音制御信号を送出する(S102)。この後、遠隔操作装置1は、制御ワードを待機する状態となる(S110)。 First, the operator emits the voice "Hey, Luka" as a wake-up word. The voice input unit 70 acquires this voice and outputs it to the control unit 10. The control unit 10 confirms that this voice is a wake-up word stored in the storage unit 20 (S100), and blinks the red LED of the first notification means 50 (S101). Further, the control unit 10 sends a half mute command to the television 2 via the device control command sending unit 30, and sends a silent control signal to surrounding devices such as an air conditioner (S102). After that, the remote control device 1 is in a state of waiting for the control word (S110).

テレビ2は、指令受信部140によってハーフミュート指令を受信する。テレビ2の制御部100は、ハーフミュート指令に対応して、音声出力部180から出力される音声の音量を下げる。静音制御信号を受信したエアコン等は、ファンの回転による音の発生を抑制するよう作動する。具体例としては、エアコンでは風量を自動から弱に変更し、サーキュレータでは電源をオンからオフに変更する。 The television 2 receives the half mute command by the command receiving unit 140. The control unit 100 of the television 2 lowers the volume of the sound output from the sound output unit 180 in response to the half mute command. The air conditioner or the like that has received the silent control signal operates so as to suppress the generation of noise due to the rotation of the fan. As a specific example, the air volume is changed from automatic to weak in the air conditioner, and the power is changed from on to off in the circulator.

次に操作者は、制御ワードとして「設定モード」という音声を発する。音声入力部70は、この音声を取得して制御部10に出力する。制御部10は、この音声が記憶部20に記憶されている設定モードの処理を開始する制御ワードであることを認識する(S140でY、S400)。 Next, the operator emits a voice "setting mode" as a control word. The voice input unit 70 acquires this voice and outputs it to the control unit 10. The control unit 10 recognizes that this voice is a control word that starts processing of the setting mode stored in the storage unit 20 (Y in S140, S400).

設定モードの処理に入ると、制御部10は音声出力部80を介して、「設定モードです。設定したい機能をどうぞ。」という、使用者がウェイクアップワードの登録をするのか、リモコン学習をするのかを確認するための音声を出力する(S410)。ここで使用者が「ウェイクアップワード」と言うと、制御部10は音声入力部70を介してこの音声を認識し、ウェイクアップワードの登録の処理を進める(S410でY)。 When the processing of the setting mode is started, the control unit 10 learns by remote control whether the user registers the wake-up word, "It is the setting mode. Please set the function you want to set.", Via the voice output unit 80. Outputs a voice for confirming whether or not (S410). Here, when the user says "wake-up word", the control unit 10 recognizes this voice via the voice input unit 70 and proceeds with the process of registering the wake-up word (Y in S410).

制御部10は、音声出力部80を介して、「ウェイクアップワード。登録したい言葉を話してください。」という音声を出力し、使用者が登録したいウェイクアップワードを確認する(S411)。ここで使用者が「リモコンさん」と言うと、制御部10は音声入力部70を介してこの音声を認識する。そして、制御部10は音声出力部80を介して、「リモコンさん。でよろしければ、設定、と言ってください。」という音声を出力し、ウェイクアップワード登録の承認を求める(S412)。これに対して使用者が「設定」と言うと、制御部10は音声入力部70を介してこの音声を認識する。そして、制御部10は、使用者による承認が得られたとして(S412でY)、「リモコンさん」という音声をウェイクアップワードとして登録する(S413)。すなわち、制御部10は、「リモコンさん」という音声をウェイクアップワードとして記憶部20に記憶させる。ウェイクアップワードを登録したら、制御部10は音声入力部70介して、「ウェイクアップワード。リモコンさん。登録しました。」という登録完了を通知する音声を出力する。 The control unit 10 outputs a voice saying "Wake-up word. Please speak the word you want to register." Through the voice output unit 80, and confirms the wake-up word that the user wants to register (S411). Here, when the user says "remote controller", the control unit 10 recognizes this voice via the voice input unit 70. Then, the control unit 10 outputs a voice saying "Remote control-san. If you like, please say setting" via the voice output unit 80, and requests approval for wake-up word registration (S412). On the other hand, when the user says "setting", the control unit 10 recognizes this voice via the voice input unit 70. Then, the control unit 10 registers the voice "remote controller" as a wake-up word (S413), assuming that the user's approval has been obtained (Y in S412). That is, the control unit 10 stores the voice "remote controller" in the storage unit 20 as a wake-up word. After registering the wake-up word, the control unit 10 outputs a voice notifying the completion of registration, "Wake-up word. Remote control. Registered.", Via the voice input unit 70.

登録されるウェイクアップワードは、使用者の音声の特徴点を抽出して生成された情報(データ)であるが、使用者の音声そのものであってもよい。 The registered wakeup word is information (data) generated by extracting the feature points of the user's voice, but it may be the user's voice itself.

上記の処理が終了したら、制御部10は、第1通知手段50の赤色LEDを消灯し(S151)、機器制御指令送出部30を介して、テレビ2に対してハーフミュート解除信号を送出し(S152)、エアコン等の周囲の機器に対して静音解除信号を送出して(S152)、処理を終了する。 When the above processing is completed, the control unit 10 turns off the red LED of the first notification means 50 (S151), and transmits a half mute release signal to the television 2 via the device control command transmission unit 30 (S151). S152), a silent release signal is sent to surrounding devices such as an air conditioner (S152), and the process ends.

<(6)実施例6>
実施例6では、操作者がリモコン学習を行うときの処理の流れを、図13のシーケンス図を参照しながら説明する。
<(6) Example 6>
In the sixth embodiment, the flow of processing when the operator performs remote control learning will be described with reference to the sequence diagram of FIG.

まず、操作者が、ウェイクアップワードとして「ねえ、ルカ」という音声を発する。音声入力部70はこの音声を取得して制御部10に出力する。制御部10は、この音声が記憶部20に記憶されているウェイクアップワードであることを確認し(S100)、第1通知手段50の赤色LEDを点滅させる(S101)。さらに制御部10は、機器制御指令送出部30を介して、テレビ2に対してハーフミュート指令を送出し、エアコン等の周囲の機器に対して静音制御信号を送出する(S102)。この後、遠隔操作装置1は、制御ワードを待機する状態となる(S110)。 First, the operator emits the voice "Hey, Luka" as a wake-up word. The voice input unit 70 acquires this voice and outputs it to the control unit 10. The control unit 10 confirms that this voice is a wake-up word stored in the storage unit 20 (S100), and blinks the red LED of the first notification means 50 (S101). Further, the control unit 10 sends a half mute command to the television 2 via the device control command sending unit 30, and sends a silent control signal to surrounding devices such as an air conditioner (S102). After that, the remote control device 1 is in a state of waiting for the control word (S110).

テレビ2は、指令受信部140によってハーフミュート指令を受信する。テレビ2の制御部100は、ハーフミュート指令に対応して、音声出力部180から出力される音声の音量を下げる。静音制御信号を受信したエアコン等は、ファンの回転による音の発生を抑制するよう作動する。具体例としては、エアコンでは風量を自動から弱に変更し、サーキュレータでは電源をオンからオフに変更する。 The television 2 receives the half mute command by the command receiving unit 140. The control unit 100 of the television 2 lowers the volume of the sound output from the sound output unit 180 in response to the half mute command. The air conditioner or the like that has received the silent control signal operates so as to suppress the generation of noise due to the rotation of the fan. As a specific example, the air volume is changed from automatic to weak in the air conditioner, and the power is changed from on to off in the circulator.

次に操作者は、制御ワードとして「設定モード」という音声を発する。音声入力部70は、この音声を取得して制御部10に出力する。制御部10は、この音声が記憶部20に記憶されている設定モードの処理を開始する制御ワードであることを認識する(S140でY、S400)。 Next, the operator emits a voice "setting mode" as a control word. The voice input unit 70 acquires this voice and outputs it to the control unit 10. The control unit 10 recognizes that this voice is a control word that starts processing of the setting mode stored in the storage unit 20 (Y in S140, S400).

設定モードの処理に入ると、制御部10は音声出力部80を介して、「設定モードです。設定したい機能をどうぞ。」という、使用者がウェイクアップワードの登録をするのか、リモコン学習をするのかを確認するための音声を出力する(S410)。ここで使用者が「リモコン学習」と言うと、制御部10は音声入力部70を介してこの音声を認識し、制御ワードの登録の処理を進める(S420)。 When the processing of the setting mode is started, the control unit 10 learns by remote control whether the user registers the wake-up word, "It is the setting mode. Please set the function you want to set.", Via the voice output unit 80. Outputs a voice for confirming whether or not (S410). Here, when the user says "remote control learning", the control unit 10 recognizes this voice via the voice input unit 70 and proceeds with the process of registering the control word (S420).

制御部10は、音声出力部80を介して「リモコン学習。操作する機器の名前をどうぞ。」という音声を出力して、使用者に操作対象機器を確認する(S430)。ここで使用者が「オーディオ」と言うと、制御部10は音声入力部70を介してこの音声を認識し、記憶部20に記憶させる。そして、制御部10は音声出力部80を介して、「オーディオ。最初のボタンを押してください。」という音声を出力し、登録した操作に対応するリモコンの操作ボタンを押すよう使用者に促す(S440)。ここで使用者が操作対象機器のリモコンのボタンを押すと、このリモコンから無線指令が発信される。遠隔操作装置1の機器制御指令受信部40は、この無線指令を受信して制御部10に出力する。このとき、制御部10は、第2通知手段60の緑色LEDを点滅させて、無線指令を受信したことを通知する。そして、制御部10は、受信した無線指令の内容を記憶部20に記憶させる。次に、制御部10は、音声出力部80を介して、「押したボタンの名前をどうぞ。」という音声を出力し、使用者に登録する操作内容を確認する(S450)。ここで使用者が「電源」と言うと、制御部10は音声入力部70を介してこの音声を認識し、記憶部20に記憶させる。そして制御部10は、音声出力部80を介して、確認のために「電源、ですね。」という音声を出力する。そして、制御部10は、操作対象機器として「オーディオ」という音声、操作内容として「電源」という音声、及び送出すべき無線指令の内容を、互いに関連づけて記憶部20に記憶させる(S451)。 The control unit 10 outputs a voice "Learning remote control. Please give the name of the device to be operated." Through the voice output unit 80, and confirms the operation target device to the user (S430). When the user says "audio" here, the control unit 10 recognizes this voice via the voice input unit 70 and stores it in the storage unit 20. Then, the control unit 10 outputs a voice "Audio. Please press the first button" via the voice output unit 80, and prompts the user to press the operation button of the remote controller corresponding to the registered operation (S440). ). When the user presses a button on the remote controller of the device to be operated, a wireless command is transmitted from this remote controller. The device control command receiving unit 40 of the remote control device 1 receives this radio command and outputs it to the control unit 10. At this time, the control unit 10 blinks the green LED of the second notification means 60 to notify that the radio command has been received. Then, the control unit 10 stores the contents of the received radio command in the storage unit 20. Next, the control unit 10 outputs a voice saying "Please give me the name of the pressed button" via the voice output unit 80, and confirms the operation content to be registered in the user (S450). Here, when the user says "power supply", the control unit 10 recognizes this voice via the voice input unit 70 and stores it in the storage unit 20. Then, the control unit 10 outputs a voice "Power supply, isn't it?" For confirmation via the voice output unit 80. Then, the control unit 10 stores the voice "audio" as the operation target device, the voice "power supply" as the operation content, and the content of the radio command to be transmitted in the storage unit 20 in association with each other (S451).

以降の処理は、実施例5の内容と同様であるため、その説明を省略する。 Since the subsequent processing is the same as the content of the fifth embodiment, the description thereof will be omitted.

上記のリモコン学習により、制御ワードとして、操作対象機器「オーディオ」及び操作内容「電源」が記憶部20に記憶され、これらの制御ワードに対応する操作としての無線指令の内容が記憶部20に記憶される。使用者が、以降の操作で制御ワードとして「オーディオ、電源」と言うと、制御部10は、この音声に対応して、機器制御指令送出部30から、登録された無線指令を送信する。この無線指令は、使用者がリモコン学習の際にリモコンを押した際に出力された信号と同様のものであるため、使用者がリモコン学習の際にリモコンを押した際と同様の操作が実行される。 By the above remote control learning, the operation target device "audio" and the operation content "power supply" are stored in the storage unit 20 as control words, and the content of the wireless command as an operation corresponding to these control words is stored in the storage unit 20. Will be done. When the user says "audio, power supply" as a control word in the subsequent operation, the control unit 10 transmits a registered radio command from the device control command transmission unit 30 in response to this voice. Since this wireless command is the same as the signal output when the user presses the remote controller during remote control learning, the same operation as when the user presses the remote controller during remote control learning is executed. Will be done.

<3.変形例>
<(1)変形例1>
次に、本実施形態の変形例1について説明する。図14は、本実施形態における遠隔操作装置1が配置された部屋を示す図である。図15は、本実施形態の遠隔操作装置1の外観を示す図である。
<3. Modification example>
<(1) Modification example 1>
Next, a modification 1 of the present embodiment will be described. FIG. 14 is a diagram showing a room in which the remote control device 1 according to the present embodiment is arranged. FIG. 15 is a diagram showing the appearance of the remote control device 1 of the present embodiment.

図14に示すように、例えば、部屋内にはテレビ2、ソファ210、及びテーブル220が配置されている。ここで、使用者は主にソファ近くにいると考えられるため、使用者の声が届きやすいテーブル220上に遠隔操作装置1を配置するのが好ましい。しかし、遠隔操作装置1はコンセントからの給電が必要であるため、壁に配置されたコンセントに近い壁際のチェストなどの上に配置される。この場合、テーブル220上に配置した場合と比較すると操作者からの距離が遠くなり、テレビ2の音声の影響が相対的に大きくなってしまう。 As shown in FIG. 14, for example, a television 2, a sofa 210, and a table 220 are arranged in the room. Here, since it is considered that the user is mainly near the sofa, it is preferable to arrange the remote control device 1 on the table 220 where the voice of the user can easily reach. However, since the remote control device 1 needs to be supplied with power from the outlet, it is arranged on a chest near the wall arranged on the wall or the like. In this case, the distance from the operator is longer than when the table 220 is arranged, and the influence of the sound of the television 2 becomes relatively large.

そこで、本実施形態の遠隔操作装置1では、図15に示されるように、音声入力部70を覆う遮蔽部材90を備える。遮蔽部材90は、遠隔操作装置1の底部に配置される円板状のベース部91と、基板部の縁部から上側に向かって伸びる遮蔽壁92を含んで構成される。遮蔽壁92が、音声入力部70を覆うとともに、遠隔操作装置1の外周の1/3〜1/4程度を覆うよう形成される。この遮蔽壁92と遠隔操作装置1とは密着せず、1〜10mm程度の空隙を有している。遮蔽部材90は、赤外線を透過する樹脂またはガラス等で形成される。遮蔽部材90の遮蔽壁92のみが樹脂またはガラス等で形成され、ベース部91は赤外線を透過しない別部材で形成されてもよい。遠隔操作装置1と遮蔽部材90との相対位置は変更可能であって、遮蔽壁92が適切な位置になるように使用者が互いの配置を調整可能である。 Therefore, the remote control device 1 of the present embodiment includes a shielding member 90 that covers the voice input unit 70, as shown in FIG. The shielding member 90 includes a disk-shaped base portion 91 arranged at the bottom of the remote control device 1 and a shielding wall 92 extending upward from the edge portion of the substrate portion. The shielding wall 92 is formed so as to cover the voice input unit 70 and about 1/3 to 1/4 of the outer circumference of the remote control device 1. The shielding wall 92 and the remote control device 1 are not in close contact with each other and have a gap of about 1 to 10 mm. The shielding member 90 is made of a resin or glass that transmits infrared rays. Only the shielding wall 92 of the shielding member 90 may be formed of resin, glass, or the like, and the base portion 91 may be formed of another member that does not transmit infrared rays. The relative positions of the remote control device 1 and the shielding member 90 can be changed, and the user can adjust the arrangement of the shielding walls 92 so as to be in an appropriate position.

遮蔽部材90は、遠隔操作装置1を壁に保持する壁掛けホルダーとしても利用可能である。この場合、ベース部91が壁にネジなどで固定され、遮蔽壁92が遠隔操作装置1の重力方向を保持する。 The shielding member 90 can also be used as a wall-mounted holder for holding the remote control device 1 on the wall. In this case, the base portion 91 is fixed to the wall with screws or the like, and the shielding wall 92 holds the direction of gravity of the remote control device 1.

また、ベース部91から壁掛け用の取り付け部が突出した構成とすることもできる。この場合、取り付け部と遮蔽壁92とが干渉しないように、ベース部91に対して遮蔽壁92を着脱自在に構成してもよい。また、ベース部91を2つに分割し、一方のベースに取り付け部を配置し、他方のベースに遮蔽壁92を配置した構成としてもよい。 Further, the wall-mounting mounting portion may be projected from the base portion 91. In this case, the shielding wall 92 may be detachably configured with respect to the base portion 91 so that the mounting portion and the shielding wall 92 do not interfere with each other. Further, the base portion 91 may be divided into two, the mounting portion may be arranged on one base, and the shielding wall 92 may be arranged on the other base.

<(2)変形例2>
次に、本実施形態の変形例2について説明する。本変形例では、実施形態のように、ウェイクアップワードが確認された場合に制御ワード認識モードに移行するのではなく、ウェイクアップワードの確認以外の条件に基づき、制御ワード認識モードに移行する。
<(2) Modification example 2>
Next, a modification 2 of the present embodiment will be described. In this modification, the control word recognition mode is shifted to the control word recognition mode based on conditions other than the confirmation of the wakeup word, instead of shifting to the control word recognition mode when the wakeup word is confirmed as in the embodiment.

本変形例の遠隔操作装置1は、使用者による操作を検出する操作検出部(図示省略)を有する。制御部10は、操作検出部が使用者による操作を検出した場合に、制御ワード認識モードに移行する。より具体的には、このとき、制御部10は、実施形態で図4を参照して説明した遠隔操作処理におけるウェイクアップワードが確認された後の処理(S100でYとなった後の処理)を行う。 The remote control device 1 of this modification has an operation detection unit (not shown) that detects an operation by the user. When the operation detection unit detects an operation by the user, the control unit 10 shifts to the control word recognition mode. More specifically, at this time, the control unit 10 performs a process after the wakeup word is confirmed in the remote control process described with reference to FIG. 4 in the embodiment (process after the wakeup word becomes Y in S100). I do.

また、遠隔操作装置1が、人感センサ(図示省略)を有し、人感センサの前方に使用者が手をかざすなどした場合に、上記同様に制御ワード認識モードに移行するよう動作する構成を採用してもよい。 Further, the remote control device 1 has a motion sensor (not shown) and operates so as to shift to the control word recognition mode in the same manner as described above when the user holds his / her hand in front of the motion sensor. May be adopted.

さらに、人感センサに代えて、遠隔操作装置1が振動センサ、加速度センサ、または角速度センサなどを備え、使用者が遠隔操作装置1を持ち上げたり振ったりした場合に、制御ワード認識モードに移行するよう動作する構成としてもよい。 Further, instead of the motion sensor, the remote control device 1 is provided with a vibration sensor, an acceleration sensor, an angular velocity sensor, or the like, and when the user lifts or shakes the remote control device 1, the mode shifts to the control word recognition mode. It may be configured to operate in such a manner.

<4.本発明の特徴>
以上、実施形態、実施例、及び変形例を例示して説明した本発明は、以下のような特徴を有する。
<4. Features of the present invention>
The present invention described above by exemplifying the embodiments, examples, and modifications has the following features.

上記の遠隔操作装置1では、制御部10が、機器制御指令送出部30を介して、ウェイクアップワードが入力されたときに所定時間の間(例えば5秒間)、制御ワード認識モードに移行するとともに、被制御機器であるテレビ2の音量を下げるハーフミュート指令を送出する(S102)。さらに制御部10は、機器制御指令送出部30を介して、制御ワードを認識した所定時間後(例えば5秒後)に、テレビ2の音量を元に戻すハーフミュート解除信号を送出する(S152)。このような処理を行う遠隔操作装置1により、テレビ2などの被制御機器自身が発する音声が制御ワードとともに音声入力部に入力されることで制御ワードの音声認識率が低下することを抑制することができる。 In the remote control device 1, the control unit 10 shifts to the control word recognition mode for a predetermined time (for example, 5 seconds) when the wakeup word is input via the device control command sending unit 30. , Sends a half mute command to lower the volume of the controlled device TV 2 (S102). Further, the control unit 10 transmits a half mute release signal that restores the volume of the television 2 to the original volume after a predetermined time (for example, 5 seconds) after recognizing the control word via the device control command transmission unit 30 (S152). .. The remote control device 1 that performs such processing suppresses the decrease in the voice recognition rate of the control word due to the voice emitted by the controlled device itself such as the television 2 being input to the voice input unit together with the control word. Can be done.

なお、制御ワード認識モードへの移行条件は、ウェイクアップワードが入力された場合に限定されるものではなく、変形例で説明したような別の条件に基づいてもよい。 The condition for shifting to the control word recognition mode is not limited to the case where the wakeup word is input, and may be based on another condition as described in the modified example.

また、上記実施形態等では、被制御機器がテレビ2である例を挙げて説明したが、被制御機器はそれ以外の音響機器または映像機器であってもよい。 Further, in the above-described embodiment and the like, the controlled device is the television 2, but the controlled device may be other audio equipment or video equipment.

また、上記の遠隔操作装置1において、制御部10は、機器制御指令送出部30を介して、音量を変更するための制御ワードが入力された場合に、テレビ2の音量を元に戻すハーフミュート解除信号を送出するとともに(S202)、音量を変更する指令を送出する(S203)。このような処理を行う遠隔操作装置1により、音量を変更する指令に応じて変更された音量を、使用者が速やかに確認することができる。 Further, in the remote control device 1 described above, the control unit 10 returns the volume of the television 2 to the original half mute when a control word for changing the volume is input via the device control command sending unit 30. Along with sending a release signal (S202), a command to change the volume is sent (S203). With the remote control device 1 that performs such processing, the user can quickly confirm the volume changed in response to the command to change the volume.

また、上記の遠隔操作装置1において、制御部10は、制御ワード認識モードに移行してから所定時間の間(例えば5秒間)、制御ワードが入力されなかったときに、被制御機器であるテレビ2の音量を元に戻すハーフミュート解除信号を送出する(S111、S152)。このような処理を行う遠隔操作装置1により、被制御機器の音量を下げることで生じる不都合を、所定時間後(例えば5秒後)に自動的に解消することができる。 Further, in the above-mentioned remote control device 1, the control unit 10 is a controlled device when a control word is not input for a predetermined time (for example, 5 seconds) after shifting to the control word recognition mode. A half mute release signal that restores the volume of 2 is transmitted (S111, S152). The remote control device 1 that performs such processing can automatically eliminate the inconvenience caused by lowering the volume of the controlled device after a predetermined time (for example, 5 seconds).

また、上記の遠隔操作装置1において、制御部10は、機器制御指令送出部30を介して、制御ワードを認識した所定時間後(例えば5秒後)に、テレビ2の音量を元に戻すハーフミュート解除信号を送出し(S152)、一度制御ワードを認識してから所定時間の間(例えば5秒間)、制御ワード認識モードを維持する(A、S111)。このような処理を行う遠隔操作装置1により、複数の制御ワードを連続的に認識させ指定の操作を行いたいときにも、被制御機器自身の音声により音声認識率が低下してしまうことを抑制することができる。 Further, in the remote control device 1, the control unit 10 restores the volume of the television 2 to the original volume after a predetermined time (for example, 5 seconds) after recognizing the control word via the device control command transmission unit 30. The mute release signal is transmitted (S152), and the control word recognition mode is maintained for a predetermined time (for example, 5 seconds) after the control word is recognized once (A, S111). The remote control device 1 that performs such processing suppresses the voice recognition rate from being lowered by the voice of the controlled device itself even when it is desired to continuously recognize a plurality of control words and perform a specified operation. can do.

また、上記の遠隔操作装置1において、制御ワードが認識されてから制御ワード認識モードが継続する期間(例えば5秒間)と、制御ワードが認識された後にハーフミュート解除信号が送出されるまでの時間(例えば5秒後)とが同じ時間となっている。このような処理を行う遠隔操作装置1により、制御ワード認識モードが終了するのと略同じタイミングで被制御機器の音量を元に戻すことが可能となる。 Further, in the remote control device 1, the period from the recognition of the control word to the continuation of the control word recognition mode (for example, 5 seconds) and the time from the recognition of the control word to the transmission of the half mute release signal. (For example, after 5 seconds) is the same time. The remote control device 1 that performs such processing makes it possible to restore the volume of the controlled device to the original level at substantially the same timing as the control word recognition mode ends.

また、上記の遠隔操作装置1では、制御ワード認識モードで動作中には、制御部10が第1通知手段50の赤色LEDを点滅させる構成としている。このような処理を行う遠隔操作装置1により、制御ワード認識モードで動作中であることを使用者に認識させることができる。 Further, in the remote control device 1, the control unit 10 blinks the red LED of the first notification means 50 while operating in the control word recognition mode. The remote control device 1 that performs such processing can make the user recognize that the operation is in the control word recognition mode.

また、上記の遠隔操作装置1において、制御部10は、制御ワードを認識したときに、制御ワードを認識したことを示す第2通知手段60の緑色LEDを点滅させる。このような処理を行う遠隔操作装置1により、遠隔操作装置1によって制御ワードが認識されたことを使用者が確認することができる。 Further, in the remote control device 1, when the control word is recognized, the control unit 10 blinks the green LED of the second notification means 60 indicating that the control word is recognized. The remote control device 1 that performs such processing allows the user to confirm that the control word has been recognized by the remote control device 1.

また、上記の遠隔操作装置1において、制御部10は、ウェイクアップワードを認識したときに、テレビ2以外の被制御機器であるエアコン等に対して、音量を下げるための静音制御信号を送出する(S102)。このような処理を行う遠隔操作装置1により、音を発するエアコン等の被制御機器が周囲に複数稼働している場合に、これらの稼働している被制御機器の音量を下げることで、制御ワードの音声認識率が低下することを抑制することができる。 Further, in the remote control device 1 described above, when the control unit 10 recognizes the wakeup word, it sends a silent control signal for lowering the volume to the air conditioner or the like which is a controlled device other than the television 2. (S102). When a plurality of controlled devices such as air conditioners that emit sound are operating in the surroundings by the remote control device 1 that performs such processing, the control word is obtained by lowering the volume of these operating controlled devices. It is possible to suppress a decrease in the voice recognition rate of.

なお、上記同様に、制御ワード認識モードへの移行条件は、ウェイクアップワードが入力された場合に限定されるものではなく、変形例で説明したような別の条件に基づいてもよい。 Similarly to the above, the transition condition to the control word recognition mode is not limited to the case where the wakeup word is input, and may be based on another condition as described in the modified example.

また、上記の遠隔操作装置1では、ウェイクアップワードを登録する設定モードを実行可能な構成としている。これにより、使用者が、自身の習慣や発音のしやすさを考慮した任意のウェイクアップワードを遠隔操作装置1に登録することが可能となり、ウェイクアップワードの音声認識率を向上させることができる。 Further, the remote control device 1 is configured to be able to execute the setting mode for registering the wakeup word. As a result, the user can register an arbitrary wake-up word in the remote control device 1 in consideration of his / her own habits and ease of pronunciation, and the voice recognition rate of the wake-up word can be improved. ..

また、上記の遠隔操作装置1では、制御ワードを登録する設定モードを実行可能な構成としている。これにより、使用者が、自身の習慣や発音のしやすさを考慮した任意の制御ワードを遠隔操作装置1に登録することが可能となり、制御ワードの音声認識率を向上させることができる。 Further, the remote control device 1 has a configuration in which a setting mode for registering a control word can be executed. As a result, the user can register an arbitrary control word in the remote control device 1 in consideration of his / her own habit and ease of pronunciation, and the voice recognition rate of the control word can be improved.

また、上記の遠隔操作装置1では、設定モード(音声登録モード)で動作中に、音声の登録をガイドする音声を音声出力部80から出力する。これにより、使用者が容易に音声登録をすることができる。 Further, in the above-mentioned remote control device 1, the voice that guides the registration of the voice is output from the voice output unit 80 during the operation in the setting mode (voice registration mode). As a result, the user can easily perform voice registration.

なお、設定モードで動作中である場合のみならず、遠隔操作処理の前提で音声によるガイドを行う構成としてもよい。 It should be noted that the configuration may be such that voice guidance is performed on the premise of remote control processing as well as when operating in the setting mode.

また、上記の遠隔操作装置1では、使用者により登録された制御ワードに基づいて、制御部10が機器制御指令送出部30を介して被制御機器を操作するための指令を送信可能な構成としている(S400〜S451、S300〜S302)。これにより、遠隔操作装置1に予め設定された機器だけでなく、使用者が操作したい任意の機器を被制御機器として操作することができる。 Further, in the remote control device 1 described above, the control unit 10 can transmit a command for operating the controlled device via the device control command sending unit 30 based on the control word registered by the user. (S400 to S451, S300 to S302). As a result, not only the device preset in the remote control device 1 but also any device that the user wants to operate can be operated as the controlled device.

また、上記の遠隔操作装置1では、使用者の音声に関する情報に関連づけて、指令の内容を制御部10が記憶部20に記憶させることができる。これにより、使用者の習慣等に合わせた使用者自身の音声に基づく処理を可能とし、音声認識率を向上させることができる。 Further, in the remote control device 1, the control unit 10 can store the content of the command in the storage unit 20 in association with the information related to the user's voice. As a result, it is possible to perform processing based on the user's own voice according to the user's habits and the like, and it is possible to improve the voice recognition rate.

また、上記のテレビ2では、制御部100は、遠隔操作装置1から電源投入指令を受信したとき、音声出力部180から出力される音量を、設定された音量よりも下げた状態で動作を開始するよう制御可能である。これにより、使用者がテレビ2の操作を行いたい電源投入直後のタイミングにおいて、テレビ2が発する音声が音声認識の対象の音声に悪影響を与え、音声認識率が低下してしまうことを抑制することができる。 Further, in the above-mentioned television 2, when the control unit 100 receives the power-on command from the remote control device 1, the control unit 100 starts the operation in a state where the volume output from the audio output unit 180 is lower than the set volume. It can be controlled to do so. As a result, it is possible to prevent the voice emitted by the TV 2 from adversely affecting the voice to be recognized and the voice recognition rate from being lowered at the timing immediately after the power is turned on when the user wants to operate the TV 2. Can be done.

なお、上記の処理はテレビ2のみに適用されるものではなく、テレビ2以外の映像音響機器について同様に適用可能である。 The above process is not applied only to the television 2, but can be similarly applied to audio-visual equipment other than the television 2.

また、上記のテレビ2では、遠隔操作装置1から繰り返しハーフミュート指令を受信したとき、制御部100は、音声出力部180から出力される音量を、所定比率(例えば1/n)で繰り返し下げる処理を行うことができる。これにより、出力する音声の音量を所定比率で段階的に下げることができるため、音声で操作される遠隔操作装置の音声認識率の低下を効果的に抑制することができる。 Further, in the above-mentioned television 2, when the remote control device 1 repeatedly receives the half mute command, the control unit 100 repeatedly lowers the volume output from the audio output unit 180 by a predetermined ratio (for example, 1 / n). It can be performed. As a result, the volume of the output voice can be gradually lowered at a predetermined ratio, so that it is possible to effectively suppress a decrease in the voice recognition rate of the remote control device operated by voice.

<4.補足事項>
以上、本発明の複数の実施形態についての具体的な説明を行った。これらの実施形態は、あくまで本発明の一構成例及び一作動例としての具体例であって、本発明の範囲はこれらの実施形態に留まらず、同様の技術思想に基づいて当業者が把握可能な範囲にまで広く解釈されるものである。
<4. Supplementary information>
The specific embodiments of the present invention have been described above. These embodiments are merely specific examples as one configuration example and one operation example of the present invention, and the scope of the present invention is not limited to these embodiments and can be grasped by those skilled in the art based on the same technical idea. It is widely interpreted to the extent that it is.

例えば、遠隔操作装置1の第1通知手段50及び第2通知手段60は、いずれもLED発光素子に代えて、またはLED発光素子に加えて、音声出力機能を有してもよい。この場合、使用者に対する通知を、発光だけでなく音声によっても行うことができる。 For example, the first notification means 50 and the second notification means 60 of the remote control device 1 may both have a voice output function in place of the LED light emitting element or in addition to the LED light emitting element. In this case, the notification to the user can be given not only by light emission but also by voice.

また、遠隔操作装置1は、音声出力部80に加え、または音声出力部80に代え、画像を表示する表示部を有する構成としてもよい。この場合、遠隔操作装置1では、音声出力部80から出力される音声に対応した文字情報を、表示部に表示する構成としてもよい。 Further, the remote control device 1 may be configured to have a display unit for displaying an image in addition to the audio output unit 80 or instead of the audio output unit 80. In this case, the remote control device 1 may be configured to display the character information corresponding to the voice output from the voice output unit 80 on the display unit.

1…遠隔操作装置
10…制御部
20…記憶部
30…機器制御指令送出部
40…機器制御指令受信部
50…第1通知手段
60…第2通知手段
70…音声入力部
80…音声出力部
81…出力音声作成部
90…遮蔽部材
91…ベース部
92…遮蔽壁
2…テレビ
100…制御部
120…記憶部
140…指令受信部
180…音声出力部
210…ソファ
220…テーブル
1 ... Remote control device 10 ... Control unit 20 ... Storage unit 30 ... Device control command sending unit 40 ... Device control command receiving unit 50 ... First notification means 60 ... Second notification means 70 ... Voice input unit 80 ... Voice output unit 81 ... Output audio creation unit 90 ... Shielding member 91 ... Base unit 92 ... Shielding wall 2 ... TV 100 ... Control unit 120 ... Storage unit 140 ... Command receiving unit 180 ... Audio output unit 210 ... Sofa 220 ... Table

Claims (15)

音声を取得する音声入力部と、
被制御機器に無線で指令を送出する機器制御指令送出部と、
前記音声入力部及び前記機器制御指令送出部を制御する制御部と、を備え、
前記制御部は、
所定条件を満たしたときに前記被制御機器を操作するための制御ワードを認識する制御ワード認識モードに移行するとともに、前記被制御機器の音量を下げる指令を前記機器制御指令送出部から送出し、
前記制御ワードを認識した後に、前記被制御機器の音量を元に戻す指令を前記機器制御指令送出部から送出する、
遠隔操作装置。
A voice input unit that acquires voice, and
A device control command sending unit that wirelessly sends commands to the controlled device,
A control unit that controls the voice input unit and the device control command transmission unit is provided.
The control unit
The control word recognition mode for recognizing the control word for operating the controlled device when a predetermined condition is satisfied is entered, and a command for lowering the volume of the controlled device is sent from the device control command sending unit.
After recognizing the control word, a command to restore the volume of the controlled device is sent from the device control command sending unit.
Remote control device.
前記被制御機器は、音響機器または映像機器であり、
前記制御部は、前記制御ワードが前記被制御機器の音量を変更する指令に対応するものであったとき、前記被制御機器の音量を元に戻すとともに、前記被制御機器の音量を変更する前記制御ワードに対応した指令を前記機器制御指令送出部から送出する、
請求項1に記載の遠隔操作装置。
The controlled device is an audio device or a video device.
When the control word corresponds to a command for changing the volume of the controlled device, the control unit restores the volume of the controlled device and changes the volume of the controlled device. A command corresponding to the control word is sent from the device control command sending unit.
The remote control device according to claim 1.
前記制御部は、前記制御ワード認識モードに移行してから第1所定時間の間、前記制御ワードが認識されなかったとき、前記被制御機器の音量を元に戻す指令を送出する、
請求項1または請求項2に記載の遠隔操作装置。
When the control word is not recognized for the first predetermined time after shifting to the control word recognition mode, the control unit sends a command to restore the volume of the controlled device.
The remote control device according to claim 1 or 2.
前記制御部は、
前記制御ワードを認識してから第2所定時間後に、前記被制御機器の音量を元に戻す指令を前記機器制御指令送出部から送出し、
前記制御ワードを認識してから第3所定時間の間、前記制御ワード認識モードを維持する、
請求項1から請求項3のいずれか1項に記載の遠隔操作装置。
The control unit
A second predetermined time after recognizing the control word, a command for returning the volume of the controlled device to the original level is sent from the device control command sending unit.
The control word recognition mode is maintained for a third predetermined time after recognizing the control word.
The remote control device according to any one of claims 1 to 3.
前記第2所定時間と前記第3所定時間とが略同じ長さである、
請求項4に記載の遠隔操作装置。
The second predetermined time and the third predetermined time have substantially the same length.
The remote control device according to claim 4.
前記制御ワード認識モードで動作中であることを示す第1通知手段をさらに備える、
請求項1から請求項5のいずれか1項に記載の遠隔操作装置。
It further comprises a first notification means indicating that it is operating in the control word recognition mode.
The remote control device according to any one of claims 1 to 5.
前記制御ワードを認識した時、前記制御ワードを認識したことを示す第2通知手段をさらに備える、
請求項1から請求項6のいずれか1項に記載の遠隔操作装置。
When the control word is recognized, a second notification means indicating that the control word is recognized is further provided.
The remote control device according to any one of claims 1 to 6.
前記制御部は、
前記制御ワード認識モードに移行するときに、複数の前記被制御機器に対して音量を下げる指令を送出する、
請求項1から請求項7のいずれか1項に記載の遠隔操作装置。
The control unit
When shifting to the control word recognition mode, a command to lower the volume is sent to the plurality of controlled devices.
The remote control device according to any one of claims 1 to 7.
音声を取得する音声入力部と、
被制御機器に無線で指令を送出する機器制御指令送出部と、
前記音声入力部及び前記機器制御指令送出部を制御する制御部と、を備え、
前記制御部は、音声登録モードで動作中に取得した前記音声に関する情報を、制御ワード認識モードに移行するためのウェイクアップワードとして登録し、
前記制御部は、前記音声入力部が取得した音声が登録された前記ウェイクアップワードであるときに制御ワード認識モードに移行する、
遠隔操作装置。
A voice input unit that acquires voice, and
A device control command sending unit that wirelessly sends commands to the controlled device,
A control unit that controls the voice input unit and the device control command transmission unit is provided.
The control unit registers the information related to the voice acquired during operation in the voice registration mode as a wake-up word for shifting to the control word recognition mode.
The control unit shifts to the control word recognition mode when the voice acquired by the voice input unit is the registered wakeup word.
Remote control device.
音声を取得する音声入力部と、
被制御機器に無線で指令を送出する機器制御指令送出部と、
前記音声入力部及び前記機器制御指令送出部を制御する制御部と、を備え、
前記制御部は、音声登録モードで動作中に取得した前記音声に関する情報を、前記被制御機器を操作するための制御ワードとして登録し、
前記制御部は、
前記制御ワードを認識する制御ワード認識モードで動作中に前記音声入力部が取得した音声が登録された前記制御ワードであるとき、前記制御ワードに対応する指令を前記機器制御指令送出部から送出する、
遠隔操作装置。
A voice input unit that acquires voice, and
A device control command sending unit that wirelessly sends commands to the controlled device,
A control unit that controls the voice input unit and the device control command transmission unit is provided.
The control unit registers the information related to the voice acquired during operation in the voice registration mode as a control word for operating the controlled device.
The control unit
Recognizing the control word When the voice acquired by the voice input unit is the registered control word during operation in the control word recognition mode, a command corresponding to the control word is transmitted from the device control command sending unit. ,
Remote control device.
音声を出力する音声出力部をさらに備え、
前記制御部は、前記音声登録モードで動作中に、使用者の音声登録をガイドするガイド音声を前記音声出力部から出力する、
請求項9または請求項10に記載の遠隔操作装置。
It also has an audio output unit that outputs audio.
The control unit outputs a guide voice for guiding the user's voice registration from the voice output unit while operating in the voice registration mode.
The remote control device according to claim 9 or 10.
音声を取得する音声入力部と、
被制御機器に無線で指令を送出する機器制御指令送出部と、
前記被制御機器を操作する無線操作機器から送出される指令を受信する機器制御指令受信部と、
記憶部と、
前記音声入力部が取得した音声に関する情報と、前記機器制御指令受信部が受信した指令とを関連づけて前記記憶部に記憶させる制御部と、を備え、
前記制御部は、前記音声入力部が取得した音声に基づき、前記記憶部に登録された前記音声に関する情報に関連づけられた前記指令を前記機器制御指令送出部から送出する、
遠隔操作装置。
A voice input unit that acquires voice, and
A device control command sending unit that wirelessly sends commands to the controlled device,
A device control command receiving unit that receives commands sent from a wireless operating device that operates the controlled device, and
Memory and
A control unit that associates information about voice acquired by the voice input unit with a command received by the device control command receiving unit and stores the information in the storage unit is provided.
Based on the voice acquired by the voice input unit, the control unit transmits the command associated with the information related to the voice registered in the storage unit from the device control command transmission unit.
Remote control device.
前記記憶部は、前記機器制御指令受信部が受信した指令を、前記音声入力部が取得した使用者の音声に関する情報に関連づけて前記記憶部に記憶させる、
請求項12に記載の遠隔操作装置。
The storage unit stores a command received by the device control command receiving unit in the storage unit in association with information related to the user's voice acquired by the voice input unit.
The remote control device according to claim 12.
遠隔操作装置により無線で操作される映像音響機器であって、
前記遠隔操作装置から指令を受信する指令受信部と、
音声出力部と、
前記遠隔制御装置から電源投入指令を受信したとき、前記音声出力部から出力される音量を下げた状態で動作を開始するよう制御する制御部と、を備える、
映像音響機器。
Audio-visual equipment that is wirelessly operated by a remote control device.
A command receiving unit that receives commands from the remote control device, and
Audio output section and
A control unit that controls to start operation with the volume output from the voice output unit lowered when a power-on command is received from the remote control device is provided.
Audio-visual equipment.
遠隔操作装置により無線で操作される映像音響機器であって、
前記遠隔操作装置から指令を受信する指令受信部と、
音声出力部と、
制御部と、を備え、
前記制御部は、
前記遠隔制御装置から制御ワード認識モード移行中のハーフミュート指令を受信したとき、前記音声出力部から出力される音量を所定比率で下げ、
前記遠隔制御装置から前記ハーフミュート指令をさらに受信したとき、前記音声出力部から出力される音量を、さらに所定比率で下げる、
映像音響機器。
Audio-visual equipment that is wirelessly operated by a remote control device.
A command receiving unit that receives commands from the remote control device, and
Audio output section and
With a control unit
The control unit
When a half mute command during the transition to the control word recognition mode is received from the remote control device, the volume output from the voice output unit is lowered by a predetermined ratio.
When the half mute command is further received from the remote control device, the volume output from the audio output unit is further lowered by a predetermined ratio.
Audio-visual equipment.
JP2019121827A 2019-06-28 2019-06-28 Remote control device and audiovisual equipment Active JP7223423B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2019121827A JP7223423B2 (en) 2019-06-28 2019-06-28 Remote control device and audiovisual equipment

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019121827A JP7223423B2 (en) 2019-06-28 2019-06-28 Remote control device and audiovisual equipment

Publications (2)

Publication Number Publication Date
JP2021009190A true JP2021009190A (en) 2021-01-28
JP7223423B2 JP7223423B2 (en) 2023-02-16

Family

ID=74199923

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019121827A Active JP7223423B2 (en) 2019-06-28 2019-06-28 Remote control device and audiovisual equipment

Country Status (1)

Country Link
JP (1) JP7223423B2 (en)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001042891A (en) * 1999-07-27 2001-02-16 Suzuki Motor Corp Speech recognition apparatus, speech recognition mounting device, speech recognition mounting system, speech recognition method, and memory medium
JP2005284492A (en) * 2004-03-29 2005-10-13 Mitsubishi Electric Corp Operating device using voice
JP2012173325A (en) * 2011-02-17 2012-09-10 Toshiba Corp Voice recognition operation device and voice recognition operation method
JP2019032387A (en) * 2017-08-07 2019-02-28 株式会社Nttドコモ Controller, program and control method

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001042891A (en) * 1999-07-27 2001-02-16 Suzuki Motor Corp Speech recognition apparatus, speech recognition mounting device, speech recognition mounting system, speech recognition method, and memory medium
JP2005284492A (en) * 2004-03-29 2005-10-13 Mitsubishi Electric Corp Operating device using voice
JP2012173325A (en) * 2011-02-17 2012-09-10 Toshiba Corp Voice recognition operation device and voice recognition operation method
JP2019032387A (en) * 2017-08-07 2019-02-28 株式会社Nttドコモ Controller, program and control method

Also Published As

Publication number Publication date
JP7223423B2 (en) 2023-02-16

Similar Documents

Publication Publication Date Title
US6397186B1 (en) Hands-free, voice-operated remote control transmitter
WO2016052018A1 (en) Home appliance management system, home appliance, remote control device, and robot
JP2018036397A (en) Response system and apparatus
JP2005284492A (en) Operating device using voice
JP6371060B2 (en) Air conditioner
JP2007121579A (en) Operation device
JP2006074207A (en) Mobile type information apparatus, method of moving this, and information system, method of estimating position
JP7223423B2 (en) Remote control device and audiovisual equipment
JP6986923B2 (en) Electronic device control device
CN112005554A (en) Information processing apparatus, information processing method, and computer program
JP3683502B2 (en) Remote control device
JP2014043961A (en) Air conditioner
JP2006304078A (en) Separate setting remote control system and electronic apparatus equipped therewith
JP6753722B2 (en) Sound guidance device
TWI647563B (en) Power reminding system of remote control
US20210385564A1 (en) Voice input apparatus
US20200243078A1 (en) Audio control system of electromagnetic cradle
JP2008268450A (en) Operating device with speech recognition function
JP7224116B2 (en) air conditioner
JP2007235935A (en) Instrument controller
JP2007020079A (en) Television set
JP2001221480A (en) Air conditioner and its controlling method
JP2008252283A (en) Remote controller
JPS62278867A (en) Remote controller
GB2284084A (en) Control apparatus, especially but not exclusively for a disabled person

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20211026

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20211026

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20220712

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220726

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220920

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230117

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230130

R150 Certificate of patent or registration of utility model

Ref document number: 7223423

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150