JP2018097259A - Voice operation system - Google Patents

Voice operation system Download PDF

Info

Publication number
JP2018097259A
JP2018097259A JP2016243406A JP2016243406A JP2018097259A JP 2018097259 A JP2018097259 A JP 2018097259A JP 2016243406 A JP2016243406 A JP 2016243406A JP 2016243406 A JP2016243406 A JP 2016243406A JP 2018097259 A JP2018097259 A JP 2018097259A
Authority
JP
Japan
Prior art keywords
voice
stage
instruction
operator
operated
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2016243406A
Other languages
Japanese (ja)
Other versions
JP6422930B2 (en
Inventor
鉄也 古賀
Tetsuya Koga
鉄也 古賀
守彦 氏家
Morihiko Ujiie
守彦 氏家
重夫 山田
Shigeo Yamada
重夫 山田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sansei Tech Inc
Sansei Technologies Inc
Original Assignee
Sansei Tech Inc
Sansei Technologies Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sansei Tech Inc, Sansei Technologies Inc filed Critical Sansei Tech Inc
Priority to JP2016243406A priority Critical patent/JP6422930B2/en
Publication of JP2018097259A publication Critical patent/JP2018097259A/en
Application granted granted Critical
Publication of JP6422930B2 publication Critical patent/JP6422930B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Selective Calling Equipment (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide a voice operation system capable of performing the operation of plural instruments contained in a stage mechanism, a studio mechanism, or a game mechanism accurately and safely.SOLUTION: A voice operation device 10 accepts an operation instruction from an operator by voice. A voice recognition unit 40 transforms the operation instruction by voice from the voice operation device 10 to command data. A stage mechanism control device 50 receives the command data transformed by the voice recognition unit 40 and status information which shows the status of plural instruments, and generates text information which represents the command data and the status information. A display unit 20 displays the text information generated by the stage mechanism control device 50. A mechanical operation device 30 accepts a manual operation instruction from the operator. The stage mechanism control device 50 controls each of the plural instruments, according to the manual operation instructions input to the mechanical operation device 30 and the command data.SELECTED DRAWING: Figure 1

Description

この発明は、舞台機構、スタジオ機構または遊戯機構に含まれる複数の機器を音声で操作するための音声操作システムに関する。   The present invention relates to a voice operation system for operating a plurality of devices included in a stage mechanism, a studio mechanism, or a game mechanism by voice.

舞台機構に含まれる複数の舞台装置を操作するための操作装置が、たとえば、特開2016−118814号公報(特許文献1)に開示されている。特許文献1に記載された操作装置は、タッチスクリーンおよび操作卓が連結されて構成されており、通常、舞台装置の存在する舞台付近の現場から離れた操作室などに設けられる。   An operating device for operating a plurality of stage devices included in the stage mechanism is disclosed in, for example, Japanese Patent Laid-Open No. 2006-118814 (Patent Document 1). The operation device described in Patent Document 1 is configured by connecting a touch screen and an operation console, and is usually provided in an operation room or the like away from the site near the stage where the stage device exists.

上記操作装置を操作する操作者は、現場で舞台機構を指揮する指揮者と音声通信を行なうことにより、指揮者から各舞台装置を操作するための指示を受け取る。操作者は、指示に基づいて操作装置に対する入力操作を行なうことにより、指揮者により指定された舞台装置を動作させる。   The operator who operates the operation device receives instructions for operating each stage device from the conductor by performing voice communication with the conductor who conducts the stage mechanism on the site. The operator operates the stage device designated by the conductor by performing an input operation on the operating device based on the instruction.

特開2016−118814号公報Japanese Patent Laid-Open No. 2006-118814

しかしながら、上述した操作手順では、周囲の環境などに起因して、操作指示を出す指揮者と操作装置を操作する操作者との間で操作指示の聞き間違いが起こる場合がある。この場合、操作対象となる舞台装置は操作指示とは異なる動作を行なってしまう。   However, in the operation procedure described above, there is a case where an operation instruction is mistakenly heard between the conductor who issues the operation instruction and the operator who operates the operation device due to the surrounding environment or the like. In this case, the stage device to be operated performs an operation different from the operation instruction.

あるいは、指揮者の操作指示自体に誤りがある場合であっても、操作者がその誤りに気付くことなく、舞台装置を動作させる場合が起こり得る。いずれの場合にも、操作対象となる舞台装置が望ましくない動作を行なうことで、他の舞台装置に支障を及ぼす可能性がある。この結果、舞台機構の安全性が損なわれるおそれがある。   Alternatively, even when the conductor's operation instruction itself has an error, the stage device may be operated without the operator being aware of the error. In any case, there is a possibility that the stage apparatus as the operation target performs an undesired operation, thereby hindering other stage apparatuses. As a result, the safety of the stage mechanism may be impaired.

また、指揮者が操作指示が正確に操作者に伝わっていることを確認するためには、操作者との音声でのやり取りに頼らざるを得ないため、確認作業に手間がかかり、効率良く操作を行なうことができないという問題がある。   In addition, in order for the conductor to confirm that the operation instructions are accurately transmitted to the operator, it is necessary to rely on voice communication with the operator, so that the confirmation work is troublesome and the operation is efficient. There is a problem that cannot be performed.

この発明は、このような問題点を解決するためになされたものであって、その目的は、舞台機構、スタジオ機構または遊戯機構に含まれる複数の機器の操作を正確かつ安全に行なうことができる音声操作システムを提供することである。   The present invention has been made to solve such problems, and an object of the present invention is to accurately and safely operate a plurality of devices included in a stage mechanism, a studio mechanism, or a play mechanism. It is to provide a voice operation system.

本発明のある局面によれば、舞台機構、スタジオ機構または遊戯機構に含まれる複数の機器を音声で操作するための音声操作システムは、第1の操作装置と、音声認識装置と、制御装置と、表示装置と、第2の操作装置とを備える。第1の操作装置は、操作者からの音声による操作指示を受け付けるように構成される。音声認識装置は、第1の操作装置に入力された音声による操作指示を、コマンドデータに変換するように構成される。制御装置は、音声認識装置により変換されたコマンドデータ、および複数の機器の状態を示すステータス情報を受けて、コマンドデータおよびステータス情報を表す文字情報を生成するように構成される。表示装置は、制御装置により生成された文字情報を表示するように構成される。第2の操作装置は、操作者からの手動による操作指示を受け付けるように構成される。上記構成において、制御装置は、さらに、第2の操作装置に入力された手動による操作指示と、コマンドデータとに従って、各複数の機器を制御するように構成される。   According to an aspect of the present invention, a voice operation system for operating a plurality of devices included in a stage mechanism, a studio mechanism, or a game mechanism with voice includes a first operation device, a voice recognition device, a control device, A display device and a second operating device. The first controller device is configured to receive an operation instruction by voice from an operator. The voice recognition device is configured to convert a voice operation instruction input to the first controller device into command data. The control device is configured to receive the command data converted by the speech recognition device and the status information indicating the states of the plurality of devices, and generate the character data indicating the command data and the status information. The display device is configured to display character information generated by the control device. The second operating device is configured to receive a manual operation instruction from the operator. In the above configuration, the control device is further configured to control each of the plurality of devices according to the manual operation instruction input to the second operation device and the command data.

上記音声操作システムによれば、音声認識装置に登録された音声指示は、コマンドデータに変換されて制御装置に伝送されると、制御装置によって文字等の情報に逆変換されて表示装置に表示される。操作者から与えられた音声指示は、文字等の情報となって操作者にフィードバックされることにより、操作者は、文字等の情報に基づいて、自己が発した音声指示が正しく登録されているか否かを確認することができる。また、表示装置にはステータス情報が文字等の情報として表示されるため、操作者は、操作対象となる機器を音声指示に従って安全に動作させることができるか否かを、文字表示によって確認することができる。   According to the voice operation system, when the voice instruction registered in the voice recognition device is converted into command data and transmitted to the control device, it is converted back to information such as characters by the control device and displayed on the display device. The The voice instruction given by the operator is fed back to the operator as information such as characters, so that the operator correctly registers the voice instruction issued by himself based on the information such as characters. You can check whether or not. In addition, since the status information is displayed as information such as characters on the display device, the operator confirms whether or not the device to be operated can be safely operated according to the voice instruction by displaying characters. Can do.

また、操作対象となる機器の動作は、操作者による手動指示をトリガとして実行されるように構成されるため、音声指示が正しく登録されており、かつ、操作対象となる舞台装置の安全動作が保証されている状態で、操作対象となる機器を動作させることができる。これにより、操作対象となる機器の安全かつ正確な動作を実現できる。   Further, since the operation of the device to be operated is configured to be triggered by a manual instruction from the operator, the voice instruction is correctly registered and the safe operation of the stage device to be operated is performed. The device to be operated can be operated in a guaranteed state. Thereby, the safe and accurate operation | movement of the apparatus used as operation object is realizable.

また、上記音声操作システムによれば、操作者は音声で指示を発し、その指示内容を文字等の情報の形で視覚を通じて確認するため、指示と確認とを混乱せずに並行して行なうことができる。これにより、操作者は、操作を効率良く行なうことができる。   In addition, according to the voice operation system, the operator issues a voice instruction and visually confirms the content of the instruction in the form of information such as characters, so the instruction and the confirmation can be performed in parallel without confusion. Can do. Thereby, the operator can perform operation efficiently.

好ましくは、音声による操作指示は、操作対象となる機器を識別するための識別情報、および操作対象となる機器に対する操作内容を示す操作情報を含む。音声認識装置は、識別情報および操作情報を、制御装置が実行可能なコマンドコードで表現されたコマンドデータに変換するように構成される。   Preferably, the operation instruction by voice includes identification information for identifying a device to be operated, and operation information indicating an operation content for the device to be operated. The voice recognition device is configured to convert the identification information and the operation information into command data expressed by a command code executable by the control device.

このように構成すると、制御装置は、コマンドデータを受信することにより、識別情報および操作情報に基づいて、操作対象となる機器を制御することができる。また、制御装置は、コマンドデータを基に識別情報および操作情報を表す文字情報を生成することができる。   If comprised in this way, the control apparatus can control the apparatus used as operation object based on identification information and operation information by receiving command data. Further, the control device can generate character information representing the identification information and the operation information based on the command data.

好ましくは、表示装置に表示される文字情報は、操作対象となる機器を識別するための識別情報、操作対象となる機器に対する操作内容を示す操作情報、および操作対象となる機器のステータス情報を含む。   Preferably, the character information displayed on the display device includes identification information for identifying a device to be operated, operation information indicating an operation content for the device to be operated, and status information of the device to be operated. .

このように構成すると、操作者は、文字情報に基づいて、自己が発した音声指示が正しく登録されているか否か、および、操作対象となる機器を音声指示に従って安全に動作させることができるか否かを確認することができる。   With this configuration, the operator can check whether or not the voice instruction issued by the operator is correctly registered based on the character information, and can operate the device to be operated safely according to the voice instruction. You can check whether or not.

好ましくは、第2の操作装置は、機械式の操作部を含む。第2の操作装置は、操作部に対する手動による操作指示を受け付けるように構成される。   Preferably, the second operating device includes a mechanical operating unit. The second operating device is configured to accept a manual operation instruction to the operation unit.

これによると、操作者による手動操作を、操作対象となる機器の動作のトリガとすることができる。よって、音声指示が正しく登録されており、かつ、操作対象となる舞台装置の安全動作が保証されている状態で、操作対象となる機器を動作させることができる。   According to this, the manual operation by the operator can be used as a trigger for the operation of the device to be operated. Accordingly, the device to be operated can be operated in a state where the voice instruction is correctly registered and the safe operation of the stage device to be operated is guaranteed.

好ましくは、制御装置は、コマンドデータが停止指示である場合には、手動による操作指示を待たずに、コマンドデータに従って複数の機器を停止させる。このように構成すると、例えば複数の機器のいずれかが故障したなどの異常が発生した状況には、複数の機器全体を迅速に停止させることができる。   Preferably, when the command data is a stop instruction, the control device stops a plurality of devices according to the command data without waiting for a manual operation instruction. If comprised in this way, the whole some apparatus can be stopped quickly in the condition where abnormality generate | occur | produced, for example, one of the some apparatus failed.

好ましくは、第1の操作装置、表示装置および第2の操作装置の少なくとも1つは、操作者が携帯または装着可能に構成される。このように構成すると、操作者の利便性を向上させることができる。   Preferably, at least one of the first operating device, the display device, and the second operating device is configured to be portable or wearable by the operator. If comprised in this way, an operator's convenience can be improved.

好ましくは、第1の操作装置は、複数の操作者にそれぞれ対応して複数設けられる。音声操作システムは音声伝送装置をさらに備える。音声伝送装置は、複数の第1の操作装置の各々に入力された音声による操作指示を受け付けて音声認識装置に伝送するように構成される。   Preferably, a plurality of first operating devices are provided corresponding to a plurality of operators. The voice operation system further includes a voice transmission device. The voice transmission device is configured to accept a voice operation instruction input to each of the plurality of first operation devices and transmit the instruction to the voice recognition device.

このように構成すると、複数の操作者間の音声通信に使用されている既存の音声伝送装置を利用できるため、複数の音声式操作装置で1台の音声認識装置を共用することが可能となる。したがって、音声操作システムを低コストで構築することができる。   If comprised in this way, since the existing audio | voice transmission apparatus currently used for the audio | voice communication between several operators can be utilized, it becomes possible to share one audio | voice recognition apparatus with several audio | voice type operation apparatuses. . Therefore, the voice operation system can be constructed at a low cost.

好ましくは、第2の操作装置は、複数の操作者にそれぞれ対応して複数設けられる。複数の第2の操作装置の各々は、第1の操作装置に対する音声による操作指示の入力操作を有効に設定するように構成される。   Preferably, a plurality of second operating devices are provided corresponding to a plurality of operators, respectively. Each of the plurality of second operating devices is configured to effectively set an input operation instruction by voice for the first operating device.

このように構成すると、複数の操作者間の音声通信に使用されている既存の音声伝送装置を利用する構成において、音声通信と音声指示とを容易に切り分けることができる。これにより、音声認識装置において高い認識精度を保つことができる。   If comprised in this way, in the structure using the existing audio | voice transmission apparatus currently used for the audio | voice communication between several operators, an audio | voice communication and an audio | voice instruction | indication can be separated easily. Thereby, high recognition accuracy can be maintained in the speech recognition apparatus.

本発明によれば、舞台機構または遊戯機構に含まれる複数の機器の操作を正確かつ安全に行なうことができる音声操作システムを提供することができる。   ADVANTAGE OF THE INVENTION According to this invention, the audio | voice operating system which can perform correctly and safely operation of the some apparatus contained in a stage mechanism or a play mechanism can be provided.

この発明の実施の形態に従う音声操作システムの概略構成図である。1 is a schematic configuration diagram of a voice operation system according to an embodiment of the present invention. 図1に示した音声式操作装置、表示装置および機械式操作装置の一例を示す図である。It is a figure which shows an example of the audio | voice type operating device shown in FIG. 1, a display apparatus, and a mechanical type operating device. 操作者、音声操作システムおよび舞台機構の間におけるデータの流れを説明するための図である。It is a figure for demonstrating the flow of the data between an operator, a voice operation system, and a stage mechanism. 音声認識装置におけるコード変換の一態様を説明する図である。It is a figure explaining the one aspect | mode of the code conversion in a speech recognition apparatus. 音声認識装置におけるコード変換の具体例を説明する図である。It is a figure explaining the specific example of the code conversion in a speech recognition apparatus. 表示装置に表示される画面の一例を説明する図である。It is a figure explaining an example of the screen displayed on a display apparatus. 音声操作システムに適用し得る音声認識の第1の構成例を説明する図である。It is a figure explaining the 1st structural example of the speech recognition which can be applied to a voice operation system. 音声操作システムに適用し得る音声認識の第2の構成例を説明する図である。It is a figure explaining the 2nd structural example of the voice recognition applicable to a voice operation system. 音声操作システムに適用し得る音声認識の第3の構成例を説明する図である。It is a figure explaining the 3rd structural example of the speech recognition which can be applied to a voice operation system.

本発明の実施の形態について、図面を参照しながら詳細に説明する。なお、図中の同一または相当する部分については、同一符号を付してその説明は繰り返さない。   Embodiments of the present invention will be described in detail with reference to the drawings. Note that the same or corresponding parts in the drawings are denoted by the same reference numerals and description thereof will not be repeated.

[音声操作システムの構成]
図1は、この発明の実施の形態に従う音声操作システムの概略構成図である。本実施の形態に従う音声操作システム100は、代表的には、舞台機構に含まれる複数の舞台装置60_1〜60_n(nは2以上の整数)を操作するための操作システムに適用することができる。本実施の形態に従う音声操作システム100は、また、スタジオ機構に含まれる複数の装置や遊技機構に含まれる複数の遊戯装置を操作するための操作システムにも適用することが可能である。
[Configuration of voice operation system]
FIG. 1 is a schematic configuration diagram of a voice operation system according to an embodiment of the present invention. Voice operation system 100 according to the present embodiment can be typically applied to an operation system for operating a plurality of stage apparatuses 60_1 to 60_n (n is an integer of 2 or more) included in the stage mechanism. Voice operation system 100 according to the present embodiment can also be applied to an operation system for operating a plurality of devices included in a studio mechanism and a plurality of game devices included in a game mechanism.

図1を参照して、舞台装置60_1〜60_nは、スタジオ、劇場、ホール、宴会場などの大規模な施設の舞台部分に設置される装置である。舞台装置には、舞台上部から吊り下げられた大道具、照明器具、スクリーン設備、緞帳および音響反射板などを、演出効果や格納のために昇降させる吊物機構や、大道具の搬出入や演出上の効果を得るために舞台床を動かす床機構などが含まれる。音声操作システム100は、複数の舞台装置60_1〜60_nを一元的に制御することによって舞台を演出するために用いられる。   Referring to FIG. 1, stage devices 60_1 to 60_n are devices installed on a stage part of a large-scale facility such as a studio, a theater, a hall, or a banquet hall. Stage equipment includes a hanging mechanism that lifts and lowers large tools, lighting fixtures, screen equipment, notebooks, and acoustic reflectors suspended from the top of the stage for production effects and storage, as well as carrying in and out of the tools. Includes a floor mechanism that moves the stage floor to achieve the above effects. The voice operation system 100 is used to produce a stage by centrally controlling a plurality of stage apparatuses 60_1 to 60_n.

音声操作システム100は、複数の舞台装置60_1〜60_nの各々を音声で操作するためのシステムである。音声操作システム100は、音声式操作装置10と、表示装置20と、機械式操作装置30と、音声認識装置40と、舞台機構制御装置50とを備える。   The voice operation system 100 is a system for operating each of the plurality of stage apparatuses 60_1 to 60_n with voice. The voice operation system 100 includes a voice operation device 10, a display device 20, a mechanical operation device 30, a voice recognition device 40, and a stage mechanism control device 50.

音声式操作装置10、表示装置20および機械式操作装置30は、舞台装置が存在する舞台付近の現場に設置される。音声認識装置40および舞台機構制御装置50は、舞台付近の現場、もしくは現場から離れた操作室などに設置される。少なくとも音声式操作装置10、表示装置20および機械式操作装置30は、現場で舞台機構を操作する操作者が利用することができるように設けられる。   The voice operation device 10, the display device 20, and the mechanical operation device 30 are installed at a site near the stage where the stage device exists. The voice recognition device 40 and the stage mechanism control device 50 are installed at a site near the stage or in an operation room away from the site. At least the voice operation device 10, the display device 20, and the mechanical operation device 30 are provided so that an operator who operates the stage mechanism can be used on site.

舞台機構制御装置50は、音声認識装置40、表示装置20および機械式操作装置30の各々との間でデータの送受信を行なう。通信方式は、例えば、Bluetooth(登録商標)、無線LAN(Local Area Network)等による無線通信であってもよいし、USB(Universal Serial Bus)バスなどを利用した有線通信であってもよい。   The stage mechanism control device 50 transmits / receives data to / from each of the voice recognition device 40, the display device 20, and the mechanical operation device 30. The communication method may be, for example, wireless communication using Bluetooth (registered trademark), wireless LAN (Local Area Network), or wired communication using a USB (Universal Serial Bus) bus.

音声式操作装置10は、操作者からの音声による操作指示(以下、「音声指示」とも称す。)を音声認識装置40に登録するために用いられる。具体的には、音声式操作装置10は、音声入力装置としてのマイクを含み、マイクが取得した音声を音声データに変換する。音声データに変換された音声指示は音声認識装置40に伝送される。   The voice operation device 10 is used to register an operation instruction (hereinafter also referred to as “voice instruction”) by voice from an operator in the voice recognition device 40. Specifically, the voice operation device 10 includes a microphone as a voice input device, and converts voice acquired by the microphone into voice data. The voice instruction converted into voice data is transmitted to the voice recognition device 40.

表示装置20は、文字、任意の図形、および画像等(以下、「文字等」と称す。)の情報を表示するための表示画面を含む。表示装置20は、舞台機構制御装置50からの指示に基づいて文字等の情報を表示する。   The display device 20 includes a display screen for displaying information on characters, arbitrary figures, images, and the like (hereinafter referred to as “characters”). The display device 20 displays information such as characters based on instructions from the stage mechanism control device 50.

機械式操作装置30は、操作者からの手動による操作指示(以下、「手動指示」とも称す。)を受け付けるように構成される。具体的には、機械式操作装置30は、操作者により操作可能な操作部を含む。操作部は、機械式の操作ボタンにより構成される。機械式の操作ボタンには、例えば、操作者OPが押圧操作が可能な押しボタン式スイッチ、レバースイッチ、スティックコントローラ、ジョグダイヤル、ロータリーエンコーダなどを用いることができる。機械式の操作ボタンは、操作対象となる舞台装置が動作を行なうための動作指令に対応する操作ボタンと、操作対象となる舞台装置の動作を停止するための停止指令に対応する操作ボタンとを少なくとも含む。   The mechanical operating device 30 is configured to receive a manual operation instruction (hereinafter also referred to as “manual instruction”) from an operator. Specifically, the mechanical operation device 30 includes an operation unit that can be operated by an operator. The operation unit is composed of mechanical operation buttons. As the mechanical operation button, for example, a push button switch, a lever switch, a stick controller, a jog dial, a rotary encoder, or the like that can be pressed by the operator OP can be used. The mechanical operation buttons include an operation button corresponding to an operation command for the stage device to be operated to operate, and an operation button corresponding to a stop command for stopping the operation of the stage device to be operated. Including at least.

本実施の形態において、音声式操作装置10は「第1の操作装置」の一実施例に対応し、機械式操作装置30は「第2の操作装置」の一実施例に対応する。   In the present embodiment, the voice operation device 10 corresponds to an example of a “first operation device”, and the mechanical operation device 30 corresponds to an example of a “second operation device”.

図2は、音声式操作装置10、表示装置20および機械式操作装置30の一例を示す図である。図2を参照して、音声式操作装置10、表示装置20および機械式操作装置30の各々は、操作者OPが携帯または装着することが可能に構成されている。   FIG. 2 is a diagram illustrating an example of the voice operation device 10, the display device 20, and the mechanical operation device 30. Referring to FIG. 2, each of the voice operation device 10, the display device 20, and the mechanical operation device 30 is configured so that the operator OP can carry or wear it.

音声式操作装置10は、例えば、ヘッドセット(マイク付きヘッドフォン)である。
表示装置20は、例えば、ウエアラブル機器である。図2の例では、ウエアラブル機器は眼鏡形状を有している。表示装置20は、眼鏡のレンズ部分に表示画面が設けられている。なお、ウエアラブル機器の形状は、操作者OPが表示画面を見ることができれば、眼鏡形状に限定されるものではない。また、表示装置20は、ウエアラブル機器以外に、操作者OPが携帯可能な端末であってもよいし、現場に固設されていてもよい。
The voice operation device 10 is, for example, a headset (headphone with a microphone).
The display device 20 is, for example, a wearable device. In the example of FIG. 2, the wearable device has a glasses shape. The display device 20 is provided with a display screen on the lens portion of the glasses. The shape of the wearable device is not limited to the shape of glasses as long as the operator OP can see the display screen. In addition to the wearable device, the display device 20 may be a terminal that can be carried by the operator OP, or may be fixed on the site.

機械式操作装置30は、図2に示されるような操作者OPが携帯可能な端末であってもよいし、現場に固設されていてもよい。また、音声式操作装置10、表示装置20および機械式操作装置30は、少なくとも2つが一体化されていてもよい。   The mechanical operation device 30 may be a terminal that can be carried by an operator OP as shown in FIG. 2 or may be fixed on the site. Further, at least two of the voice operation device 10, the display device 20, and the mechanical operation device 30 may be integrated.

図1に戻って、音声認識装置40は、音声式操作装置10から入力された音声データを音声指示として、装置内部のメモリに格納する(登録する)。音声認識装置40は、登録された音声指示をコマンドデータに変換するように構成される。生成されたコマンドデータは、舞台機構制御装置50が実行可能なコマンドコードを含んでいる。コマンドデータの詳細な構成については後述する。   Returning to FIG. 1, the voice recognition device 40 stores (registers) the voice data input from the voice operation device 10 in the memory inside the device as a voice instruction. The voice recognition device 40 is configured to convert a registered voice instruction into command data. The generated command data includes a command code that can be executed by the stage mechanism control device 50. The detailed configuration of the command data will be described later.

舞台機構制御装置50は、複数の舞台装置60_1〜60_nとの間で通信可能に構成される。通信方式は有線あるいは無線のいずれの通信も可能である。なお、本実施の形態においては、舞台機構制御装置50が各舞台装置と直接通信する場合について説明するが、ネットワークを介して各舞台装置と通信する方式としてもよい。   The stage mechanism control device 50 is configured to be able to communicate with a plurality of stage devices 60_1 to 60_n. As a communication method, either wired or wireless communication is possible. In the present embodiment, a case where the stage mechanism control device 50 communicates directly with each stage device will be described. However, a method of communicating with each stage device via a network may be used.

舞台機構制御装置50は、一例として、CPU(Central Processing Unit)と、ROM(Read Only Memory)やRAM(Random Access Memory)などのメモリとを含むマイクロコンピュータを主体として構成される。舞台機構制御装置50は、メモリに格納されているプログラムをCPUが実行することにより、複数の舞台装置60_1〜60_nを統括的に制御する。   As an example, the stage mechanism control device 50 is configured mainly by a microcomputer including a CPU (Central Processing Unit) and a memory such as a ROM (Read Only Memory) and a RAM (Random Access Memory). The stage mechanism control apparatus 50 performs overall control of the plurality of stage apparatuses 60_1 to 60_n by the CPU executing a program stored in the memory.

具体的には、舞台機構制御装置50は、音声認識装置40からコマンドデータを受け付ける。上記のように、コマンドデータは、音声認識装置40に登録された音声指示を表している。また、舞台機構制御装置50は、機械式操作装置30から手動指示を受け付ける。   Specifically, the stage mechanism control device 50 receives command data from the voice recognition device 40. As described above, the command data represents a voice instruction registered in the voice recognition device 40. The stage mechanism control device 50 receives a manual instruction from the mechanical operation device 30.

舞台機構制御装置50は、音声認識装置40に登録された音声指示、および機械式操作装置30からの手動指示に基づいて、複数の舞台装置60_1〜60_nの各々の運転を制御するための制御指令を生成する。舞台機構制御装置50は、生成した制御指令を対応する舞台装置に送信する。舞台装置60_1〜60_nの各々は制御部(図示せず)を含んでいる。各舞台装置の制御部は、舞台機構制御装置50からの制御指令を受信すると、制御指令に従って舞台装置の各部の動作を制御する。   The stage mechanism control device 50 controls the operation of each of the plurality of stage devices 60_1 to 60_n based on the voice instruction registered in the voice recognition device 40 and the manual instruction from the mechanical operation device 30. Is generated. The stage mechanism control device 50 transmits the generated control command to the corresponding stage device. Each of the stage devices 60_1 to 60_n includes a control unit (not shown). When receiving the control command from the stage mechanism control device 50, the control unit of each stage device controls the operation of each part of the stage device according to the control command.

舞台装置60_1〜60_nの各々は、定期的に自装置の状態を示す情報(以下、「ステータス情報」とも称す。)を舞台機構制御装置50に送信する。ステータス情報は、自装置の運転状態、例えば、現在動作中であるか停止中であるかを示す情報、自装置の現在位置を示す情報、自装置が正常であるか、あるいは異常が発生したかを示す情報などを含んでいる。各舞台装置は、自装置を識別するための識別情報(装置名または装置番号など)とともにステータス情報を舞台機構制御装置50に送信してもよい。   Each of the stage apparatuses 60_1 to 60_n periodically transmits information indicating the state of the own apparatus (hereinafter also referred to as “status information”) to the stage mechanism control apparatus 50. Status information includes the operation status of the device, for example, information indicating whether the device is currently operating or stopped, information indicating the current location of the device, whether the device is normal, or whether an error has occurred It contains information that indicates. Each stage device may transmit status information to the stage mechanism control device 50 together with identification information (device name or device number) for identifying the device itself.

[音声操作システムの動作]
次に、本実施の形態に従う音声操作システム100の動作について説明する。
[Operation of voice operation system]
Next, the operation of the voice operation system 100 according to the present embodiment will be described.

図3は、操作者、音声操作システム100および舞台機構の間におけるデータの流れを説明するための図である。   FIG. 3 is a diagram for explaining the flow of data among the operator, the voice operation system 100, and the stage mechanism.

図3を参照して、まず、操作者は、音声式操作装置10に対して音声指示を入力する(図中のOP1)。音声式操作装置10は、操作者からの音声指示を受け付けると、音声指示を示す音声データを音声認識装置40に送信する。   Referring to FIG. 3, first, the operator inputs a voice instruction to voice type operating device 10 (OP1 in the figure). When receiving the voice instruction from the operator, the voice operation apparatus 10 transmits voice data indicating the voice instruction to the voice recognition apparatus 40.

音声認識装置40は、音声式操作装置10からの音声指示(音声データ)を受信すると、受信した音声指示を登録する。音声認識装置40は、音声データである音声指示をコマンドデータに変換する。具体的には、操作者からの音声指示には、操作対象となる舞台装置を特定するために、舞台装置の識別情報が含まれている。音声指示には、さらに、操作対象となる舞台装置の操作内容を示す操作情報が含まれている。音声認識装置40は、識別情報および操作情報を、舞台機構制御装置50が実行可能なコマンドコードに変換する。   When the voice recognition device 40 receives a voice instruction (voice data) from the voice type operation device 10, the voice recognition device 40 registers the received voice instruction. The voice recognition device 40 converts voice instructions that are voice data into command data. Specifically, the voice instruction from the operator includes stage device identification information in order to identify the stage device to be operated. The voice instruction further includes operation information indicating the operation content of the stage apparatus to be operated. The voice recognition device 40 converts the identification information and the operation information into a command code that can be executed by the stage mechanism control device 50.

図4は、音声認識装置40におけるコード変換の一態様を説明する図である。
図4を参照して、音声認識装置40は複数のコマンドコードを格納している。複数のコマンドコードの各々は、識別情報または操作情報に関連付けられている。
FIG. 4 is a diagram for explaining an aspect of code conversion in the speech recognition apparatus 40.
Referring to FIG. 4, voice recognition device 40 stores a plurality of command codes. Each of the plurality of command codes is associated with identification information or operation information.

図4の例では、複数のコマンドコードは、舞台装置の装置名に関連付けられたコード(例えば、コード001〜100)と、舞台装置の動作量に関連付けられたコード(例えば、コード101〜200)と、舞台装置の動作方向に関連付けられたコード(例えば、コード201〜300)とを含む。   In the example of FIG. 4, the plurality of command codes include a code associated with the device name of the stage device (for example, codes 001 to 100) and a code associated with the operation amount of the stage device (for example, codes 101 to 200). And codes (for example, codes 201 to 300) associated with the operation direction of the stage apparatus.

舞台装置の装置名には、例えば、大道具、照明器具、スクリーン設備、緞帳および音響反射板などの名称またはこれらを昇降させる吊物機構、および床機構の名称などが含まれる。舞台装置の各々に対してコマンドコードを付与することができる。あるいは、複数の舞台装置が、一括操作が求められる2以上の舞台装置を1つのグループとしてグルーピングされている場合には、グループごとにコマンドコードを付与することができる。   The device name of the stage device includes, for example, names of large tools, lighting fixtures, screen equipment, notebooks, acoustic reflectors, and the like, or the names of hanging mechanisms that raise and lower them, and names of floor mechanisms. A command code can be assigned to each stage apparatus. Alternatively, when a plurality of stage apparatuses are grouped as a group of two or more stage apparatuses that require collective operation, a command code can be assigned to each group.

舞台装置の動作量には、例えば、舞台装置の移動距離および回転角度などが含まれる。例えば、移動距離および回転角度の各々について、その許容範囲を細分化し、細分化された範囲ごとにコードを付与することができる。また、舞台装置の動作量には、例えば、舞台の床上からの高さ位置その他の舞台装置の目標位置が含まれる。目標位置ごとにコードを付与することができる。   The operation amount of the stage device includes, for example, the moving distance and rotation angle of the stage device. For example, for each of the movement distance and the rotation angle, the allowable range can be subdivided, and a code can be assigned to each subdivided range. The amount of movement of the stage device includes, for example, the height position of the stage from the floor and other target positions of the stage device. A code can be assigned for each target position.

舞台装置の動作方向には、例えば、上下方向、前後方向、左右方向、回転方向などが含まれる。これらの方向の各々にコードを付与することができる。   The operation direction of the stage apparatus includes, for example, the up-down direction, the front-rear direction, the left-right direction, the rotation direction, and the like. A code can be assigned to each of these directions.

音声認識装置40は、図4に示すような、識別情報および操作情報と複数のコマンドコードとの対応関係を示すテーブルを格納している。音声認識装置40は、音声式操作装置10から音声指示を受け付けると、当該テーブルを参照して、音声指示をコードに変換する。   The voice recognition device 40 stores a table showing the correspondence between identification information and operation information and a plurality of command codes, as shown in FIG. When the voice recognition device 40 receives a voice instruction from the voice operation device 10, the voice recognition device 40 refers to the table and converts the voice instruction into a code.

ここで、例えば、図5に示すように、操作者からの音声指示が“緞帳を床上22mまで上昇”である場合を想定する。この音声指示は、操作対象の識別情報である「緞帳」(装置名)と、操作対象の動作量である「床上22m」(目標位置)と、操作対象の動作方向である「上昇」との3つの語句で構成されている。この場合、音声認識装置40は、テーブルを参照して、上記3つの語句の各々をコマンドコードに変換する。そして、音声認識装置40は、変換されたコマンドコードを組み合わせることによりコマンドデータを生成する。   Here, for example, as shown in FIG. 5, a case is assumed in which the voice instruction from the operator is “lift the notebook to 22 m above the floor”. This voice instruction is made up of “tap” (device name) that is identification information of the operation target, “22 m above the floor” (target position) that is the operation amount of the operation target, and “rise” that is the operation direction of the operation target. It consists of three words. In this case, the speech recognition device 40 refers to the table and converts each of the three words to a command code. The voice recognition device 40 generates command data by combining the converted command codes.

図5の例では、「緞帳」という語句はコマンドコード「001」に変換され、「床上22m」という語句はコマンドコード「122」に変換され、「上昇」という語句はコマンドコード「210」に変換される。したがって、“緞帳を床上22mまで上昇”という音声指示は、コマンドコード「001,122,210」を含むコマンドデータに変換される。   In the example of FIG. 5, the phrase “book” is converted to the command code “001”, the phrase “22 m on the floor” is converted to the command code “122”, and the phrase “rising” is converted to the command code “210”. Is done. Therefore, the voice instruction “raise the pad to 22 m above the floor” is converted into command data including the command code “001, 122, 210”.

なお、音声認識装置40におけるコード変換処理の正確を期すために、音声指示の構文(語順)を予め定めておくことができる。例えば、図5に示したように、識別情報、操作情報(動作量)、操作情報(動作方向)の順番とすることができる。   In addition, in order to ensure the accuracy of the code conversion process in the voice recognition device 40, the syntax (word order) of the voice instruction can be determined in advance. For example, as shown in FIG. 5, the order of identification information, operation information (motion amount), and operation information (motion direction) can be used.

または、音声指示の最初に、コード変換を開始するための指示を含めることができる。例えば、音声認識装置40は、“命令”という音声指示を受け付けると、コード変換処理を開始し、“命令”に続いて入力される音声指示をコマンドコードに変換するようにしてもよい。   Alternatively, an instruction for starting transcoding can be included at the beginning of the voice instruction. For example, when receiving a voice instruction “command”, the voice recognition device 40 may start the code conversion process and convert the voice instruction input following the “command” into a command code.

図3に戻って、舞台機構制御装置50は、音声認識装置40からのコマンドデータを受信すると、受信したコマンドデータを表す文字等の情報を生成する。具体的には、舞台機構制御装置50は、図4のテーブルを参照することにより、受信したコマンドデータを文字等の情報に逆変換する。例えば、図5に示すコマンドデータ(コード「001,122,210」)を受信した場合、舞台機構制御装置50は、当該コマンドデータから「緞帳」、「床上22m」および「上昇」の3つの語句を抽出し、その抽出した3つの語句を含む文字等の情報を生成する。   Returning to FIG. 3, when receiving the command data from the speech recognition device 40, the stage mechanism control device 50 generates information such as characters representing the received command data. Specifically, the stage mechanism control apparatus 50 converts the received command data back into information such as characters by referring to the table of FIG. For example, when the command data shown in FIG. 5 (codes “001, 122, 210”) is received, the stage mechanism control device 50 uses the command data to display three phrases, “padbook”, “22 m above the floor”, and “rise”. And information such as characters including the extracted three phrases is generated.

舞台機構制御装置50は、また、複数の舞台装置60_1〜60_nの各々からステータス情報を取得すると、取得したステータス情報のうち、操作対象となる舞台装置のステータス情報を抽出する。このとき、操作対象となる舞台装置に紐付けられた舞台装置のステータス情報を併せて抽出することができる。操作対象となる舞台装置に紐付けられた舞台装置とは、例えば、操作対象の舞台装置との間で可動範囲が重なり合っている舞台装置などである。   When the stage mechanism control device 50 acquires the status information from each of the plurality of stage devices 60_1 to 60_n, the stage mechanism control device 50 extracts the status information of the stage device to be operated from the acquired status information. At this time, the status information of the stage apparatus linked to the stage apparatus to be operated can be extracted together. The stage apparatus linked to the stage apparatus to be operated is, for example, a stage apparatus having a movable range overlapping with the stage apparatus to be operated.

舞台機構制御装置50は、抽出したステータス情報を文字等の情報に変換する。舞台機構制御装置50は、生成した文字等の情報を表示装置30に送信する。   The stage mechanism control device 50 converts the extracted status information into information such as characters. The stage mechanism control device 50 transmits information such as the generated characters to the display device 30.

表示装置30は、舞台機構制御装置50により生成された文字等の情報を表示画面に表示する。図6は、表示装置30に表示される画面の一例を説明する図である。図6を参照して、表示装置30の表示画面には、「装置名」、「属性名」、「速度」、「目標位置」、「現在位置」、「動作方向」および「ステータス」の計7項目が一覧表示されている。   The display device 30 displays information such as characters generated by the stage mechanism control device 50 on the display screen. FIG. 6 is a diagram for explaining an example of a screen displayed on the display device 30. Referring to FIG. 6, the display screen of display device 30 includes “device name”, “attribute name”, “speed”, “target position”, “current position”, “motion direction”, and “status”. Seven items are listed.

「装置名」には、操作対象となる舞台装置の名称が表示される。当該舞台装置に付された装置番号であってもよい。「属性名」には、操作対象となる舞台装置が属するグループを特定する情報が表示される。   In “device name”, the name of the stage device to be operated is displayed. The device number assigned to the stage device may be used. In the “attribute name”, information for specifying a group to which the stage device to be operated belongs is displayed.

「速度」には、操作対象となる舞台装置が動作すべき目標速度が表示される。「目標位置」には、操作対象となる舞台装置の目標位置が表示される。「現在位置」には、操作対象となる舞台装置の現在位置が表示される。   In “Speed”, a target speed at which the stage apparatus to be operated is to be operated is displayed. In “target position”, the target position of the stage apparatus to be operated is displayed. In “current position”, the current position of the stage apparatus to be operated is displayed.

「ステータス」には、操作対象となる舞台装置のステータス情報が表示される。例えば、操作対象となる舞台装置が現在動作中であるか停止中であるかを示す情報、舞台装置が正常か、あるいは異常が発生したかを示す情報などが表示される。「ステータス」にはまた、操作対象となる舞台装置に紐付けられた舞台装置のステータス情報が表示されてもよい。   In “Status”, status information of the stage apparatus to be operated is displayed. For example, information indicating whether the stage apparatus to be operated is currently operating or stopped, information indicating whether the stage apparatus is normal, or an abnormality has occurred, and the like are displayed. The “status” may also display status information of the stage device linked to the stage device to be operated.

このように、表示装置30の表示画面には、操作者の音声入力OP1に基づいて登録された音声指示の内容と、音声指示で特定された操作対象となる舞台装置のステータス情報とが表示される。操作者は、表示画面を見ることで、自己の音声入力OP1と、登録された音声指示とが一致しているか否か、すなわち、自己の音声指示が正しく登録されているか否かを確認することができる(図3中のOP2)。   As described above, the display screen of the display device 30 displays the contents of the voice instruction registered based on the voice input OP1 of the operator and the status information of the stage apparatus to be operated specified by the voice instruction. The The operator looks at the display screen to confirm whether or not his / her voice input OP1 matches the registered voice instruction, that is, whether or not his / her voice instruction is correctly registered. (OP2 in FIG. 3).

また、操作者は、表示画面を見ることで、操作対象となる舞台装置の現在の状態を把握することができるため、音声指示通りに当該舞台装置を動作させることができるかどうかを確認することができる(図3中のOP2)。   In addition, since the operator can grasp the current state of the stage device to be operated by looking at the display screen, it is necessary to confirm whether the stage device can be operated according to the voice instruction. (OP2 in FIG. 3).

例えば、操作対象となる舞台装置の現在位置について操作者の誤解がある場合、音声指示通りに当該舞台装置を動作させると、操作者の意図とは異なる位置に舞台装置が移動し、操作対象外の舞台装置に支障を及ぼす可能性がある。あるいは、操作対象となる舞台装置が別の操作者からの音声指示に従って動作中である場合には、別の操作者の音声指示と自己の音声指示とがバッティングしてしまう可能性がある。操作者は、表示画面から操作対象となる舞台装置の現在の状態を把握することで、これらの不具合が生じる可能性を予見することができる。   For example, if there is an operator's misunderstanding about the current position of the stage device to be operated, if the stage device is operated according to the voice instruction, the stage device moves to a position different from the intention of the operator, and the May affect the stage equipment. Alternatively, when the stage device to be operated is operating in accordance with a voice instruction from another operator, there is a possibility that the voice instruction of the other operator and his / her voice instruction may be batting. The operator can foresee the possibility of these problems by grasping the current state of the stage apparatus to be operated from the display screen.

図3に戻って、音声指示が正しく登録されており、かつ、操作対象の舞台装置を音声指示通りに動作させることができることが確認されると(図中のOP2)、操作者は、機械式操作装置30の操作部に対する入力操作を行なう(図中のOP3)。操作者は、操作部に含まれる複数の機械式の操作ボタンのうち、操作対象となる舞台装置が動作を行なうための動作指令に対応する操作ボタンへの入力操作を行なう。   Returning to FIG. 3, when it is confirmed that the voice instruction is correctly registered and the stage device to be operated can be operated according to the voice instruction (OP 2 in the figure), the operator An input operation is performed on the operation unit of the operation device 30 (OP3 in the figure). The operator performs an input operation to an operation button corresponding to an operation command for operating the stage apparatus to be operated among the plurality of mechanical operation buttons included in the operation unit.

上記操作ボタンに対する入力操作が行なわれると、機械式操作装置30は、動作指令を生成して舞台機構制御装置50に出力する。舞台機構制御装置50は、機械式操作装置30からの動作指令に基づいて、操作対象となる舞台装置を制御するための制御指令(電気信号)を生成する。舞台機構制御装置50は、生成した制御指令を操作対象となる舞台装置に出力する。この結果、音声指示に従って操作対象となる舞台装置が動作する。   When an input operation is performed on the operation button, the mechanical operation device 30 generates an operation command and outputs it to the stage mechanism control device 50. The stage mechanism control device 50 generates a control command (electric signal) for controlling the stage device to be operated based on the operation command from the mechanical operation device 30. The stage mechanism control device 50 outputs the generated control command to the stage device to be operated. As a result, the stage device to be operated operates according to the voice instruction.

なお、操作対象となる舞台装置の動作中、音声指示に反して当該舞台装置を停止させたい場合には、操作者は、機械式操作装置30にて停止指令に対応する操作ボタンへの入力操作を行なうことができる。   In addition, during operation of the stage apparatus to be operated, when it is desired to stop the stage apparatus against the voice instruction, the operator performs an input operation to the operation button corresponding to the stop command with the mechanical operation apparatus 30. Can be performed.

これに対して、登録内容に間違いや漏れがある等、音声指示が誤って登録されていることが確認された場合、もしくは、音声指示が正しく登録されているが、音声指示通りに操作対象となる舞台装置を動作させることができないことが確認された場合には、操作者は、再度音声式操作装置10に対して音声指示を入力することができる(図中のOP1)。そして、操作者は、新たに入力した音声指示についても、表示装置30の表示画面を基に、音声指示が正しく登録されているか、および、操作対象となる舞台装置を音声指示通りに動作させることができるか、を再度確認することができる(図中のOP2)。   On the other hand, if it is confirmed that the voice instruction is registered incorrectly, such as when there is an error or omission in the registered content, or the voice instruction is correctly registered, When it is confirmed that the stage device cannot be operated, the operator can input a voice instruction to the voice operation device 10 again (OP1 in the figure). Then, the operator also operates the stage apparatus to be operated in accordance with the voice instruction based on the display screen of the display device 30 for the newly input voice instruction and whether the voice instruction is correctly registered. Can be confirmed again (OP2 in the figure).

以上説明したように、本実施の形態に従う音声操作システム100においては、音声認識装置40に登録された音声指示は、コマンドデータに変換されて舞台機構制御装置50に伝送される。その後、このコマンドデータは、舞台機構制御装置50によって文字等の情報に逆変換されて表示装置20の表示画面に表示される。すなわち、操作者から与えられた音声指示は、文字等の情報となって操作者にフィードバックされることになる。これにより、操作者は、文字等の情報に基づいて、自己が発した音声指示が音声操作システム100に正しく登録されているか否かを確認することができる。   As described above, in voice operation system 100 according to the present embodiment, a voice instruction registered in voice recognition device 40 is converted into command data and transmitted to stage mechanism control device 50. Thereafter, the command data is reversely converted into information such as characters by the stage mechanism control device 50 and displayed on the display screen of the display device 20. That is, the voice instruction given from the operator is fed back to the operator as information such as characters. Thereby, the operator can confirm whether or not the voice instruction issued by himself / herself is correctly registered in the voice operation system 100 based on information such as characters.

また、表示装置20の表示画面には、音声指示に加えて、操作対象となる舞台装置のステータス情報が文字等の情報として表示されるため、操作者は、操作対象となる舞台装置を音声指示に従って安全に動作させることができるか否かを確認することができる。   Further, since the status information of the stage device to be operated is displayed as information such as characters on the display screen of the display device 20 in addition to the voice instruction, the operator designates the stage device to be operated as a voice instruction. It can be confirmed whether or not it can be operated safely according to the above.

さらに、音声指示が正しく登録されており、かつ、操作対象となる舞台装置を安全に動作させることができることが確認された場合、操作者は、機械式操作装置30を操作することで、操作対象の舞台装置を動作させることができる。すなわち、操作対象となる舞台装置の動作は、操作者からの音声指示ではなく、操作者による手動指示をトリガとして実行される。このようにすると、音声指示が正しく登録されており、かつ、操作対象となる舞台装置の安全動作が保証されている状態で、操作対象となる舞台装置を動作させることができるため、操作対象となる舞台装置の安全かつ正確な動作を実現できる。   Furthermore, when it is confirmed that the voice instruction is correctly registered and the stage device to be operated can be safely operated, the operator operates the mechanical operation device 30 to operate the operation target. The stage equipment can be operated. In other words, the operation of the stage apparatus to be operated is executed not by a voice instruction from the operator but by a manual instruction by the operator as a trigger. In this way, since the voice instruction is correctly registered and the safe operation of the stage apparatus to be operated is guaranteed, the stage apparatus to be operated can be operated. The safe and accurate operation of the stage equipment can be realized.

また、従来の操作装置では、通常、操作者は、現場から離れた操作室等で現場の指揮者からの指示に従って操作するため、操作対象となる舞台装置の状態を指揮者からの音声指示を通じてしか知ることができない状況が起こっていた。これに対して、本実施の形態に従う音声操作システム100によれば、指揮者自身が操作者となって舞台装置を操作するため、操作者は操作対象となる舞台装置の状態を視認することができる。さらに、操作者は、機械式操作装置30において複雑な手動操作が要求されないため、自身の視線を操作対象となる舞台装置に集中させることができる。この結果、操作者は、操作対象となる舞台装置の最新の状態を把握しながら、正確かつ安全に舞台装置を操作することが可能となる。   Further, in the conventional operation device, since the operator usually operates according to the instruction from the conductor at the site in an operation room or the like away from the site, the state of the stage device to be operated is determined through voice instructions from the conductor. There was a situation that could only be known. On the other hand, according to voice operation system 100 according to the present embodiment, the conductor himself / herself operates as an operator to operate the stage apparatus, so that the operator can visually recognize the state of the stage apparatus to be operated. it can. Furthermore, since the operator does not require a complicated manual operation in the mechanical operation device 30, the operator can concentrate his / her line of sight on the stage device to be operated. As a result, the operator can operate the stage apparatus accurately and safely while grasping the latest state of the stage apparatus to be operated.

また、音声操作システム100によれば、操作者は音声で指示を発し、その指示内容を文字等の情報の形で視覚を通じて確認するため、指示と確認とを混乱せずに並行して行なうことができる。これにより、操作者は、操作を効率良く行なうことができる。   Further, according to the voice operation system 100, the operator issues an instruction by voice, and the instruction content is visually confirmed in the form of information such as characters, so the instruction and the confirmation are performed in parallel without confusion. Can do. Thereby, the operator can perform operation efficiently.

詳細には、音声認識技術には、操作者が音声で指示を発すると、その指示内容を音声で操作者に通知することで、操作者に指示を確認させる方式がある。しかしながら、このような方式では、発音と聴音とが混在するため、指示と確認とを並行して行なうことが困難である。そのため、指示の後に確認を行なうことで、操作者の混乱を回避している。   Specifically, in the voice recognition technology, there is a method in which when an operator issues an instruction by voice, the instruction content is notified to the operator by voice so that the operator confirms the instruction. However, in such a system, since pronunciation and listening sound are mixed, it is difficult to perform the instruction and the confirmation in parallel. Therefore, by confirming after the instruction, the confusion of the operator is avoided.

これに対して、本実施の形態では、上述したように、聴覚を用いて指示を発し、視覚を用いて確認するため、操作者は混乱せずに、指示と確認とを並行して行なうことができる。よって、舞台機構の操作の効率を向上させることができる。   On the other hand, in the present embodiment, as described above, instructions are issued using auditory senses and confirmed using visual senses, so that the operator performs instructions and confirmations in parallel without confusion. Can do. Therefore, the operation efficiency of the stage mechanism can be improved.

また、音声操作システム100では、図6に示したように、表示装置30の表示画面に、操作対象となる舞台装置の識別情報および操作情報を一覧として表示することで、操作者は、登録された音声指示に間違いや漏れがあることを容易に見つけることができる。   Further, in the voice operation system 100, as shown in FIG. 6, the operator is registered by displaying the identification information and the operation information of the stage apparatus to be operated as a list on the display screen of the display device 30. You can easily find that there are mistakes or omissions in the voice instructions.

さらに、この表示画面の一覧を見ながら操作者が音声指示を発することで、音声指示を当該一覧に倣った構文の形式となるよう、操作者に促すことができる。例えば、図6の一覧に挙げられた複数の項目を、先頭の項目から順に音声入力することができる。これによれば、音声認識装置40における認識精度を高めることができる。   Furthermore, when the operator issues a voice instruction while viewing the list on the display screen, the operator can be prompted to make the voice instruction in a syntax format following the list. For example, a plurality of items listed in the list of FIG. 6 can be input by voice in order from the top item. According to this, the recognition accuracy in the speech recognition apparatus 40 can be increased.

ただし、本実施の形態による音声操作システム100において、複数の舞台装置60_1〜60_nのいずれかが故障するなど、音声操作システム100に異常が発生した場合には、複数の舞台装置60_1〜60_n全体を緊急停止することが要求される。このような場合には、異常を検知した操作者は、音声式操作装置10に対して、例えば“緊急停止”という音声指示を入力することができる。緊急停止の音声指示が音声認識装置40によってコマンドデータに変換されて舞台機構制御装置50に与えられると、舞台機構制御装置50は、機械式操作装置30からの手動指令を待つことなく、迅速に舞台装置60_1〜60_n全体を停止させることができる。   However, in the voice operation system 100 according to the present embodiment, when an abnormality occurs in the voice operation system 100, such as when any of the plurality of stage devices 60_1 to 60_n fails, the entire plurality of stage devices 60_1 to 60_n An emergency stop is required. In such a case, the operator who has detected an abnormality can input a voice instruction such as “emergency stop” to the voice operation device 10. When the voice instruction for emergency stop is converted into command data by the voice recognition device 40 and given to the stage mechanism control device 50, the stage mechanism control device 50 quickly does not wait for a manual command from the mechanical operation device 30. The entire stage apparatuses 60_1 to 60_n can be stopped.

[音声操作システムにおける音声認識]
以下、図7から図9を参照して、本実施の形態に従う音声操作システム100における音声認識のための構成例について説明する。図7から図9の各図には、二人の操作者OPA,OPBが互いに独立して音声指示を発する場合が例示されている。操作者は三人以上であってもよい。
[Voice recognition in voice operation system]
A configuration example for voice recognition in voice operation system 100 according to the present embodiment will be described below with reference to FIGS. Each of FIGS. 7 to 9 exemplifies a case where two operators OPA and OPB issue voice instructions independently of each other. There may be three or more operators.

図7は、音声操作システム100に適用し得る音声認識の第1の構成例を説明する図である。図7を参照して、操作者OPAは、音声式操作装置10Aおよび機械式操作装置30Aを用いて、音声指示および手動指示をそれぞれ発することができる。操作者OPBは、音声式操作装置10Bおよび機械式操作装置30Bを用いて、音声指示および手動指示をそれぞれ発することができる。   FIG. 7 is a diagram illustrating a first configuration example of voice recognition that can be applied to the voice operation system 100. Referring to FIG. 7, operator OPA can issue a voice instruction and a manual instruction using voice operation device 10 </ b> A and mechanical operation device 30 </ b> A, respectively. The operator OPB can issue a voice instruction and a manual instruction using the voice operation device 10B and the mechanical operation device 30B.

図7では、音声式操作装置10A,10Bにそれそれ対応して、音声認識装置40A,40Bが設けられている。すなわち、音声式操作装置10と音声認識装置40とは一対一に対応している。   In FIG. 7, voice recognition devices 40A and 40B are provided corresponding to the voice operation devices 10A and 10B, respectively. That is, the voice operation device 10 and the voice recognition device 40 are in one-to-one correspondence.

図8は、音声操作システム100に適用し得る音声認識の第2の構成例を説明する図である。図8においても、図7と同様に、操作者OPAは、音声式操作装置10Aおよび機械式操作装置30Aを用いて、音声指示および手動指示をそれぞれ発することができる。操作者OPBは、音声式操作装置10Bおよび機械式操作装置30Bを用いて、音声指示および手動指示をそれぞれ発することができる。   FIG. 8 is a diagram illustrating a second configuration example of voice recognition that can be applied to the voice operation system 100. Also in FIG. 8, similarly to FIG. 7, the operator OPA can issue a voice instruction and a manual instruction using the voice operation device 10A and the mechanical operation device 30A, respectively. The operator OPB can issue a voice instruction and a manual instruction using the voice operation device 10B and the mechanical operation device 30B.

図8では、複数の音声式操作装置10A,10Bに対して1台の音声認識装置40が設けられている。さらに、各音声式操作装置10と音声認識装置40との間には、音声伝送装置15が設けられている。   In FIG. 8, one speech recognition device 40 is provided for a plurality of voice operation devices 10A and 10B. Furthermore, a voice transmission device 15 is provided between each voice type operation device 10 and the voice recognition device 40.

第2の構成例では、各音声式操作装置10に入力された音声指示は音声伝送装置15を経由して音声認識装置40に伝送される。舞台機構および遊戯機構などにおいては、通常、複数の操作者は各々がインターカムを所持しており、音声伝送装置を経由して操作者間で音声通信が行なわれる構成となっている。第2の構成例では、各操作者が所持しているインターカムを音声式操作装置10として利用することができる。すなわち、各操作者は、インターカムを使って他の操作者と通信することができるとともに、音声指示を発することができる。第2の構成例によれば、既存の装置を活用することで、音声操作システム100を低コストで実現することができる。   In the second configuration example, the voice instruction input to each voice operation device 10 is transmitted to the voice recognition device 40 via the voice transmission device 15. In a stage mechanism, a play mechanism, and the like, usually, a plurality of operators each have an intercom, and voice communication is performed between operators via a voice transmission device. In the second configuration example, the intercom possessed by each operator can be used as the voice operation device 10. That is, each operator can communicate with other operators using an intercom and can issue voice instructions. According to the second configuration example, the voice operation system 100 can be realized at low cost by utilizing an existing device.

図9は、音声操作システム100に適用し得る音声認識の第3の構成例を説明する図である。図9においても、図7および図8と同様に、操作者OPAは、音声式操作装置10Aおよび機械式操作装置30Aを用いて、音声指示および手動指示をそれぞれ発することができる。操作者OPBは、音声式操作装置10Bおよび機械式操作装置30Bを用いて、音声指示および手動指示をそれぞれ発することができる。また、図8と同様に、各音声式操作装置10と音声認識装置40との間には、音声伝送装置15が設けられている。   FIG. 9 is a diagram illustrating a third configuration example of voice recognition that can be applied to the voice operation system 100. Also in FIG. 9, as in FIGS. 7 and 8, the operator OPA can issue a voice instruction and a manual instruction using the voice operation device 10 </ b> A and the mechanical operation device 30 </ b> A, respectively. The operator OPB can issue a voice instruction and a manual instruction using the voice operation device 10B and the mechanical operation device 30B. Similarly to FIG. 8, a voice transmission device 15 is provided between each voice operation device 10 and the voice recognition device 40.

図9では、機械式操作装置30A,30Bにそれぞれ、音声ボタン35A,35Bが設けられている。音声ボタン35A,35Bは、音声式操作装置10に対する音声指示の入力操作を有効に設定するための操作ボタンである。   In FIG. 9, voice buttons 35A and 35B are provided on the mechanical operation devices 30A and 30B, respectively. The voice buttons 35 </ b> A and 35 </ b> B are operation buttons for effectively setting the voice instruction input operation to the voice operation device 10.

ここで、音声式操作装置10A,10Bはインターカムであり、操作者OPA,OPBは音声伝送装置15を経由して通信することができる状況を想定する。この状況において、操作者OPBが音声ボタン35Bに対する入力操作を行なうと、音声認識装置40には、音声式操作装置10Bに対する音声入力を受け付けるための待ち受け状態となる。操作者OPBが自己の音声式操作装置10に音声指示を入力すると、当該音声指示は音声伝送装置15を経由して音声認識装置40に伝送される。   Here, it is assumed that the voice operation devices 10 </ b> A and 10 </ b> B are intercoms and the operators OPA and OPB can communicate via the voice transmission device 15. In this situation, when the operator OPB performs an input operation on the voice button 35B, the voice recognition device 40 enters a standby state for receiving a voice input to the voice operation device 10B. When the operator OPB inputs a voice instruction to his / her voice operation device 10, the voice instruction is transmitted to the voice recognition device 40 via the voice transmission device 15.

第3の構成例によれば、各操作者が所持しているインターカムを音声式操作装置10として利用する構成において、操作者間の通信と音声指示との切り分けが容易となる。   According to the third configuration example, in the configuration in which the intercom possessed by each operator is used as the voice operation device 10, the communication between the operators and the voice instruction can be easily separated.

今回開示された実施の形態はすべての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は上記した説明ではなくて特許請求の範囲によって示され、特許請求の範囲と均等の意味および範囲内でのすべての変更が含まれることが意図される。   The embodiment disclosed this time should be considered as illustrative in all points and not restrictive. The scope of the present invention is defined by the terms of the claims, rather than the description above, and is intended to include any modifications within the scope and meaning equivalent to the terms of the claims.

10,10A,10B 音声式操作装置、15 音声伝送装置、20 表示装置、30,30A,30B 機械式操作装置、35A,35B 音声ボタン、40 音声認識装置、50 舞台機構制御装置、60_1〜60_n 舞台装置、100 音声操作システム、OP,OPA,OPB 操作者。   10, 10A, 10B Voice operation device, 15 Voice transmission device, 20 Display device, 30, 30A, 30B Mechanical operation device, 35A, 35B Voice button, 40 Voice recognition device, 50 Stage mechanism control device, 60_1-60_n Stage Device, 100 voice operation system, OP, OPA, OPB operator.

Claims (7)

舞台機構、スタジオ機構または遊戯機構に含まれる複数の機器を音声で操作するための音声操作システムであって、
操作者からの音声による操作指示を受け付けるように構成された第1の操作装置と、
前記第1の操作装置に入力された前記音声による操作指示を、コマンドデータに変換するように構成された音声認識装置と、
前記音声認識装置により変換された前記コマンドデータ、および前記複数の機器の状態を示すステータス情報を受けて、前記コマンドデータおよび前記ステータス情報を表す文字情報を生成するように構成された制御装置と、
前記制御装置により生成された前記文字情報を表示するように構成された表示装置と、
前記操作者からの手動による操作指示を受け付けるように構成された第2の操作装置とを備え、
前記制御装置は、さらに、前記第2の操作装置に入力された前記手動による操作指示と前記コマンドデータとに従って、各前記複数の機器を制御するように構成される、音声操作システム。
A voice operation system for operating a plurality of devices included in a stage mechanism, a studio mechanism, or a play mechanism by voice,
A first operating device configured to receive voice operation instructions from an operator;
A voice recognition device configured to convert the voice operation instruction input to the first controller device into command data;
A control device configured to receive the command data converted by the voice recognition device and status information indicating a state of the plurality of devices, and generate character information representing the command data and the status information;
A display device configured to display the character information generated by the control device;
A second operating device configured to receive a manual operation instruction from the operator;
The voice operation system, wherein the control device is further configured to control each of the plurality of devices according to the manual operation instruction and the command data input to the second operation device.
前記音声による操作指示は、操作対象となる機器を識別するための識別情報、および前記操作対象となる機器に対する操作内容を示す操作情報を含み、
前記音声認識装置は、前記識別情報および前記操作情報を、前記制御装置が実行可能なコマンドコードで表現された前記コマンドデータに変換するように構成される、請求項1に記載の音声操作システム。
The operation instruction by voice includes identification information for identifying a device to be operated, and operation information indicating an operation content for the device to be operated,
The voice operation system according to claim 1, wherein the voice recognition device is configured to convert the identification information and the operation information into the command data represented by a command code executable by the control device.
前記表示装置に表示される前記文字情報は、操作対象となる機器を識別するための識別情報、前記操作対象となる機器に対する操作内容を示す操作情報、および前記操作対象となる機器の前記ステータス情報を含む、請求項1に記載の音声操作システム。   The character information displayed on the display device includes identification information for identifying a device to be operated, operation information indicating an operation content for the device to be operated, and the status information of the device to be operated. The voice operation system according to claim 1, comprising: 前記第2の操作装置は、機械式の操作部を含み、前記操作部に対する前記手動による操作指示を受け付けるように構成される、請求項1から3のいずれか1項に記載の音声操作システム。   4. The voice operation system according to claim 1, wherein the second operation device includes a mechanical operation unit, and is configured to receive the manual operation instruction to the operation unit. 5. 前記制御装置は、前記コマンドデータが停止指示である場合には、前記手動による操作指示を待たずに、前記コマンドデータに従って前記複数の機器を停止させる、請求項1から4のいずれか1項に記載の音声操作システム。   5. The control device according to claim 1, wherein when the command data is a stop instruction, the control device stops the plurality of devices according to the command data without waiting for the manual operation instruction. 6. The voice operation system described. 前記第1の操作装置は、複数の操作者にそれぞれ対応して複数設けられ、
複数の前記第1の操作装置の各々に入力された前記音声による操作指示を受け付けて前記音声認識装置に伝送するように構成された音声伝送装置をさらに備える、請求項1から5のいずれか1項に記載の音声操作システム。
A plurality of the first operating devices are provided corresponding to a plurality of operators,
6. The apparatus according to claim 1, further comprising a voice transmission device configured to receive and transmit the voice operation instruction input to each of the plurality of first operation devices to the voice recognition device. The voice operation system according to item.
前記第2の操作装置は、複数の操作者にそれぞれ対応して複数設けられ、
複数の前記第2の操作装置の各々は、前記第1の操作装置に対する前記音声による操作指示の入力操作を有効に設定するように構成される、請求項6に記載の音声操作システム。
A plurality of the second operating devices are provided corresponding to a plurality of operators,
The voice operation system according to claim 6, wherein each of the plurality of second operation devices is configured to effectively set an input operation of the operation instruction by the voice to the first operation device.
JP2016243406A 2016-12-15 2016-12-15 Voice operation system Active JP6422930B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2016243406A JP6422930B2 (en) 2016-12-15 2016-12-15 Voice operation system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016243406A JP6422930B2 (en) 2016-12-15 2016-12-15 Voice operation system

Publications (2)

Publication Number Publication Date
JP2018097259A true JP2018097259A (en) 2018-06-21
JP6422930B2 JP6422930B2 (en) 2018-11-14

Family

ID=62631396

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016243406A Active JP6422930B2 (en) 2016-12-15 2016-12-15 Voice operation system

Country Status (1)

Country Link
JP (1) JP6422930B2 (en)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000355484A (en) * 1999-06-16 2000-12-26 Tadano Ltd Voice control device for working machine
JP2003131682A (en) * 2001-10-24 2003-05-09 Victor Co Of Japan Ltd Equipment control system using voice command
JP2005334039A (en) * 2004-05-24 2005-12-08 Kayaba System Machinery Kk Controller of stage mechanism
JP2013136131A (en) * 2011-12-28 2013-07-11 Toyota Motor Corp Method and device for controlling robot, and robot

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000355484A (en) * 1999-06-16 2000-12-26 Tadano Ltd Voice control device for working machine
JP2003131682A (en) * 2001-10-24 2003-05-09 Victor Co Of Japan Ltd Equipment control system using voice command
JP2005334039A (en) * 2004-05-24 2005-12-08 Kayaba System Machinery Kk Controller of stage mechanism
JP2013136131A (en) * 2011-12-28 2013-07-11 Toyota Motor Corp Method and device for controlling robot, and robot

Also Published As

Publication number Publication date
JP6422930B2 (en) 2018-11-14

Similar Documents

Publication Publication Date Title
CN103616834B (en) Controlling system of medical equipments
KR20120063982A (en) Apparatus and method of man-machine interface for invisible user
CN103472790A (en) System and method for debugging elevator and smart phone
JP6009121B2 (en) Multimodal information processing device
JP6522725B1 (en) Voice operation system
US11440777B2 (en) Controlling system console for electric hoists and controlling system with the same
JP5283295B2 (en) Voice-controlled position familiar elevator, control arrangement used therefor, and control method
JP6422930B2 (en) Voice operation system
Abdullahi et al. Mobile robot voice recognition in control movements
CN109272122A (en) The location-based functional availability of maintenance tool
JP2016008132A (en) Elevator system and information output method of elevator
US20180121041A1 (en) Operating assistant
JP2009145402A (en) Device operation switch
JP2001083992A (en) Maintenance work support device
CN112279099A (en) Crane work assistance system and method
EP2037427A1 (en) Interface device for user communication with a controller and method for inputting commands to a controller
EP3479971A1 (en) Method of performing assembling of an object, and assembly system
CN211015974U (en) Voice teaching device and system
JP2008107871A (en) Remote operator instruction system
JP2014117439A (en) Nurse call system
JPH02148120A (en) Work station for computer system and computer system
Haramaki et al. A Broadcast Control System of Humanoid Robot by Wireless Marionette Style
CN213586403U (en) Voice control device, equipment and high-voltage generator control system
WO2022157861A1 (en) Elevator call registration device and elevator system
WO2021019658A1 (en) Communication system

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180402

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20181002

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20181017

R150 Certificate of patent or registration of utility model

Ref document number: 6422930

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250