JP2021096759A - Display control device, control system, display control method, control program, and recording medium - Google Patents

Display control device, control system, display control method, control program, and recording medium Download PDF

Info

Publication number
JP2021096759A
JP2021096759A JP2019229194A JP2019229194A JP2021096759A JP 2021096759 A JP2021096759 A JP 2021096759A JP 2019229194 A JP2019229194 A JP 2019229194A JP 2019229194 A JP2019229194 A JP 2019229194A JP 2021096759 A JP2021096759 A JP 2021096759A
Authority
JP
Japan
Prior art keywords
display
display control
unit
control device
control
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2019229194A
Other languages
Japanese (ja)
Inventor
翼 飯野
Tsubasa Iino
翼 飯野
玲人 森
Akito Mori
玲人 森
林 泰宏
Yasuhiro Hayashi
泰宏 林
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Priority to JP2019229194A priority Critical patent/JP2021096759A/en
Publication of JP2021096759A publication Critical patent/JP2021096759A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Position Input By Displaying (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Controls And Circuits For Display Device (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

To provide improved operability when operating a display control device for controlling a display device using a terminal device.SOLUTION: A display control device 1 is provided, comprising: an acquisition unit 13 configured to acquire information representing a gesture operation performed on a touch panel of a terminal device 2; a conversion unit 15 for deriving a predetermined operation; a device control unit 18 for controlling the display control device 1; and a display control unit 19 configured to provide display control to display images according to the control.SELECTED DRAWING: Figure 1

Description

本発明の一態様は、表示制御装置、制御システム、表示制御方法、制御プログラムおよび記録媒体に関する。 One aspect of the present invention relates to a display control device, a control system, a display control method, a control program, and a recording medium.

スマートフォンなどを表示機器及び周辺機器の操作機器として利用することにより、操作性を向上させることができる操作機器システムが従来技術として知られている。 An operating device system capable of improving operability by using a smartphone or the like as an operating device for a display device and a peripheral device is known as a prior art.

国際公開第2012/172849号(2012年12月20日公開)International Publication No. 2012/172894 (Released on December 20, 2012)

しかしながら、上述のような従来技術は、端末装置を操作する際に、端末装置の画面上を確認する必要があるため、操作性を向上できる余地がある。 However, in the above-mentioned conventional technique, when operating the terminal device, it is necessary to check the screen of the terminal device, so that there is room for improving the operability.

本発明の一態様は、表示装置の制御を行う表示制御装置を端末装置で操作する場合における操作性を向上させることを目的とする。 One aspect of the present invention is to improve operability when a display control device that controls a display device is operated by a terminal device.

上記の課題を解決するために、本発明の一態様に係る表示制御装置は、表示装置の制御を行う表示制御装置であって、当該表示制御装置と関連付けられた端末装置のタッチパネルに対してなされたジェスチャ操作を示す情報を取得する取得部と、前記取得部が取得した情報から、所定の操作を導出する変換部と、前記所定の操作に応じて、当該表示制御装置を制御する機器制御部と、前記機器制御部による制御に応じた表示が行われるように、前記表示装置における表示制御を行う表示制御部と、を備えることを特徴とする。 In order to solve the above problems, the display control device according to one aspect of the present invention is a display control device that controls the display device, and is applied to the touch panel of the terminal device associated with the display control device. An acquisition unit that acquires information indicating a gesture operation, a conversion unit that derives a predetermined operation from the information acquired by the acquisition unit, and a device control unit that controls the display control device in response to the predetermined operation. It is characterized by including a display control unit that performs display control in the display device so that the display is performed according to the control by the device control unit.

上記の課題を解決するために、本発明の一態様に係る表示システムは、表示装置の制御を行う表示制御装置、及び前記表示制御装置に関連付けられた端末装置を備える、前記表示装置における表示の制御システムであって、前記表示制御装置は、前記端末装置のタッチパネルに対してなされたジェスチャ操作を示す情報を取得する第1取得部と、前記第1取得部が取得した情報から、所定の操作を導出する変換部と、前記所定の操作に応じて、前記表示制御装置を制御する機器制御部と、前記機器制御部による制御に応じた表示が行われるように、前記表示装置における表示制御を行う表示制御部と、を備え、前記端末装置は、タッチパネルと、当該端末装置の前記タッチパネルに対してなされたジェスチャ操作を示す情報を取得する第2取得部と、前記第2取得部が取得した情報を、前記表示制御装置に対して送信する通信部と、を備えることを特徴とする。 In order to solve the above problems, the display system according to one aspect of the present invention includes a display control device that controls the display device and a terminal device associated with the display control device, and displays the display on the display device. In the control system, the display control device is a predetermined operation from the first acquisition unit that acquires information indicating a gesture operation performed on the touch panel of the terminal device and the information acquired by the first acquisition unit. The display control in the display device is performed so that the conversion unit for deriving the information, the device control unit for controlling the display control device in response to the predetermined operation, and the display according to the control by the device control unit are performed. The terminal device includes a display control unit for performing the operation, the terminal device has a touch panel, a second acquisition unit for acquiring information indicating a gesture operation performed on the touch panel of the terminal device, and the second acquisition unit has acquired the information. It is characterized by including a communication unit that transmits information to the display control device.

上記の課題を解決するために、本発明の一態様に係る表示制御方法は、表示装置の制御を行う表示制御装置によって実行される表示制御方法であって、前記表示制御装置と関連付けられた端末装置のタッチパネルに対してなされたジェスチャ操作を示す情報を取得する取得ステップと、前記取得ステップにおいて取得した情報から、所定の操作を導出する変換ステップと、前記所定の操作に応じて、前記表示制御装置を制御する機器制御ステップと、前記機器制御ステップにおける制御に応じた表示が行われるように、前記表示装置における表示制御を行う表示制御ステップと、を含むことを特徴とする。 In order to solve the above problems, the display control method according to one aspect of the present invention is a display control method executed by a display control device that controls the display device, and is a terminal associated with the display control device. An acquisition step for acquiring information indicating a gesture operation performed on the touch panel of the device, a conversion step for deriving a predetermined operation from the information acquired in the acquisition step, and the display control according to the predetermined operation. It is characterized by including a device control step for controlling the device and a display control step for performing display control in the display device so that display according to the control in the device control step is performed.

本発明の一態様によれば、表示装置の制御を行う表示制御装置を端末装置で操作する場合における操作性を向上させることができる。 According to one aspect of the present invention, it is possible to improve the operability when the display control device that controls the display device is operated by the terminal device.

本発明の全体の構成に係る表示システムの機能ブロック図である。It is a functional block diagram of the display system which concerns on the whole structure of this invention. 本発明の全体の構成に係る概念図である。It is a conceptual diagram which concerns on the whole structure of this invention. 本発明の実施形態1に係る構成の概念図である。It is a conceptual diagram of the structure which concerns on Embodiment 1 of this invention. 本発明の実施形態1に係るフローチャートである。It is a flowchart which concerns on Embodiment 1 of this invention. 本発明の実施形態1に係るシーケンス図である。It is a sequence diagram which concerns on Embodiment 1 of this invention. 本発明の実施形態1の変形例1に係る概念図である。It is a conceptual diagram which concerns on the modification 1 of Embodiment 1 of this invention. 本発明の実施形態1の変形例1に係るフローチャートである。It is a flowchart which concerns on modification 1 of Embodiment 1 of this invention. 本発明の実施形態1の変形例2に係る概念図である。It is a conceptual diagram which concerns on the modification 2 of Embodiment 1 of this invention. 本発明の実施形態1の変形例2に係るフローチャートである。It is a flowchart which concerns on modification 2 of Embodiment 1 of this invention.

〔実施形態〕
以下、本発明の一実施形態について、詳細に説明する。図1は、本実施形態に係る表示装置における表示の制御システム(表示システム)の機能ブロック図である。
[Embodiment]
Hereinafter, one embodiment of the present invention will be described in detail. FIG. 1 is a functional block diagram of a display control system (display system) in the display device according to the present embodiment.

図1に示すように、上記表示の制御システムは、表示制御装置1、端末装置2および表示装置3を備えている。図2は、本実施形態に係る構成の概念図である。図2に示すように、表示制御装置1は、端末装置2及び表示装置3と、有線あるいは無線により接続されている。無線による通信は、例えば、Wi―Fi(Wireless Fidelity)(登録商標)などを用いた無線LANにより相互に通信可能に接続されることで実現される。図2では、無線通信を介して、表示制御装置1と端末装置2とが直接の通信を行っていることとしている。ただし、表示制御装置1と端末装置2とはBluetooth(登録商標)等によって接続される構成であってもよいし、既存のリモートコントローラのように表示制御装置1に対して端末装置2からのみ信号が送出可能な構成であってもよい。また図2では、有線通信を介して、表示制御装置1と表示装置3とで直接の通信を行っていることとしている。図3は、本実施形態に係る構成の概念図である。図3は、ユーザが端末装置2において、タッチ操作を行ったあとにスライド操作を行うと、表示装置3の画面上において表示される動画像が、オブジェクト35aに示す再生位置から早送りされて、オブジェクト35bに示す他の再生位置から再生される様子を示している。図3に示すように、ユーザが端末装置2のタッチパネルに対して行う操作(後述するジェスチャ操作)に応じた操作は、表示制御装置1を介して、表示装置3に反映される。また、後述する音声操作およびジャイロ操作についても同様である。 As shown in FIG. 1, the display control system includes a display control device 1, a terminal device 2, and a display device 3. FIG. 2 is a conceptual diagram of the configuration according to the present embodiment. As shown in FIG. 2, the display control device 1 is connected to the terminal device 2 and the display device 3 by wire or wirelessly. Wireless communication is realized by, for example, being connected to each other so as to be able to communicate with each other by a wireless LAN using Wi-Fi (Wi-Filess Fidelity) (registered trademark) or the like. In FIG. 2, it is assumed that the display control device 1 and the terminal device 2 are directly communicating with each other via wireless communication. However, the display control device 1 and the terminal device 2 may be connected by Bluetooth (registered trademark) or the like, or a signal is sent to the display control device 1 only from the terminal device 2 like an existing remote controller. May be a configuration that can be sent. Further, in FIG. 2, it is assumed that the display control device 1 and the display device 3 directly communicate with each other via wired communication. FIG. 3 is a conceptual diagram of the configuration according to the present embodiment. In FIG. 3, when the user performs a slide operation after performing a touch operation on the terminal device 2, the moving image displayed on the screen of the display device 3 is fast-forwarded from the playback position shown in the object 35a, and the object is displayed. It shows how to reproduce from another reproduction position shown in 35b. As shown in FIG. 3, the operation corresponding to the operation performed by the user on the touch panel of the terminal device 2 (gesture operation described later) is reflected in the display device 3 via the display control device 1. The same applies to the voice operation and the gyro operation described later.

(表示制御装置1)
表示制御装置1は、表示装置3の制御を行う表示制御装置であって、記憶部10と、通信部11と、取得部(第1取得部)13と、変換部15と、判定部17と、機器制御部18と、表示制御部19と、を備える。また、表示制御装置1は、端末装置2から送信される操作情報等により、表示装置3に表示させる動画像を決定し、表示装置3に当該動画像を示す情報を送信する装置である。操作情報とは、ジェスチャ操作情報と、音声操作情報と、ジャイロ操作情報と、を含んでいる。また、これらの情報が示す各操作については後述する。また、表示制御装置1は、動画像を示す情報を内部に保持し、あるいは外部から受信し、表示装置3において表示させる機能を持つ装置であって、例えば動画レコーダ等として実現されてもよい。
(Display control device 1)
The display control device 1 is a display control device that controls the display device 3, and includes a storage unit 10, a communication unit 11, an acquisition unit (first acquisition unit) 13, a conversion unit 15, and a determination unit 17. A device control unit 18 and a display control unit 19 are provided. Further, the display control device 1 is a device that determines a moving image to be displayed on the display device 3 based on operation information or the like transmitted from the terminal device 2 and transmits information indicating the moving image to the display device 3. The operation information includes gesture operation information, voice operation information, and gyro operation information. In addition, each operation indicated by this information will be described later. Further, the display control device 1 is a device having a function of holding information indicating a moving image inside or receiving it from the outside and displaying it on the display device 3, and may be realized as, for example, a moving image recorder or the like.

記憶部10は、端末装置2から送信される操作情報に対応する情報テーブルを格納する。記憶部10は、上記対応する情報テーブルとして、ジェスチャ操作情報テーブル101と、音声操作情報テーブル103と、ジャイロ操作情報テーブル105と、を格納している。また図1には図示しないが、記憶部10は、表示装置3において表示するための動画像を示す情報を格納している。ただし、表示制御装置1は、リアルタイムに放送される番組の動画像の表示を制御するものであってもよい。また、動画像を示す情報は、必ずしも表示制御装置1を介して表示装置3に入力される構成に限定されない。 The storage unit 10 stores an information table corresponding to the operation information transmitted from the terminal device 2. The storage unit 10 stores the gesture operation information table 101, the voice operation information table 103, and the gyro operation information table 105 as the corresponding information tables. Although not shown in FIG. 1, the storage unit 10 stores information indicating a moving image to be displayed on the display device 3. However, the display control device 1 may control the display of a moving image of a program broadcast in real time. Further, the information indicating the moving image is not necessarily limited to the configuration input to the display device 3 via the display control device 1.

通信部11は、端末装置2からの操作情報を受信し、取得部13へと出力する。 The communication unit 11 receives the operation information from the terminal device 2 and outputs it to the acquisition unit 13.

取得部13は、通信部11から入力される操作情報を取得し、取得した情報を変換部15へと出力する。上述したように、取得部13が取得する操作情報とは、例えば端末装置2のタッチパネルに対してなされたジェスチャ操作を示す情報である。 The acquisition unit 13 acquires the operation information input from the communication unit 11 and outputs the acquired information to the conversion unit 15. As described above, the operation information acquired by the acquisition unit 13 is, for example, information indicating a gesture operation performed on the touch panel of the terminal device 2.

変換部15は、記憶部10に格納された情報を参照して、取得部13が取得した情報から、対応する所定の操作を導出する。また、変換部15は、表示装置3における表示の状態を示す情報を参照してもよい。ここで、記憶部10に格納された情報とは、操作情報に対応する情報テーブルである。また、対応する所定の操作とは、表示制御装置1の動作をコントロールするための操作であって、例えば、動画像を表示或いは再生する操作、動画像の再生を通常よりも速くする操作、動画像の再生を通常よりも遅くする操作、動画像の再生を一時停止する操作、動画像の再生を停止する操作、動画像の再生時刻を変更する操作、表示装置3の画面表示をON/OFFする操作、及び、チャンネルを変更する操作等を含む。また、対応する所定の操作には、表示制御装置1自体の各種設定変更を行う操作、動画像の編集操作、或いは表示装置3から出力される音量変更の操作等であって、動画像の表示以外に関する操作全般も含まれる。 The conversion unit 15 refers to the information stored in the storage unit 10 and derives a corresponding predetermined operation from the information acquired by the acquisition unit 13. Further, the conversion unit 15 may refer to the information indicating the display state in the display device 3. Here, the information stored in the storage unit 10 is an information table corresponding to the operation information. Further, the corresponding predetermined operation is an operation for controlling the operation of the display control device 1, for example, an operation of displaying or reproducing a moving image, an operation of making the reproduction of the moving image faster than usual, and a moving image. An operation to slow down the image reproduction, an operation to pause the reproduction of the moving image, an operation to stop the reproduction of the moving image, an operation to change the reproduction time of the moving image, and ON / OFF of the screen display of the display device 3. Includes operations to be performed, operations to change channels, and the like. Further, the corresponding predetermined operation includes an operation of changing various settings of the display control device 1 itself, an operation of editing a moving image, an operation of changing the volume output from the display device 3, and the like, and displaying the moving image. General operations related to other than are also included.

判定部17は、変換部15が導出した操作が、表示装置3における表示の状態において許容される操作であるか否かを判定する。ここで、現在の動画像の表示制御の状態において許容されない操作とは、例えば既に行われている処理を指示する操作であって、動画が停止中である場合において動画の停止を更に指示する操作や、取得部13が取得した操作情報に対応する操作が、記憶部10に格納されていない操作等である。また、判定部17は、判定した結果を表示制御部19へと出力する。 The determination unit 17 determines whether or not the operation derived by the conversion unit 15 is an operation permitted in the display state of the display device 3. Here, the operation that is not allowed in the current state of moving image display control is, for example, an operation for instructing a process that has already been performed, and an operation for further instructing the stop of the moving image when the moving image is stopped. Alternatively, the operation corresponding to the operation information acquired by the acquisition unit 13 is an operation that is not stored in the storage unit 10. Further, the determination unit 17 outputs the determination result to the display control unit 19.

機器制御部18は、上記所定の操作に応じて、表示制御装置1を制御する。例えば機器制御部18は、所定の操作が動画像の再生を一時停止する操作を示している場合、再生中の動画像を一時停止させる制御を行う。 The device control unit 18 controls the display control device 1 in response to the predetermined operation. For example, when a predetermined operation indicates an operation of pausing the reproduction of a moving image, the device control unit 18 controls to pause the reproduction of the moving image being reproduced.

表示制御部19は、機器制御部18による制御に応じた表示が行われるように、表示装置3における表示処理に係る制御を行う。 The display control unit 19 controls the display process in the display device 3 so that the display is performed according to the control by the device control unit 18.

なお、変換部15は、取得部13が取得した情報であって、ある任意の情報に対して、表示装置3における表示の状態に応じて異なる所定の操作を導出し得る。これは、ユーザが端末装置2に同じ操作を行ったとしても、例えば表示制御装置1が表示装置3において動画を表示しているのか、メニュー画面を描画しているのか等の表示制御の状態の違いによって、機器制御部18が異なる制御を行う場合があることを意味している。また、別の側面から言えば、変換部15は、取得部13が取得する情報と、表示装置3における表示の状態との双方に応じた所定の操作を導出し得る、と言える。 The conversion unit 15 can derive a predetermined operation different from the information acquired by the acquisition unit 13 depending on the display state on the display device 3 for a certain arbitrary information. This is a state of display control such as whether the display control device 1 is displaying a moving image on the display device 3 or drawing a menu screen even if the user performs the same operation on the terminal device 2. This means that the device control unit 18 may perform different controls depending on the difference. From another aspect, it can be said that the conversion unit 15 can derive a predetermined operation according to both the information acquired by the acquisition unit 13 and the display state on the display device 3.

(端末装置2)
端末装置2は、ユーザが入力する操作情報を取得し、表示制御装置1に送信する装置である。図2と図3の概念図に示すように、端末装置2は、人の手により携帯できるスマートフォンやタブレット等の端末であり、また端末装置2は、ジェスチャ操作、音声操作およびジャイロ操作が入力可能な端末である。なお、別の態様として、端末装置2は、リモートコントローラとして表示制御装置1に付随する装置であってもよい。端末装置2は、入力部21と、取得部(第2取得部)23と、通信部25と、を備える。
(Terminal device 2)
The terminal device 2 is a device that acquires operation information input by the user and transmits it to the display control device 1. As shown in the conceptual diagrams of FIGS. 2 and 3, the terminal device 2 is a terminal such as a smartphone or tablet that can be carried by a human hand, and the terminal device 2 can input gesture operation, voice operation, and gyro operation. Terminal. As another aspect, the terminal device 2 may be a device attached to the display control device 1 as a remote controller. The terminal device 2 includes an input unit 21, an acquisition unit (second acquisition unit) 23, and a communication unit 25.

入力部21は、ジェスチャ操作情報取得部(タッチパネル)211と、音声操作情報取得部213と、ジャイロ操作情報取得部215と、を備える。ジェスチャ操作情報取得部211は、ユーザが端末装置2に対して行うジェスチャ操作を取得するタッチパネルである。当該タッチパネルは、表示ディスプレイとしての機能を有していてもよい。また、ジェスチャ操作とは、端末装置2の画面に対する接触を伴う操作であって、例えばタッチ操作、スライド操作、又は長押し操作等である。また、スライド操作の途中で、画面に対する指等の接触を1又は複数回方向転換する操作であって、端末装置2の画面に対して例えばL字状等の接触を伴う操作についてもジェスチャ操作に含まれる。音声操作情報取得部213は、ユーザが端末装置2に対して行う音声操作を取得する部材である。音声操作とは、ユーザが端末装置2に対して音声により入力する操作である。ジャイロ操作情報取得部215は、ユーザが端末装置2自体を動かすことによるジャイロ操作を取得する部材である。ジャイロ操作とは、ユーザが端末装置2全体に物理的な動きを与え、その動きを加速度センサが入力信号として捉える操作である。ジャイロ操作の一例として、端末装置2を回転させる操作がある。この一例は、実施形態1のジャイロ操作としての例であり、本実施例を限定するものではない。 The input unit 21 includes a gesture operation information acquisition unit (touch panel) 211, a voice operation information acquisition unit 213, and a gyro operation information acquisition unit 215. The gesture operation information acquisition unit 211 is a touch panel for acquiring a gesture operation performed by the user on the terminal device 2. The touch panel may have a function as a display display. The gesture operation is an operation that involves contact with the screen of the terminal device 2, and is, for example, a touch operation, a slide operation, a long press operation, or the like. Further, in the middle of the slide operation, the operation of changing the direction of the contact of the finger or the like with the screen one or more times, and the operation involving the contact of the terminal device 2 with the screen of, for example, an L-shape is also a gesture operation. included. The voice operation information acquisition unit 213 is a member that acquires a voice operation performed by the user on the terminal device 2. The voice operation is an operation in which the user inputs voice to the terminal device 2. The gyro operation information acquisition unit 215 is a member that acquires a gyro operation by the user moving the terminal device 2 itself. The gyro operation is an operation in which the user gives a physical movement to the entire terminal device 2 and the acceleration sensor captures the movement as an input signal. As an example of the gyro operation, there is an operation of rotating the terminal device 2. This example is an example as a gyro operation of the first embodiment, and is not limited to this embodiment.

取得部23は、入力部21に入力された各操作情報を取得して通信部25に出力する。通信部25は、取得部23が取得した情報を、表示制御装置1に対して送信する。 The acquisition unit 23 acquires each operation information input to the input unit 21 and outputs it to the communication unit 25. The communication unit 25 transmits the information acquired by the acquisition unit 23 to the display control device 1.

なお、端末装置2は、自装置上において所定のアプリが起動している場合に、表示制御装置1を操作する装置として機能する構成であってもよい。また、タッチパネル(ジェスチャ操作情報取得部)211は、入力部21がジェスチャ操作による入力を受け付ける場合、及び、取得部23がジェスチャ操作を示す情報を取得する場合に、ジェスチャ操作を受け付けるためのGUI(Graphical User Interface)を表示することを要しない。また、音声操作およびジャイロ操作に関しても同様に、タッチパネル上にGUIが表示されることを要しない。 The terminal device 2 may be configured to function as a device for operating the display control device 1 when a predetermined application is running on the own device. Further, the touch panel (gesture operation information acquisition unit) 211 is a GUI (gesture operation information acquisition unit) for receiving a gesture operation when the input unit 21 accepts the input by the gesture operation and when the acquisition unit 23 acquires the information indicating the gesture operation. It is not necessary to display the Graphical User Interface). Similarly, it is not necessary to display the GUI on the touch panel for the voice operation and the gyro operation.

(表示装置3)
表示装置3は、表示制御装置1から送信される動画像を含む情報を表示する装置である。表示装置3は、単なるディスプレイであってもよいし、テレビジョン受像機として機能する装置であってもよい。表示装置3は、入力部31と、表示部33と、を備える。入力部31は、表示制御部19が送信した情報を受信し、表示部33へ出力する。
(Display device 3)
The display device 3 is a device that displays information including a moving image transmitted from the display control device 1. The display device 3 may be a simple display or a device that functions as a television receiver. The display device 3 includes an input unit 31 and a display unit 33. The input unit 31 receives the information transmitted by the display control unit 19 and outputs the information to the display unit 33.

表示部33は、入力される情報を基に、動画像を含む情報を表示する。 The display unit 33 displays information including a moving image based on the input information.

なお、図1に示す構成とは別の態様として、表示制御装置1が表示装置3を備える構成でもよいし、表示装置3が表示制御装置1を備える構成であってもよい。 In addition to the configuration shown in FIG. 1, the display control device 1 may be provided with the display device 3, or the display device 3 may be provided with the display control device 1.

(処理の流れ)
図4は、本実施形態に係る処理を示すフローチャートである。図4は、表示制御装置1の内部で起こるステップを表したものであり、フローチャートの開始は、端末装置2の通信部25が表示制御装置1の通信部11に操作情報を送信した後である。
(Processing flow)
FIG. 4 is a flowchart showing the processing according to the present embodiment. FIG. 4 shows the steps that occur inside the display control device 1, and the flowchart starts after the communication unit 25 of the terminal device 2 transmits the operation information to the communication unit 11 of the display control device 1. ..

<ステップS401>
ステップS401において、表示制御装置1の取得部13は、端末装置2のジェスチャ操作情報取得部(タッチパネル)211に対してなされたジェスチャ操作を示すジェスチャ操作情報を、機器制御部18による表示制御装置1の制御に反映させるための情報として、通信部11を介して取得する。
<Step S401>
In step S401, the acquisition unit 13 of the display control device 1 displays the gesture operation information indicating the gesture operation performed on the gesture operation information acquisition unit (touch panel) 211 of the terminal device 2 by the device control unit 18. As information to be reflected in the control of the above, it is acquired via the communication unit 11.

<ステップS402>
ステップS402において、変換部15は、記憶部10のジェスチャ操作情報テーブルを参照することにより、ジェスチャ操作情報に対応する所定の操作であって、表示制御装置1の制御に反映するための所定の操作を導出する。また、変換部15は、表示装置3における表示の状態を示す情報も参照して所定の操作を導出してもよい。
<Step S402>
In step S402, the conversion unit 15 is a predetermined operation corresponding to the gesture operation information by referring to the gesture operation information table of the storage unit 10, and is a predetermined operation to be reflected in the control of the display control device 1. Is derived. Further, the conversion unit 15 may derive a predetermined operation by referring to the information indicating the display state in the display device 3.

<ステップS403>
ステップS403において、判定部17は、変換部15により導出される所定の操作が、表示装置3における表示の状態において許容される操作であるか否かを判定する。許容される操作である場合(ステップS403のYES)は、ステップS404へと進む。許容される操作でない場合(ステップS403のNO)は、ステップS405へと進む。
<Step S403>
In step S403, the determination unit 17 determines whether or not the predetermined operation derived by the conversion unit 15 is an operation permitted in the display state of the display device 3. If the operation is permitted (YES in step S403), the process proceeds to step S404. If the operation is not permitted (NO in step S403), the process proceeds to step S405.

<ステップS404>
ステップS404において、機器制御部18は、変換部15が導出した所定の操作を、表示制御装置1の制御に反映する。なお、機器制御部18は、図3のオブジェクト35a及び35bに例示するように、所定の操作が表示制御装置1の制御に反映されたことを示す情報を、GUI等によって前記表示に含ませるものとしてもよい。また、後述する変形例1及び2においても同様である。
<Step S404>
In step S404, the device control unit 18 reflects the predetermined operation derived by the conversion unit 15 in the control of the display control device 1. As illustrated in the objects 35a and 35b of FIG. 3, the device control unit 18 includes information indicating that the predetermined operation is reflected in the control of the display control device 1 in the display by GUI or the like. May be. The same applies to the modified examples 1 and 2 described later.

<ステップS405>
ステップS405において、表示制御装置1は、操作受付を待機する処理であって、操作情報の受信を待機する処理を継続し、図4のフローチャートに示す処理が終了する。
<Step S405>
In step S405, the display control device 1 is a process of waiting for the operation reception, continues the process of waiting for the reception of the operation information, and ends the process shown in the flowchart of FIG.

<ステップS406>
ステップS406において、表示制御部19は、機器制御部18による制御に応じた表示が行われるように、表示装置3の入力部31へ、動画像を含む情報を送信する。また、表示装置3から出力される音量変更を指示する操作のように、動画像の表示以外に関する操作を示す情報についても、表示制御部19を介して表示装置3に送信される。なお、動画像の表示以外に関する操作を示す情報は、機器制御部18から、表示装置3に直接送信されるものであってもよい。後述する変形例1及び2においても同様である。
<Step S406>
In step S406, the display control unit 19 transmits information including a moving image to the input unit 31 of the display device 3 so that the display is performed according to the control by the device control unit 18. Further, information indicating an operation other than the display of the moving image, such as an operation for instructing the volume change output from the display device 3, is also transmitted to the display device 3 via the display control unit 19. Information indicating an operation other than the display of the moving image may be directly transmitted from the device control unit 18 to the display device 3. The same applies to the modified examples 1 and 2 described later.

(シーケンス)
図5は、本実施形態に係る処理を示すシーケンス図である。図5は、端末装置2においてジェスチャ操作を開始した後の、端末装置2および表示制御装置1の内部で起こる動作を表している。図5に示すように、端末装置2にユーザがジェスチャ操作を開始すると、端末装置2は、その旨を示す情報を表示制御装置1へと送信する。表示制御装置1の変換部15は、通信部11及び取得部13を介してジェスチャ操作を取得し、記憶部10を参照して表示制御処理に反映する操作を導出する。判定部17は、当該操作が現時点の表示装置3における表示の状態において許容される操作を示すものか否かを判定し、許容される場合は、当該操作を機器制御部18に出力する。機器制御部18は、当該操作を基に表示装置3上で表示される動画像等を操作する。
(sequence)
FIG. 5 is a sequence diagram showing the processing according to the present embodiment. FIG. 5 shows an operation that occurs inside the terminal device 2 and the display control device 1 after the gesture operation is started in the terminal device 2. As shown in FIG. 5, when the user starts a gesture operation on the terminal device 2, the terminal device 2 transmits information indicating that fact to the display control device 1. The conversion unit 15 of the display control device 1 acquires the gesture operation via the communication unit 11 and the acquisition unit 13, and derives the operation to be reflected in the display control process with reference to the storage unit 10. The determination unit 17 determines whether or not the operation indicates an operation permitted in the current display state of the display device 3, and if so, outputs the operation to the device control unit 18. The device control unit 18 operates a moving image or the like displayed on the display device 3 based on the operation.

以上、表示装置3の制御を行う表示制御装置1によって実行される表示制御方法であって、表示制御装置1と関連付けられた端末装置2のタッチパネルに対してなされたジェスチャ操作を示す情報を取得する取得ステップと、前記取得ステップにおいて取得した情報から、所定の操作を導出する変換ステップと、前記所定の操作に応じて、表示制御装置1を制御する機器制御ステップと、前記機器制御ステップにおける制御に応じた表示が行われるように、表示装置3における表示制御を行う表示制御ステップと、を含む方法について上述した。 As described above, the display control method executed by the display control device 1 that controls the display device 3 acquires information indicating the gesture operation performed on the touch panel of the terminal device 2 associated with the display control device 1. The acquisition step, the conversion step of deriving a predetermined operation from the information acquired in the acquisition step, the device control step of controlling the display control device 1 in response to the predetermined operation, and the control in the device control step. The method including the display control step of performing the display control in the display device 3 so that the corresponding display is performed is described above.

(効果)
本実施形態の構成によれば、端末装置上においてなされたジェスチャ操作が示す情報を動画像表示に反映させる表示制御装置1を実現出来る。これにより、ユーザが端末装置2の画面を見ずとも表示制御装置1を操作することが可能となり、操作性や利便性を向上させることができる。
(effect)
According to the configuration of the present embodiment, it is possible to realize the display control device 1 that reflects the information indicated by the gesture operation performed on the terminal device in the moving image display. As a result, the user can operate the display control device 1 without looking at the screen of the terminal device 2, and the operability and convenience can be improved.

〔変形例1〕
上記実施形態の変形例1について、以下に説明する。なお、説明の便宜上、上記実施形態にて説明した部材と同じ機能を有する部材については、同じ符号を付記し、その説明を繰り返さない。
[Modification 1]
A modification 1 of the above embodiment will be described below. For convenience of explanation, the same reference numerals will be added to the members having the same functions as the members described in the above embodiment, and the description will not be repeated.

図6は、本変形例1に係る概念図である。図6が示すように、ユーザが端末装置2に音声操作情報を発すると、端末装置2から音声操作情報が、表示制御装置1に送信されて、表示制御装置1の制御に反映される。 FIG. 6 is a conceptual diagram according to the first modification. As shown in FIG. 6, when the user issues voice operation information to the terminal device 2, the voice operation information is transmitted from the terminal device 2 to the display control device 1 and reflected in the control of the display control device 1.

(処理の流れ)
図7は、本変形例1に係るフローチャートである。図7は、表示制御装置1の内部において起こるステップを表したものであり、フローチャートの開始は、端末装置2の通信部25が表示制御装置1の通信部11に操作情報を送信した後である。
(Processing flow)
FIG. 7 is a flowchart according to the first modification. FIG. 7 shows the steps that occur inside the display control device 1, and the flowchart starts after the communication unit 25 of the terminal device 2 transmits the operation information to the communication unit 11 of the display control device 1. ..

<ステップS701>
ステップS701において、表示制御装置1の取得部13は、端末装置2に対してなされた音声操作を示す音声操作情報を、機器制御部18による表示制御装置1の制御に反映させるための情報として、通信部11を介して取得する。
<Step S701>
In step S701, the acquisition unit 13 of the display control device 1 uses the voice operation information indicating the voice operation performed on the terminal device 2 as information for reflecting the voice operation information indicating the voice operation performed on the terminal device 2 in the control of the display control device 1 by the device control unit 18. Obtained via the communication unit 11.

<ステップS702>
ステップS702において、変換部15は、記憶部10の音声処理情報テーブルを参照することにより、音声操作情報に対応する所定の操作であって、表示制御装置1の制御に反映するための所定の操作を導出する。また、変換部15は、表示装置3における表示の状態を示す情報も参照して所定の操作を導出してもよい。
<Step S702>
In step S702, the conversion unit 15 is a predetermined operation corresponding to the voice operation information by referring to the voice processing information table of the storage unit 10, and is a predetermined operation to be reflected in the control of the display control device 1. Is derived. Further, the conversion unit 15 may derive a predetermined operation by referring to the information indicating the display state in the display device 3.

<ステップS703>
ステップS703において、判定部17は、変換部15により導出される所定の操作が、表示装置3における表示の状態において許容される操作であるか否かを判定する。許容される操作である場合(ステップS703のYES)は、ステップS704へと進む。許容される操作でない場合(ステップS703のNO)は、ステップS705へと進む。
<Step S703>
In step S703, the determination unit 17 determines whether or not the predetermined operation derived by the conversion unit 15 is an operation permitted in the display state of the display device 3. If the operation is permitted (YES in step S703), the process proceeds to step S704. If the operation is not permitted (NO in step S703), the process proceeds to step S705.

<ステップS704>
ステップS704において、機器制御部18は、変換部15が導出した所定の操作を、表示制御装置1の制御に反映する。
<Step S704>
In step S704, the device control unit 18 reflects the predetermined operation derived by the conversion unit 15 in the control of the display control device 1.

<ステップS705>
ステップS705において、表示制御部19は、操作受付を待機する処理であって、操作情報の受信を待機する処理を継続し、図7のフローチャートに示す処理が終了する。
<Step S705>
In step S705, the display control unit 19 continues the process of waiting for the reception of the operation, and the process of waiting for the reception of the operation information, and the process shown in the flowchart of FIG. 7 ends.

<ステップS706>
ステップS706において、表示制御部19は、機器制御部18による制御に応じた表示が行われるように、表示装置3の入力部31へ、動画像を含む情報を送信する。また、表示装置3から出力される音量変更を指示する操作のように、動画像の表示以外に関する操作を示す情報についても、表示制御部19を介して表示装置3に送信される。
<Step S706>
In step S706, the display control unit 19 transmits information including a moving image to the input unit 31 of the display device 3 so that the display is performed according to the control by the device control unit 18. Further, information indicating an operation other than the display of the moving image, such as an operation for instructing the volume change output from the display device 3, is also transmitted to the display device 3 via the display control unit 19.

(効果)
変形例1によれば、端末装置2を介した、音声による操作が可能な表示制御装置1を実現できる。
(effect)
According to the first modification, it is possible to realize the display control device 1 that can be operated by voice via the terminal device 2.

〔変形例2〕
上記実施形態の変形例2について、以下に説明する。なお、説明の便宜上、上記実施形態にて説明した部材と同じ機能を有する部材については、同じ符号を付記し、その説明を繰り返さない。
[Modification 2]
The second modification of the above embodiment will be described below. For convenience of explanation, the same reference numerals will be added to the members having the same functions as the members described in the above embodiment, and the description will not be repeated.

図8は、本変形例2に係る概念図である。図8に示すように、ユーザが端末装置2に付属の加速度センサが反応するように端末装置2を操作する(ジャイロ操作)と、端末装置2からジャイロ操作情報が、表示制御装置1に送信されて、表示制御装置1の制御に反映される。 FIG. 8 is a conceptual diagram according to the second modification. As shown in FIG. 8, when the user operates the terminal device 2 so that the acceleration sensor attached to the terminal device 2 reacts (gyro operation), the gyro operation information is transmitted from the terminal device 2 to the display control device 1. This is reflected in the control of the display control device 1.

(処理の流れ)
図9は、本変形例2に係るフローチャートである。図9は、表示制御装置1の内部において起こるステップを表したものであり、フローチャートの開始は、端末装置2の通信部25が表示制御装置1の通信部11に操作情報を送信した後である。
(Processing flow)
FIG. 9 is a flowchart according to the second modification. FIG. 9 shows the steps that occur inside the display control device 1, and the flowchart starts after the communication unit 25 of the terminal device 2 transmits the operation information to the communication unit 11 of the display control device 1. ..

<ステップS901>
ステップS901において、表示制御装置1の取得部13は、端末装置2自体を動かすことによるジャイロ操作を示すジャイロ操作情報を、機器制御部18による表示制御装置1の制御に反映させるための情報として、通信部11を介して取得する。
<Step S901>
In step S901, the acquisition unit 13 of the display control device 1 serves as information for reflecting the gyro operation information indicating the gyro operation by moving the terminal device 2 itself in the control of the display control device 1 by the device control unit 18. Obtained via the communication unit 11.

<ステップS902>
ステップS902において、変換部15は、記憶部10のジャイロ操作情報テーブルを参照することにより、ジャイロ操作情報に対応する所定の操作であって、表示制御装置1の制御に反映するための所定の操作を導出する。また、変換部15は、表示装置3における表示の状態を示す情報も参照して所定の操作を導出してもよい。
<Step S902>
In step S902, the conversion unit 15 is a predetermined operation corresponding to the gyro operation information by referring to the gyro operation information table of the storage unit 10, and is a predetermined operation to be reflected in the control of the display control device 1. Is derived. Further, the conversion unit 15 may derive a predetermined operation by referring to the information indicating the display state in the display device 3.

<ステップS903>
ステップS903において、判定部17は、変換部15により導出される所定の操作が、表示装置3における表示の状態において許容される操作であるか否かを判定する。許容される操作である場合(ステップS903のYES)は、ステップS904へと進む。許容される操作でない場合は(ステップS903のNO)、ステップS905へと進む。
<Step S903>
In step S903, the determination unit 17 determines whether or not the predetermined operation derived by the conversion unit 15 is an operation permitted in the display state of the display device 3. If the operation is permitted (YES in step S903), the process proceeds to step S904. If the operation is not permitted (NO in step S903), the process proceeds to step S905.

<ステップS904>
ステップS904において、機器制御部18は、変換部15が導出した所定の操作を、表示制御装置1の制御に反映する。
<Step S904>
In step S904, the device control unit 18 reflects the predetermined operation derived by the conversion unit 15 in the control of the display control device 1.

<ステップS905>
ステップS905において、表示制御部19は、操作受付を待機する処理であって、操作情報の受信を待機する処理を継続し、図9のフローチャートに示す処理が終了する。
<Step S905>
In step S905, the display control unit 19 continues the process of waiting for the reception of the operation, and the process of waiting for the reception of the operation information, and the process shown in the flowchart of FIG. 9 ends.

<ステップS906>
ステップS906において、表示制御部19は、機器制御部18による制御に応じた表示が行われるように、表示装置3の入力部31へ、動画像を含む情報を送信する。また、表示装置3から出力される音量変更を指示する操作のように、動画像の表示以外に関する操作を示す情報についても、表示制御部19を介して表示装置3に送信される。
<Step S906>
In step S906, the display control unit 19 transmits information including a moving image to the input unit 31 of the display device 3 so that the display is performed according to the control by the device control unit 18. Further, information indicating an operation other than the display of the moving image, such as an operation for instructing the volume change output from the display device 3, is also transmitted to the display device 3 via the display control unit 19.

(効果)
変形例2によれば、端末装置2を介した、ジャイロ操作による操作が可能な表示制御装置1を実現できる。
(effect)
According to the second modification, it is possible to realize the display control device 1 that can be operated by the gyro operation via the terminal device 2.

〔実施形態および変形例に係る付記事項〕
端末装置2の入力部21が、ジェスチャ操作、音声操作、或いはジャイロ操作を受け付けるための操作を、ユーザが事前に行う必要がある構成であってもよい。例えば、入力部21は、端末装置2が上下に振られた場合に、続いて数秒間ジャイロ操作を受け付けるような構成であってもよい。これにより誤操作を抑制することができる。
[Additional Notes on Embodiments and Modifications]
The input unit 21 of the terminal device 2 may be configured such that the user needs to perform an operation for accepting a gesture operation, a voice operation, or a gyro operation in advance. For example, the input unit 21 may be configured to accept a gyro operation for several seconds after the terminal device 2 is shaken up and down. As a result, erroneous operation can be suppressed.

また、上記実施形態、並びに変形例1及び2の構成は、相互に組み合わせて用いることができる。即ち、端末装置2に対するジェスチャ操作、音声操作およびジャイロ操作のうち、複数種類の操作によって、表示制御装置1を操作可能な構成であってもよい。上記の構成においては、変換部15が、取得した操作情報の種類に応じた情報テーブルを参照して表示制御装置1の制御に反映すべき所定の操作を導出する。 Further, the above-described embodiment and the configurations of the first and second modifications can be used in combination with each other. That is, the display control device 1 may be operated by a plurality of types of operations among the gesture operation, the voice operation, and the gyro operation for the terminal device 2. In the above configuration, the conversion unit 15 refers to an information table according to the type of acquired operation information and derives a predetermined operation to be reflected in the control of the display control device 1.

また、表示制御装置1がジェスチャ操作による操作を受け付けない構成においては、記憶部10がジェスチャ操作情報テーブル101を必ずしも格納しておらずともよく、且つ入力部21がジェスチャ操作情報取得部211として必ずしも機能せずともよい。また、表示制御装置1が音声操作による操作を受け付けない構成においては、記憶部10が音声操作情報テーブル103を必ずしも格納しておらずともよく、且つ入力部21が音声操作情報取得部213として必ずしも機能せずともよい。また、表示制御装置1がジャイロ操作を受け付けない構成においては、記憶部10がジャイロ操作情報テーブル105を必ずしも格納しておらずともよく、且つ入力部21がジャイロ操作情報取得部215として必ずしも機能せずともよい。 Further, in the configuration in which the display control device 1 does not accept the operation by the gesture operation, the storage unit 10 does not necessarily have to store the gesture operation information table 101, and the input unit 21 is not necessarily the gesture operation information acquisition unit 211. It doesn't have to work. Further, in the configuration in which the display control device 1 does not accept the operation by voice operation, the storage unit 10 does not necessarily have to store the voice operation information table 103, and the input unit 21 is not necessarily the voice operation information acquisition unit 213. It doesn't have to work. Further, in the configuration in which the display control device 1 does not accept the gyro operation, the storage unit 10 does not necessarily have to store the gyro operation information table 105, and the input unit 21 does not necessarily function as the gyro operation information acquisition unit 215. It doesn't have to be.

〔ソフトウェアによる実現例〕
表示制御装置1の制御ブロック(特に取得部13、変換部15、判定部17、機器制御部18および表示制御部19)は、集積回路(ICチップ)等に形成された論理回路(ハードウェア)によって実現してもよいし、ソフトウェアによって実現してもよい。
[Example of realization by software]
The control block of the display control device 1 (particularly, the acquisition unit 13, the conversion unit 15, the determination unit 17, the device control unit 18, and the display control unit 19) is a logic circuit (hardware) formed in an integrated circuit (IC chip) or the like. It may be realized by software, or it may be realized by software.

後者の場合、表示制御装置1は、各機能を実現するソフトウェアであるプログラムの命令を実行するコンピュータを備えている。このコンピュータは、例えば少なくとも1つのプロセッサ(制御装置)を備えていると共に、上記プログラムを記憶したコンピュータ読み取り可能な少なくとも1つの記録媒体を備えている。そして、上記コンピュータにおいて、上記プロセッサが上記プログラムを上記記録媒体から読み取って実行することにより、本発明の目的が達成される。上記プロセッサとしては、例えばCPU(Central Processing Unit)を用いることができる。上記記録媒体としては、「一時的でない有形の媒体」、例えば、ROM(Read Only Memory)等の他、テープ、ディスク、カード、半導体メモリ、プログラマブルな論理回路などを用いることができる。また、上記プログラムを展開するRAM(Random Access Memory)などをさらに備えていてもよい。また、上記プログラムは、該プログラムを伝送可能な任意の伝送媒体(通信ネットワークや放送波等)を介して上記コンピュータに供給されてもよい。なお、本発明の一態様は、上記プログラムが電子的な伝送によって具現化された、搬送波に埋め込まれたデータ信号の形態でも実現され得る。 In the latter case, the display control device 1 includes a computer that executes instructions of a program that is software that realizes each function. This computer includes, for example, at least one processor (control device) and at least one computer-readable recording medium that stores the program. Then, in the computer, the processor reads the program from the recording medium and executes it, thereby achieving the object of the present invention. As the processor, for example, a CPU (Central Processing Unit) can be used. As the recording medium, a "non-temporary tangible medium", for example, a ROM (Read Only Memory) or the like, a tape, a disk, a card, a semiconductor memory, a programmable logic circuit, or the like can be used. Further, a RAM (Random Access Memory) for expanding the above program may be further provided. Further, the program may be supplied to the computer via an arbitrary transmission medium (communication network, broadcast wave, etc.) capable of transmitting the program. In addition, one aspect of the present invention can also be realized in the form of a data signal embedded in a carrier wave, in which the above program is embodied by electronic transmission.

〔まとめ〕
本発明の態様1に係る表示制御装置(1)は、表示装置(3)の制御を行う表示制御装置(1)であって、表示制御装置(1)と関連付けられた端末装置(2)のタッチパネルに対してなされたジェスチャ操作を示す情報を取得する取得部(13)と、取得部(13)が取得した情報から、所定の操作を導出する変換部(15)と、前記所定の操作に応じて、表示制御装置(1)を制御する機器制御部(18)と、機器制御部(18)による制御に応じた表示が行われるように、表示装置(3)における表示制御を行う表示制御部(19)と、を備える。
[Summary]
The display control device (1) according to the first aspect of the present invention is a display control device (1) that controls the display device (3), and is a terminal device (2) associated with the display control device (1). An acquisition unit (13) that acquires information indicating a gesture operation performed on the touch panel, a conversion unit (15) that derives a predetermined operation from the information acquired by the acquisition unit (13), and the predetermined operation. Display control that controls the display in the display device (3) so that the display is performed according to the control by the device control unit (18) that controls the display control device (1) and the device control unit (18). A unit (19) is provided.

上記の構成によれば、ジェスチャ操作を示す情報を受け取り、表示装置(3)における表示に反映させる表示制御装置(1)を実現できる。 According to the above configuration, it is possible to realize a display control device (1) that receives information indicating a gesture operation and reflects it on the display on the display device (3).

本発明の態様2に係る表示制御装置(1)は、上記態様1において、機器制御部(18)は、前記所定の操作が表示制御装置(1)の制御に反映されたことを示す情報を、表示装置(3)における表示に含ませてもよい。 In the display control device (1) according to the second aspect of the present invention, in the above aspect 1, the device control unit (18) provides information indicating that the predetermined operation is reflected in the control of the display control device (1). , May be included in the display on the display device (3).

上記の構成によれば、ユーザは自身が行った操作が表示制御装置の制御に反映されたことを容易に確認することができる。 According to the above configuration, the user can easily confirm that the operation performed by the user is reflected in the control of the display control device.

本発明の態様3に係る表示制御装置(1)は、上記態様1または2において、変換部(15)は、取得部(13)が取得する情報と、表示装置(3)における表示の状態との双方に応じた前記所定の操作を導出してもよい。 In the display control device (1) according to the third aspect of the present invention, in the above aspect 1 or 2, the conversion unit (15) has the information acquired by the acquisition unit (13) and the display state in the display device (3). The predetermined operation corresponding to both of the above may be derived.

上記の構成によれば、表示制御装置(1)は、同一の操作であっても、再生画面、メニュー画面などの表示している画面ごとに異なる操作を反映することができる。 According to the above configuration, the display control device (1) can reflect different operations for each displayed screen such as the playback screen and the menu screen even if the operations are the same.

本発明の態様4に係る表示制御装置(1)は、上記態様1から3の何れかにおいて、前記所定の操作が、表示装置(3)における表示の状態において許容される操作であるか否かを判定する判定部を更に備えていてもよい。 In any of the above aspects 1 to 3, the display control device (1) according to the fourth aspect of the present invention is whether or not the predetermined operation is an operation permitted in the display state of the display device (3). It may be further provided with a determination unit for determining.

上記の構成によれば、表示制御装置(1)は、許容される操作であるのかを判定する判定部(17)を備えることができる。 According to the above configuration, the display control device (1) can include a determination unit (17) for determining whether or not the operation is permitted.

本発明の態様5に係る表示制御装置(1)は、上記態様1から4の何れかにおいて、取得部(13)は、端末装置(2)自体を動かすことによる操作を示す情報を、機器制御部(18)が表示制御装置(1)における制御に反映させるための情報として取得してもよい。 In the display control device (1) according to the fifth aspect of the present invention, in any one of the above aspects 1 to 4, the acquisition unit (13) controls information indicating an operation by moving the terminal device (2) itself. The unit (18) may acquire the information to be reflected in the control of the display control device (1).

上記の構成によれば、端末装置(2)自体を動かす操作によって表示を制御可能な表示制御装置(1)を実現できる。 According to the above configuration, it is possible to realize a display control device (1) whose display can be controlled by an operation of moving the terminal device (2) itself.

本発明の態様6に係る表示制御装置(1)は、上記態様1から5の何れかにおいて、取得部(13)は、端末装置(2)に対してなされた音声操作を示す情報を、機器制御部(18)が表示制御装置(1)における制御に反映させるための情報として取得してもよい。 In any of the above aspects 1 to 5, the display control device (1) according to the sixth aspect of the present invention provides information indicating the voice operation performed to the terminal device (2) by the acquisition unit (13). The control unit (18) may acquire the information to be reflected in the control of the display control device (1).

上記の構成によれば、音声操作によって表示を制御可能な表示制御装置(1)を実現できる。 According to the above configuration, it is possible to realize a display control device (1) whose display can be controlled by voice operation.

本発明の態様7に係る表示の制御システムは、表示装置(3)の制御を行う表示制御装置(1)、及び表示制御装置(1)に関連付けられた端末装置(2)を備える、表示装置(3)における表示の制御システムであって、表示制御装置(1)は、端末装置(2)のタッチパネルに対してなされたジェスチャ操作を示す情報を取得する第1取得部(13)と、第1取得部(13)が取得した情報から、所定の操作を導出する変換部(15)と、前記所定の操作に応じて、表示制御装置(1)を制御する機器制御部(18)と、機器制御部(18)による制御に応じた表示が行われるように、表示装置(3)における表示制御を行う表示制御部(19)と、を備え、端末装置(2)は、タッチパネルと、端末装置(2)のタッチパネル(211)に対してなされたジェスチャ操作を示す情報を取得する第2取得部(23)と、第2取得部(23)が取得した情報を、表示制御装置(1)に対して送信する通信部(25)と、を備える。 The display control system according to the seventh aspect of the present invention includes a display control device (1) that controls the display device (3) and a terminal device (2) associated with the display control device (1). In the display control system according to (3), the display control device (1) includes a first acquisition unit (13) and a first acquisition unit (13) for acquiring information indicating a gesture operation performed on the touch panel of the terminal device (2). 1 A conversion unit (15) that derives a predetermined operation from the information acquired by the acquisition unit (13), and a device control unit (18) that controls the display control device (1) in response to the predetermined operation. A display control unit (19) for performing display control in the display device (3) is provided so that the display is performed according to the control by the device control unit (18), and the terminal device (2) includes a touch panel and a terminal. The second acquisition unit (23) that acquires information indicating the gesture operation performed on the touch panel (211) of the device (2) and the information acquired by the second acquisition unit (23) are displayed in the display control device (1). It is provided with a communication unit (25) for transmitting to.

上記の構成によれば、態様1と同様の効果を実現できる。 According to the above configuration, the same effect as that of the first aspect can be realized.

本発明の態様8に係る方法は、表示装置(3)の制御を行う表示制御装置(1)によって実行される表示制御方法であって、表示制御装置(1)と関連付けられた端末装置(2)のタッチパネルに対してなされたジェスチャ操作を示す情報を取得する取得ステップと、前記取得ステップにおいて取得した情報から、所定の操作を導出する変換ステップと、前記所定の操作に応じて、表示制御装置(1)を制御する機器制御ステップと、前記機器制御ステップにおける制御に応じた表示が行われるように、表示装置(3)における表示制御を行う表示制御ステップと、を含む。 The method according to aspect 8 of the present invention is a display control method executed by a display control device (1) that controls the display device (3), and is a terminal device (2) associated with the display control device (1). ), An acquisition step for acquiring information indicating a gesture operation performed on the touch panel, a conversion step for deriving a predetermined operation from the information acquired in the acquisition step, and a display control device according to the predetermined operation. It includes a device control step for controlling (1) and a display control step for performing display control in the display device (3) so that the display according to the control in the device control step is performed.

上記の構成によれば、態様1と同様の効果を実現できる。 According to the above configuration, the same effect as that of the first aspect can be realized.

本発明の各態様に係る表示制御装置(1)は、コンピュータによって実現してもよく、この場合には、コンピュータを表示制御装置(1)が備える各部(ソフトウェア要素)として動作させることにより表示制御装置(1)をコンピュータにて実現させる表示制御装置(1)の制御プログラム、およびそれを記録したコンピュータ読み取り可能な記録媒体も、本発明の範疇に入る。 The display control device (1) according to each aspect of the present invention may be realized by a computer. In this case, the display control is performed by operating the computer as each part (software element) included in the display control device (1). The control program of the display control device (1) that realizes the device (1) by a computer and the computer-readable recording medium on which the device (1) is recorded also fall within the scope of the present invention.

本発明は上述した各実施形態に限定されるものではなく、請求項に示した範囲で種々の変更が可能であり、異なる実施形態にそれぞれ開示された技術的手段を適宜組み合わせて得られる実施形態についても本発明の技術的範囲に含まれる。さらに、各実施形態にそれぞれ開示された技術的手段を組み合わせることにより、新しい技術的特徴を形成することができる。 The present invention is not limited to the above-described embodiments, and various modifications can be made within the scope of the claims, and the embodiments obtained by appropriately combining the technical means disclosed in the different embodiments. Is also included in the technical scope of the present invention. Furthermore, new technical features can be formed by combining the technical means disclosed in each embodiment.

1 表示制御装置
2 端末装置
3 表示装置
10 記憶部
11 通信部
13 取得部(第1取得部)
15 変換部
17 判定部
18 機器制御部
19 表示制御部
21 入力部
23 取得部(第2取得部)
25 通信部
31 入力部
33 表示部
101 ジェスチャ操作情報テーブル
103 音声操作情報テーブル
105 ジャイロ操作情報テーブル
211 ジェスチャ操作情報取得部(タッチパネル)
213 音声操作情報取得部
215 ジャイロ操作情報取得部
1 Display control device 2 Terminal device 3 Display device 10 Storage unit 11 Communication unit 13 Acquisition unit (1st acquisition unit)
15 Conversion unit 17 Judgment unit 18 Equipment control unit 19 Display control unit 21 Input unit 23 Acquisition unit (second acquisition unit)
25 Communication unit 31 Input unit 33 Display unit 101 Gesture operation information table 103 Voice operation information table 105 Gyro operation information table 211 Gesture operation information acquisition unit (touch panel)
213 Voice operation information acquisition unit 215 Gyro operation information acquisition unit

Claims (10)

表示装置の制御を行う表示制御装置であって、
当該表示制御装置と関連付けられた端末装置のタッチパネルに対してなされたジェスチャ操作を示す情報を取得する取得部と、
前記取得部が取得した情報から、所定の操作を導出する変換部と、
前記所定の操作に応じて、当該表示制御装置を制御する機器制御部と、
前記機器制御部による制御に応じた表示が行われるように、前記表示装置における表示制御を行う表示制御部と、
を備えることを特徴とする表示制御装置。
A display control device that controls the display device.
An acquisition unit that acquires information indicating a gesture operation performed on the touch panel of the terminal device associated with the display control device, and an acquisition unit.
A conversion unit that derives a predetermined operation from the information acquired by the acquisition unit, and
A device control unit that controls the display control device in response to the predetermined operation, and
A display control unit that controls the display in the display device so that the display is performed according to the control by the device control unit.
A display control device comprising.
前記機器制御部は、前記所定の操作が当該表示制御装置の制御に反映されたことを示す情報を、前記表示装置における表示に含ませる
ことを特徴とする請求項1に記載の表示制御装置。
The display control device according to claim 1, wherein the device control unit includes information indicating that the predetermined operation is reflected in the control of the display control device in the display on the display device.
前記変換部は、
前記取得部が取得する情報と、前記表示装置における表示の状態との双方に応じた前記所定の操作を導出する
ことを特徴とする請求項1又は2に記載の表示制御装置。
The conversion unit
The display control device according to claim 1 or 2, wherein the predetermined operation is derived according to both the information acquired by the acquisition unit and the display state in the display device.
前記所定の操作が、前記表示装置における表示の状態において許容される操作であるか否かを判定する判定部を更に備える
ことを特徴とする請求項1から3までの何れか1項に記載の表示制御装置。
The invention according to any one of claims 1 to 3, further comprising a determination unit for determining whether or not the predetermined operation is an operation permitted in the display state of the display device. Display control device.
前記取得部は、
前記端末装置自体を動かすことによる操作を示す情報を、前記機器制御部が当該表示制御装置における制御に反映させるための情報として取得する
ことを特徴とする請求項1から4までの何れか1項に記載の表示制御装置。
The acquisition unit
Any one of claims 1 to 4, wherein the device control unit acquires information indicating an operation by moving the terminal device itself as information to be reflected in the control of the display control device. The display control device described in.
前記取得部は、
前記端末装置に対してなされた音声操作を示す情報を、前記機器制御部が当該表示制御装置における制御に反映させるための情報として取得する
ことを特徴とする請求項1から5までの何れか1項に記載の表示制御装置。
The acquisition unit
Any one of claims 1 to 5, wherein the device control unit acquires information indicating a voice operation performed on the terminal device as information to be reflected in the control of the display control device. The display control device described in the section.
表示装置の制御を行う表示制御装置、及び前記表示制御装置に関連付けられた端末装置を備える、前記表示装置における表示の制御システムであって、
前記表示制御装置は、
前記端末装置のタッチパネルに対してなされたジェスチャ操作を示す情報を取得する第1取得部と、
前記第1取得部が取得した情報から、所定の操作を導出する変換部と、
前記所定の操作に応じて、前記表示制御装置を制御する機器制御部と、
前記機器制御部による制御に応じた表示が行われるように、前記表示装置における表示制御を行う表示制御部と、
を備え、
前記端末装置は、
タッチパネルと、
当該端末装置の前記タッチパネルに対してなされたジェスチャ操作を示す情報を取得する第2取得部と、
前記第2取得部が取得した情報を、前記表示制御装置に対して送信する通信部と、
を備えることを特徴とする制御システム。
A display control system in the display device, comprising a display control device that controls the display device and a terminal device associated with the display control device.
The display control device is
A first acquisition unit that acquires information indicating a gesture operation performed on the touch panel of the terminal device, and
A conversion unit that derives a predetermined operation from the information acquired by the first acquisition unit, and
A device control unit that controls the display control device in response to the predetermined operation, and
A display control unit that controls the display in the display device so that the display is performed according to the control by the device control unit.
With
The terminal device is
Touch panel and
A second acquisition unit that acquires information indicating a gesture operation performed on the touch panel of the terminal device, and a second acquisition unit.
A communication unit that transmits the information acquired by the second acquisition unit to the display control device, and
A control system characterized by being equipped with.
表示装置の制御を行う表示制御装置によって実行される表示制御方法であって、
前記表示制御装置と関連付けられた端末装置のタッチパネルに対してなされたジェスチャ操作を示す情報を取得する取得ステップと、
前記取得ステップにおいて取得した情報から、所定の操作を導出する変換ステップと、
前記所定の操作に応じて、前記表示制御装置を制御する機器制御ステップと、
前記機器制御ステップにおける制御に応じた表示が行われるように、前記表示装置における表示制御を行う表示制御ステップと、
を含むことを特徴とする表示制御方法。
A display control method executed by a display control device that controls a display device.
An acquisition step for acquiring information indicating a gesture operation performed on the touch panel of the terminal device associated with the display control device, and an acquisition step.
A conversion step for deriving a predetermined operation from the information acquired in the acquisition step, and
A device control step that controls the display control device according to the predetermined operation, and
A display control step for performing display control in the display device and a display control step for performing display control according to the control in the device control step.
A display control method comprising.
請求項1に記載の表示制御装置としてコンピュータを機能させるための制御プログラムであって、前記取得部、前記変換部、前記機器制御部および前記表示制御部としてコンピュータを機能させるための制御プログラム。 The control program for operating a computer as the display control device according to claim 1, wherein the computer functions as the acquisition unit, the conversion unit, the device control unit, and the display control unit. 請求項9に記載の制御プログラムを記録したコンピュータ読み取り可能な記録媒体。 A computer-readable recording medium on which the control program according to claim 9 is recorded.
JP2019229194A 2019-12-19 2019-12-19 Display control device, control system, display control method, control program, and recording medium Pending JP2021096759A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2019229194A JP2021096759A (en) 2019-12-19 2019-12-19 Display control device, control system, display control method, control program, and recording medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019229194A JP2021096759A (en) 2019-12-19 2019-12-19 Display control device, control system, display control method, control program, and recording medium

Publications (1)

Publication Number Publication Date
JP2021096759A true JP2021096759A (en) 2021-06-24

Family

ID=76431483

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019229194A Pending JP2021096759A (en) 2019-12-19 2019-12-19 Display control device, control system, display control method, control program, and recording medium

Country Status (1)

Country Link
JP (1) JP2021096759A (en)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006033795A (en) * 2004-06-15 2006-02-02 Sanyo Electric Co Ltd Remote control system, controller, program for imparting function of controller to computer, storage medium with the program stored thereon, and server
JP2011253493A (en) * 2010-06-04 2011-12-15 Sony Corp Operation terminal device, electronic device and electronic device system
JP2013505631A (en) * 2009-09-22 2013-02-14 サムスン エレクトロニクス カンパニー リミテッド Display device and mobile phone control method
JP2013153346A (en) * 2012-01-25 2013-08-08 Funai Electric Co Ltd Remote control system

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006033795A (en) * 2004-06-15 2006-02-02 Sanyo Electric Co Ltd Remote control system, controller, program for imparting function of controller to computer, storage medium with the program stored thereon, and server
JP2013505631A (en) * 2009-09-22 2013-02-14 サムスン エレクトロニクス カンパニー リミテッド Display device and mobile phone control method
JP2011253493A (en) * 2010-06-04 2011-12-15 Sony Corp Operation terminal device, electronic device and electronic device system
JP2013153346A (en) * 2012-01-25 2013-08-08 Funai Electric Co Ltd Remote control system

Similar Documents

Publication Publication Date Title
KR102183413B1 (en) Method and system for presenting content using a plurality of electronic devices
JP6520442B2 (en) Parameter control device and parameter control program
US20150067521A1 (en) Method and apparatus for presenting content using electronic devices
US20130132859A1 (en) Method and electronic device for collaborative editing by plurality of mobile devices
KR101658630B1 (en) User terminal apparatus, electronic apparatus, system and controlling method thereof
KR102222912B1 (en) Device and method to control plurality of speakers through short range wireless communication
US20170272681A1 (en) Display device and method of operating the same
KR20140100306A (en) Portable device and Method for controlling external device thereof
US20150363091A1 (en) Electronic device and method of controlling same
KR102401837B1 (en) Method for configuring an audio rendering and/or acquiring device, and corresponding audio rendering and/or acquiring device, system, computer readable program product and computer readable storage medium
US20140195980A1 (en) Display apparatus and method for providing user interface thereof
US20150097848A1 (en) Display apparatus, display system, and program
EP2750013A2 (en) Display apparatus and method for controlling display apparatus thereof
US9596335B2 (en) Communication terminal and communication method
KR20150017205A (en) Function upgrade device, Display apparats and Method for controlling display apparatSs thereof
KR102494584B1 (en) Display apparatus and content display method thereof
US20140157197A1 (en) Display apparatus and method for providing user menu thereof
JP2021096759A (en) Display control device, control system, display control method, control program, and recording medium
US10652657B2 (en) System, terminal apparatus, main apparatus, and method
WO2018096849A1 (en) Information processing device, information processing method, and program
CN111034206A (en) Display apparatus and method of providing contents thereof
JP5476734B2 (en) Server, remote operation system, transmission method selection method, program, and recording medium
WO2013168287A1 (en) Relay device
CN109511102B (en) Information processing apparatus having a plurality of lines, control method thereof, and storage medium
JP2018032269A (en) Information processing device, information processing method, program, and information processing system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220921

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20230407

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230418

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20231017