JP2014174808A - Portable terminal and system for displaying video - Google Patents

Portable terminal and system for displaying video Download PDF

Info

Publication number
JP2014174808A
JP2014174808A JP2013047810A JP2013047810A JP2014174808A JP 2014174808 A JP2014174808 A JP 2014174808A JP 2013047810 A JP2013047810 A JP 2013047810A JP 2013047810 A JP2013047810 A JP 2013047810A JP 2014174808 A JP2014174808 A JP 2014174808A
Authority
JP
Japan
Prior art keywords
display
unit
terminal
external
touch
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2013047810A
Other languages
Japanese (ja)
Inventor
Hiroshi Okubo
宏 大久保
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Priority to JP2013047810A priority Critical patent/JP2014174808A/en
Publication of JP2014174808A publication Critical patent/JP2014174808A/en
Pending legal-status Critical Current

Links

Images

Abstract

PROBLEM TO BE SOLVED: To provide a portable terminal that improves operability of an external display apparatus.SOLUTION: A portable terminal 100 capable of displaying video on an external display apparatus includes: an external output video management section 170 for transmitting a video signal to the external display apparatus 200; a display section 150 for displaying an image; a touch panel control section 130 for accepting a touch operation in an image display area of the display section 150; and an arithmetic section 110 for controlling the operation of the portable terminal 100. The arithmetic section 110 is configured to receive information representing the touch operation on a display section 250 from the external display apparatus 200 and then to make the display section 150 perform a screen operation corresponding to the touch operation specified with the received information on the basis of the size of a display screen of the display section 150 and the size of a display screen of the display section 250.

Description

本発明は、映像の表示に関し、より特定的には、映像を表示可能な携帯端末における制御に関する。   The present invention relates to video display, and more particularly to control in a mobile terminal capable of displaying video.

ユーザインターフェイスとしてタッチパネルを有する電子機器が増えており、操作性を向上させるための技術も提案されている。   Electronic devices having a touch panel as a user interface are increasing, and a technique for improving operability has also been proposed.

たとえば、特開2012−164272号公報(特許文献1)は、「タッチパネル機器の操作性を向上させることができる操作情報取得装置」を開示している。操作情報取得装置100は、タッチパネルディスプレイ200の出力信号に基づいて操作情報を取得する装置であって、出力信号に基づいて操作種別を取得する操作種別判定部120と、出力信号に基づいてタッチパネルにおけるタッチ面積を取得するタッチ面積算出部130と、取得されたタッチ面積に対応する量を、取得された操作種別の操作量として決定する操作量決定部140と」を備える([要約]参照)。   For example, Japanese Patent Laying-Open No. 2012-164272 (Patent Document 1) discloses “an operation information acquisition device capable of improving the operability of a touch panel device”. The operation information acquisition device 100 is a device that acquires operation information based on an output signal of the touch panel display 200, and an operation type determination unit 120 that acquires an operation type based on the output signal, and a touch panel based on the output signal. A touch area calculation unit 130 that acquires a touch area, and an operation amount determination unit 140 that determines an amount corresponding to the acquired touch area as an operation amount of the acquired operation type ”(see [Summary]).

特開2012−164272号公報JP 2012-164272 A

ところで、携帯端末(たとえばスマートフォン、タブレット端末その他の携帯型の情報通信端末)と外部表示機器(たとえばテレビ)とを接続して、携帯端末が有する映像コンテンツを外部表示機器に表示して、携帯端末の画面よりも通常は大きな画面を有する外部表示機器の画面で当該映像コンテンツを視聴したいという要請がある。そのとき、外部表示機器がタッチパネルを有する場合に、外部表示機器に表示されている画像へのタッチ操作に基づいて画面を切り換えようとする操作もある。このような操作が行われる場合、携帯端末の画面のサイズと外部表示機器の画面のサイズとが異なるために、外部表示機器のタッチパネルに対する操作による画面の移動量と、携帯端末の画面の移動量とが異なる場合もあり得る。そのため、外部表示機器のユーザが操作について違和感を感じる場合もある。したがって、外部表示機器における操作性を向上させるための技術が必要とされている。   By the way, a portable terminal (for example, a smart phone, a tablet terminal or other portable information communication terminal) is connected to an external display device (for example, a television), and the video content of the portable terminal is displayed on the external display device. There is a demand for viewing the video content on a screen of an external display device having a screen that is usually larger than the screen. At that time, when the external display device has a touch panel, there is also an operation for switching the screen based on a touch operation on an image displayed on the external display device. When such an operation is performed, since the screen size of the mobile terminal and the screen size of the external display device are different, the screen movement amount by the operation on the touch panel of the external display device and the screen movement amount of the mobile terminal May be different. Therefore, the user of the external display device may feel uncomfortable about the operation. Therefore, a technique for improving the operability in the external display device is required.

この開示は、上述のような問題点を解決するためになされたものであって、ある局面における目的は、外部表示機器における画面の操作性が向上するように映像を外部表示機器に送信できる携帯端末を提供することである。他の局面における目的は、携帯端末と通信可能な外部表示機器における画面の操作性が向上するシステムを提供することである。   This disclosure has been made in order to solve the above-described problems, and an object in one aspect is to provide a portable device capable of transmitting video to an external display device so that operability of a screen in the external display device is improved. To provide a terminal. An object in another aspect is to provide a system that improves the operability of a screen in an external display device that can communicate with a mobile terminal.

一実施の形態に従うと、映像を表示機器に表示可能な携帯端末は、表示機器に映像信号を送信するための送信手段と、画像を表示するための端末表示部と、表示部の画像表示領域に対するタッチ操作を受け付けるためのタッチパネル制御部と、携帯端末の動作を制御するための端末制御部とを備える。表示機器は、携帯端末から送信される信号を受信するための受信手段と、画像を表示するための外部表示部と、外部表示部の画像表示領域に対するタッチ操作を受け付けるためのタッチパネル制御部と、表示機器の動作を制御するための機器制御部とを備える。端末制御部は、表示機器から、外部表示部に対するタッチ操作を表す情報を受信し、端末表示部の表示画面のサイズと、外部表示部の表示画面のサイズとに基づいて、受信された情報により特定されるタッチ操作に応じた画面操作を端末表示部に実行させるように構成されている。   According to one embodiment, a mobile terminal capable of displaying video on a display device includes a transmission means for transmitting a video signal to the display device, a terminal display unit for displaying an image, and an image display area of the display unit A touch panel control unit for receiving a touch operation on the mobile phone and a terminal control unit for controlling the operation of the mobile terminal. The display device includes a receiving unit for receiving a signal transmitted from the mobile terminal, an external display unit for displaying an image, a touch panel control unit for receiving a touch operation on the image display area of the external display unit, A device control unit for controlling the operation of the display device. The terminal control unit receives information representing a touch operation on the external display unit from the display device, and based on the received information based on the size of the display screen of the terminal display unit and the size of the display screen of the external display unit. The terminal display unit is configured to execute a screen operation corresponding to the specified touch operation.

好ましくは、外部表示部に対するタッチ操作は、タッチダウン操作を含む。当該タッチダウン操作を表す情報は、タッチダウンが検出された領域の面積を表す情報を含む。   Preferably, the touch operation on the external display unit includes a touch-down operation. The information representing the touchdown operation includes information representing the area of the region where the touchdown is detected.

好ましくは、端末制御部は、領域の面積が予め設定された閾値以上である場合に、端末表示部の表示画面のサイズと、外部表示部の表示画面のサイズとの比率に応じて、端末表示部における画面の移動量を算出するように構成されている。   Preferably, the terminal control unit displays the terminal according to a ratio between the size of the display screen of the terminal display unit and the size of the display screen of the external display unit when the area of the region is equal to or larger than a preset threshold. The movement amount of the screen in the unit is calculated.

好ましくは、端末制御部は、領域の面積が閾値以下である場合に、タッチダウン操作後に行われるムーブ操作による外部表示部における移動量を、端末表示部における移動量として算出するように構成されている。   Preferably, the terminal control unit is configured to calculate a movement amount in the external display unit by a move operation performed after the touchdown operation as a movement amount in the terminal display unit when the area of the region is equal to or less than a threshold value. Yes.

他の実施の形態に従うと、映像を表示するためのシステムが提供される。このシステムは、携帯端末と、携帯端末と通信可能な表示機器とを備える。携帯端末は、表示機器に映像信号を送信するための送信手段と、画像を表示するための端末表示部と、表示部の画像表示領域に対するタッチ操作を受け付けるためのタッチパネル制御部と、携帯端末の動作を制御するための端末制御部とを備える。表示機器は、携帯端末から送信される信号を受信するための受信手段と、画像を表示するための外部表示部と、外部表示部の画像表示領域に対するタッチ操作を受け付けるためのタッチパネル制御部と、表示機器の動作を制御するための機器制御部とを備える。端末制御部は、表示機器から、外部表示部に対するタッチ操作を表す情報を受信し、端末表示部の表示画面のサイズと、外部表示部の表示画面のサイズとに基づいて、受信された情報により特定されるタッチ操作に応じた画面操作を端末表示部に実行させるように構成されている。   According to another embodiment, a system for displaying video is provided. This system includes a mobile terminal and a display device capable of communicating with the mobile terminal. The portable terminal includes a transmission means for transmitting a video signal to a display device, a terminal display unit for displaying an image, a touch panel control unit for receiving a touch operation on an image display area of the display unit, and a portable terminal A terminal control unit for controlling the operation. The display device includes a receiving unit for receiving a signal transmitted from the mobile terminal, an external display unit for displaying an image, a touch panel control unit for receiving a touch operation on the image display area of the external display unit, A device control unit for controlling the operation of the display device. The terminal control unit receives information representing a touch operation on the external display unit from the display device, and based on the received information based on the size of the display screen of the terminal display unit and the size of the display screen of the external display unit. The terminal display unit is configured to execute a screen operation corresponding to the specified touch operation.

ある局面において、タッチパネルを備える外部表示機器における画面の操作性が向上し得る。   In one aspect, the operability of a screen in an external display device including a touch panel can be improved.

この発明の上記および他の目的、特徴、局面および利点は、添付の図面と関連して理解されるこの発明に関する次の詳細な説明から明らかとなるであろう。   The above and other objects, features, aspects and advantages of the present invention will become apparent from the following detailed description of the present invention taken in conjunction with the accompanying drawings.

本発明の実施の形態に係るシステム1の構成の概略を表す図である。It is a figure showing the outline of a structure of the system 1 which concerns on embodiment of this invention. 携帯端末100の表示部150と外部表示機器200の表示部における画面の推移を表す図である。It is a figure showing the transition of the screen in the display part 150 of the portable terminal 100, and the display part of the external display apparatus 200. FIG. 演算部110が実行する処理の一部を表すフローチャートである。It is a flowchart showing a part of process which the calculating part 110 performs. 外部表示機器200が実行する処理の一部を表すフローチャートである。5 is a flowchart showing a part of processing executed by external display device 200.

以下、図面を参照しつつ、本発明の実施の形態について説明する。以下の説明では、同一の部品には同一の符号を付してある。それらの名称および機能も同じである。したがって、それらについての詳細な説明は繰り返さない。   Hereinafter, embodiments of the present invention will be described with reference to the drawings. In the following description, the same parts are denoted by the same reference numerals. Their names and functions are also the same. Therefore, detailed description thereof will not be repeated.

<携帯端末100の構成>
図1を参照して、本実施の形態に係るシステム1について説明する。図1は、本発明の実施の形態に係るシステム1の構成の概略を表す図である。システム1は、携帯端末100と、外部表示機器200とを備える。携帯端末100は、たとえば、スマートフォン、タブレット端末その他の通信機能と画像表示機能とを備える携帯型の通信端末として実現される。外部表示機器200は、テレビ、モニタ装置その他の機器であって、上記通信端末との通信機能を有する映像表示装置として実現される。
<Configuration of mobile terminal 100>
A system 1 according to the present embodiment will be described with reference to FIG. FIG. 1 is a diagram showing an outline of a configuration of a system 1 according to an embodiment of the present invention. The system 1 includes a mobile terminal 100 and an external display device 200. For example, the mobile terminal 100 is realized as a mobile communication terminal including a smartphone, a tablet terminal, and other communication functions and an image display function. The external display device 200 is a television, a monitor device, or other devices, and is realized as a video display device having a communication function with the communication terminal.

携帯端末100は、演算部110と、タッチパネル120と、タッチパネル制御部130と、表示制御部140と、表示部150と、メモリ160と、外部出力映像管理部170と、外部出力制御情報通信部180と、外部タッチイベント制御部190とを備える。   The portable terminal 100 includes a calculation unit 110, a touch panel 120, a touch panel control unit 130, a display control unit 140, a display unit 150, a memory 160, an external output video management unit 170, and an external output control information communication unit 180. And an external touch event control unit 190.

演算部110は、携帯端末100に対して予め規定された処理を実現するための命令を実行する。   Arithmetic unit 110 executes a command for realizing predetermined processing for portable terminal 100.

タッチパネル120は、表示部150に対する操作を検出する。
タッチパネル制御部130は、演算部110によって出力される命令に基づいて、タッチパネル120の動作を制御する。当該動作は、たとえば、タッチ操作の検出部のオンやオフ等を含む。
The touch panel 120 detects an operation on the display unit 150.
The touch panel control unit 130 controls the operation of the touch panel 120 based on the command output from the calculation unit 110. The operation includes, for example, turning on / off a touch operation detection unit.

表示制御部140は、演算部110から出力される命令に基づいて、表示部150における画面の表示を制御する。たとえば、携帯端末100と外部表示機器200との通信が確立されている場合において、携帯端末100が映像信号を外部表示機器200に送信しているとき、表示制御部140は、表示部150における動画像の表示または非表示を切り換える。   The display control unit 140 controls screen display on the display unit 150 based on the command output from the calculation unit 110. For example, when communication between the mobile terminal 100 and the external display device 200 is established, when the mobile terminal 100 transmits a video signal to the external display device 200, the display control unit 140 displays the video on the display unit 150. Switches between displaying and hiding the image.

表示部150は、表示制御部140から出力される信号に基づいて、画像を表示する。表示される画像は、メモリ160に保存されている動画像、静止画像、写真その他のコンテンツ、携帯端末100の外部から与えられる同様のコンテンツ等を含む。表示部150は、液晶モニタ、有機EL(Electro Luminescence)モニタその他の表示装置として実現される。   The display unit 150 displays an image based on the signal output from the display control unit 140. The displayed image includes a moving image, a still image, a photograph, and other content stored in the memory 160, similar content provided from the outside of the mobile terminal 100, and the like. The display unit 150 is realized as a liquid crystal monitor, an organic EL (Electro Luminescence) monitor, or other display device.

メモリ160は、携帯端末100に対して予め規定された動作を実行させるためのデータおよびプログラムを含むシステム情報、および、前述のコンテンツその他のユーザデータを格納する。メモリ160は、フラッシュメモリ、ハードディスク、SSD(Solid State Drive)その他の不揮発記憶装置、あるいは、RAM(Random Access Memory)その他の揮発記憶装置として実現される。また、メモリ160は、着脱可能なメモリカードによっても実現され得る。   The memory 160 stores system information including data and a program for causing the mobile terminal 100 to execute a predetermined operation, and the above-described content and other user data. The memory 160 is realized as a flash memory, a hard disk, an SSD (Solid State Drive) or other nonvolatile storage device, or a RAM (Random Access Memory) or other volatile storage device. The memory 160 can also be realized by a removable memory card.

外部出力映像管理部170は、演算部110の制御に基づいて、携帯端末100の外部に対する映像信号の出力(送信)を制御する。たとえば、外部出力映像管理部170は、メモリ160に保存されている映像データをストリーム信号として無線送信する。   The external output video management unit 170 controls the output (transmission) of the video signal to the outside of the mobile terminal 100 based on the control of the calculation unit 110. For example, the external output video management unit 170 wirelessly transmits video data stored in the memory 160 as a stream signal.

外部出力制御情報通信部180は、外部表示機器200によって送信された信号の入力を受け付ける。当該信号は、外部表示機器200において検出された表示部250に対するタッチ操作(タッチイベントともいう。)の種別、当該タッチ操作を特定する座標値情報等を含む。タッチ操作は、たとえば、表示部250におけるタッチダウン操作、ムーブ操作、タッチアップ操作であるが、これらに限られない。座標値情報は、たとえば、タッチダウン操作またはタッチアップ操作が検出された点または領域を表す座標値、または、ムーブ操作が行われた移動量を表す座標値を含む。   The external output control information communication unit 180 receives an input of a signal transmitted by the external display device 200. The signal includes a type of touch operation (also referred to as a touch event) on the display unit 250 detected in the external display device 200, coordinate value information for specifying the touch operation, and the like. The touch operation is, for example, a touch-down operation, a move operation, or a touch-up operation on the display unit 250, but is not limited thereto. The coordinate value information includes, for example, a coordinate value that represents a point or a region where a touch-down operation or a touch-up operation is detected, or a coordinate value that represents a movement amount for which a move operation has been performed.

外部タッチイベント制御部190は、外部出力制御情報通信部180からの出力を受け、外部表示機器200において検出されたタッチイベントに基づいて表示部150における画像の表示を制御する。たとえば、携帯端末100が、表示部250におけるタッチダウン操作が行なわれた旨および当該タッチダウン操作を表す情報(タッチダウンされた点の座標値)を外部表示機器200から受信すると、外部タッチイベント制御部190は、、当該情報に基づいて、当該タッチダウン操作が行なわれた点に相当する点の座標値を、表示部150に表示されている画像の中で特定する。その後の処理は、この点の座標値が起点となる。   The external touch event control unit 190 receives an output from the external output control information communication unit 180 and controls display of an image on the display unit 150 based on the touch event detected in the external display device 200. For example, when the mobile terminal 100 receives from the external display device 200 that the touch-down operation on the display unit 250 has been performed and information indicating the touch-down operation (the coordinate value of the touch-down point), the external touch event control is performed. Based on the information, unit 190 identifies the coordinate value of the point corresponding to the point where the touchdown operation has been performed, in the image displayed on display unit 150. In the subsequent processing, the coordinate value of this point is the starting point.

別の局面において、携帯端末100が、表示部250におけるムーブ操作が行なわれた旨および当該ムーブ操作を表す情報(たとえば、画面上の軌跡を表す座標値)を外部表示機器200から受信すると、外部タッチイベント制御部190は、当該情報に基づいて、当該ムーブ操作が行なわれた軌跡に相当する各点の座標値を、表示部150に表示されている画像の中で特定する。   In another aspect, when the mobile terminal 100 receives from the external display device 200 information indicating that a move operation has been performed on the display unit 250 and information indicating the move operation (for example, coordinate values representing a trajectory on the screen), Based on the information, touch event control unit 190 identifies the coordinate value of each point corresponding to the locus on which the move operation has been performed in the image displayed on display unit 150.

さらに別の局面において、携帯端末100が、表示部250におけるタッチアップ操作が行なわれた旨および当該タッチアップ操作を表す情報(タッチアップされた点の座標値)を外部表示機器200から受信すると、外部タッチイベント制御部190は、当該情報に基づいて、当該タッチアップ操作が行なわれた点に相当する点の座標値を、表示部150に表示されている画像の中で特定する。   In yet another aspect, when the mobile terminal 100 receives from the external display device 200 information indicating that a touch-up operation has been performed on the display unit 250 and information indicating the touch-up operation (coordinate values of a touch-up point), The external touch event control unit 190 specifies a coordinate value of a point corresponding to the point where the touch-up operation has been performed in the image displayed on the display unit 150 based on the information.

演算部110とタッチパネル制御部130と表示制御部140と外部タッチイベント制御部190とは、たとえば、CPU(Central Processing Unit)その他のプロセッサとして実現される。   The calculation unit 110, the touch panel control unit 130, the display control unit 140, and the external touch event control unit 190 are realized as, for example, a CPU (Central Processing Unit) or other processors.

<外部表示機器200の構成>
図1を再び参照して、外部表示機器200は、演算部210と、タッチパネル220と、タッチパネル制御部230と、表示制御部240と、表示部250と、タッチ面積算出部260と、外部入力映像管理部270と、外部入力制御情報通信部280とを備える。
<Configuration of External Display Device 200>
Referring to FIG. 1 again, the external display device 200 includes a calculation unit 210, a touch panel 220, a touch panel control unit 230, a display control unit 240, a display unit 250, a touch area calculation unit 260, and an external input video. A management unit 270 and an external input control information communication unit 280 are provided.

演算部210は、外部表示機器200の動作を制御する。
タッチパネル220は、表示部250の画像表示領域に対するタッチ操作を受け付ける。
The calculation unit 210 controls the operation of the external display device 200.
The touch panel 220 receives a touch operation on the image display area of the display unit 250.

タッチパネル制御部230は、演算部210によって出力される命令に基づいて、タッチパネル220の動作を制御する。当該動作は、たとえば、タッチ操作の検出部のオンやオフ等を含む。   The touch panel control unit 230 controls the operation of the touch panel 220 based on the command output from the calculation unit 210. The operation includes, for example, turning on / off a touch operation detection unit.

表示制御部240は、演算部210から出力される命令に基づいて、表示部250における画面の表示を制御する。たとえば、携帯端末100と外部表示機器200との通信が確立されている場合において、外部表示機器200が、携帯端末100から映像信号を受信すると、表示制御部240は、その映像信号に基づく映像を表示部250に表示する。外部表示機器200がテレビである場合には、表示制御部240は、チューナによる選局結果に応じてテレビ放送番組を表示部250に表示する。   The display control unit 240 controls the display of the screen on the display unit 250 based on the command output from the calculation unit 210. For example, when communication between the mobile terminal 100 and the external display device 200 is established, when the external display device 200 receives a video signal from the mobile terminal 100, the display control unit 240 displays a video based on the video signal. It is displayed on the display unit 250. When the external display device 200 is a television, the display control unit 240 displays a television broadcast program on the display unit 250 according to the channel selection result by the tuner.

表示部250は、表示制御部240から出力される信号に基づいて、画像を表示する。表示される画像は、携帯端末100から送信された映像信号に基づく動画像、静止画像、写真その他のコンテンツ、テレビ放送信号に基づく番組等である。表示部250は、液晶モニタ、有機ELモニタその他の表示装置として実現される。   The display unit 250 displays an image based on the signal output from the display control unit 240. The displayed image is a moving image based on a video signal transmitted from the mobile terminal 100, a still image, a photograph or other content, a program based on a television broadcast signal, or the like. The display unit 250 is realized as a display device such as a liquid crystal monitor, an organic EL monitor, or the like.

タッチ面積算出部260は、タッチパネル制御部230からの出力に基づいて、タッチ操作が検出された領域の面積を算出する。当該面積は、たとえば、画素数として算出される。   The touch area calculation unit 260 calculates the area of the area where the touch operation is detected based on the output from the touch panel control unit 230. The area is calculated as the number of pixels, for example.

外部入力映像管理部270は、演算部210の制御に基づいて、外部表示機器200の外部に対する映像信号の受信を制御する。たとえば、外部入力映像管理部270は、携帯端末100との通信を確立し、携帯端末100から送信される映像信号の受信を受け付ける。   The external input video management unit 270 controls reception of video signals to the outside of the external display device 200 based on the control of the calculation unit 210. For example, the external input video management unit 270 establishes communication with the mobile terminal 100 and accepts reception of a video signal transmitted from the mobile terminal 100.

外部入力制御情報通信部280は、外部表示機器200において検出されたタッチ操作に応じた信号を携帯端末100に送信する。当該信号は、検出された表示部250に対するタッチ操作(タッチイベントともいう。)の種別、当該タッチ操作を特定する座標値情報等を含む。タッチ操作は、たとえば、表示部250におけるタッチダウン操作、ムーブ操作、タッチアップ操作であるが、これらに限られない。座標値情報は、たとえば、タッチダウン操作またはタッチアップ操作が検出された点または領域を表す座標値、または、ムーブ操作が行われた移動量を表す座標値を含む。   The external input control information communication unit 280 transmits a signal corresponding to the touch operation detected in the external display device 200 to the mobile terminal 100. The signal includes the type of touch operation (also referred to as a touch event) to the detected display unit 250, coordinate value information specifying the touch operation, and the like. The touch operation is, for example, a touch-down operation, a move operation, or a touch-up operation on the display unit 250, but is not limited thereto. The coordinate value information includes, for example, a coordinate value that represents a point or a region where a touch-down operation or a touch-up operation is detected, or a coordinate value that represents a movement amount for which a move operation has been performed.

なお、演算部210とタッチパネル制御部230と表示制御部240とタッチ面積算出部260とは、たとえば、CPUその他のプロセッサとして実現される。   In addition, the calculating part 210, the touch panel control part 230, the display control part 240, and the touch area calculation part 260 are implement | achieved as CPU or other processors, for example.

<技術思想>
ここで、図1を参照して、本実施の形態に係る技術思想について説明する。
<Technology>
Here, the technical concept according to the present embodiment will be described with reference to FIG.

たとえば、携帯端末100から外部表示機器200に映像を出力するとき、多くの場合、外部表示機器200(たとえば、液晶テレビ)の画面サイズは、携帯端末100(たとえば、スマートフォン、タブレット端末その他の携帯情報通信端末)の画面サイズよりも大きい。   For example, when a video is output from the mobile terminal 100 to the external display device 200, the screen size of the external display device 200 (for example, a liquid crystal television) is often set to the mobile terminal 100 (for example, a smartphone, a tablet terminal, or other mobile information). Larger than the screen size of the communication terminal).

ユーザが、外部表示機器200においてタッチ操作を行なう場合、次の2つの場合がある。
・ケース(1)外部表示機器200の表示部250の画面上の位置をタッチ操作で指す場合(たとえば、表示部250に表示されているブラウザ画面へのクリック操作など)
・ケース(2)表示部250の画面において表示内容を大きく移動する場合(たとえば、画面を大きくスクロールする動作など)
ケース(1)に関しては、特に画面のサイズによる操作性への懸念はないが、ケース(2)に関しては、画面サイズが大きくなるにつれ、大きく画面スクロールをしようとすると、操作しにくくなる場合がある。
When the user performs a touch operation on the external display device 200, there are the following two cases.
Case (1) When a position on the screen of the display unit 250 of the external display device 200 is indicated by a touch operation (for example, a click operation on a browser screen displayed on the display unit 250)
Case (2) When the display content is moved largely on the screen of the display unit 250 (for example, an operation of scrolling the screen greatly)
Regarding the case (1), there is no particular concern about the operability due to the size of the screen. However, regarding the case (2), as the screen size increases, it may become difficult to operate if the screen is greatly scrolled. .

そこで、本実施の形態においては、上記について、ケース(2)に関する操作性を向上させ、また、ケース(1)の操作性が損なわれない方法が開示される。   Therefore, in the present embodiment, a method is disclosed in which the operability related to the case (2) is improved and the operability of the case (1) is not impaired.

たとえば、携帯端末100から外部表示機器200への映像出力時に、外部表示機器200からのタッチ操作情報を携帯端末100で処理する場合を考える。この場合、携帯端末100から送出している映像の解像度に対する外部表示機器200の画面サイズ(実際の大きさ)が携帯端末100で把握できないために、ケース(2)のような状況では、ユーザに直感的なタッチ操作を提供できない。   For example, let us consider a case where touch operation information from the external display device 200 is processed by the mobile terminal 100 during video output from the mobile terminal 100 to the external display device 200. In this case, since the screen size (actual size) of the external display device 200 with respect to the resolution of the video transmitted from the mobile terminal 100 cannot be grasped by the mobile terminal 100, in the situation such as the case (2), the user is Intuitive touch operation cannot be provided.

そこで、以下のような手法が考えられる。
[ステップ1]
携帯端末100が外部表示機器200に対する映像信号の出力を開始する。
Therefore, the following method can be considered.
[Step 1]
The mobile terminal 100 starts outputting video signals to the external display device 200.

たとえば、映像信号の出力を開始する際の携帯端末100と外部表示機器200との間のネゴシエーションにて、携帯端末100は、携帯端末100から外部表示機器200に送出される映像信号の解像度を決定する。携帯端末100は、外部表示機器200の表示部250の画面サイズ(SA)を外部表示機器200から取得して、当該画面サイズと表示部150の画面サイズ(SB)との比率(X=SA/SB)を算出する。   For example, in the negotiation between the mobile terminal 100 and the external display device 200 when starting the output of the video signal, the mobile terminal 100 determines the resolution of the video signal transmitted from the mobile terminal 100 to the external display device 200. To do. The mobile terminal 100 acquires the screen size (SA) of the display unit 250 of the external display device 200 from the external display device 200, and the ratio between the screen size and the screen size (SB) of the display unit 150 (X = SA / SB) is calculated.

[ステップ2]
携帯端末100が映像信号を出力している間に、外部表示機器200は、ユーザによるタッチパネル220に対する操作を受け付ける。
[Step 2]
While the mobile terminal 100 outputs a video signal, the external display device 200 accepts an operation on the touch panel 220 by the user.

タッチパネル220に対する操作に応答して、外部表示機器200は、携帯端末100に対して、外部入力制御情報通信部280を介して、情報(以下「タッチ操作情報」ともいう。)を送信する。タッチ操作情報は、たとえば、タッチダウンが検出された点の座標値情報と、ムーブ操作が検出された点(たとえば、開始点または終了点)の座標値情報と、タッチダウン操作が検出された領域のタッチ面積(たとえば、画素数)情報とのいずれかを含む。   In response to an operation on the touch panel 220, the external display device 200 transmits information (hereinafter also referred to as “touch operation information”) to the mobile terminal 100 via the external input control information communication unit 280. The touch operation information includes, for example, the coordinate value information of the point where the touchdown is detected, the coordinate value information of the point where the move operation is detected (for example, the start point or the end point), and the area where the touchdown operation is detected Information on the touch area (for example, the number of pixels).

一方、携帯端末100は、以下のような処理を実行する。まず、携帯端末100は、外部表示機器200から、タッチダウンの情報を受信した際、タッチ面積の情報を取得する。タッチ面積が予め設定された閾値以上である場合、演算部110は、タッチダウン後のムーブ座標値情報から算出される移動量情報に、ステップ1で算出された画面サイズの比率(X)を乗算して、移動量を決定する。外部表示機器200の表示部250が携帯端末100の表示部150よりも大きければ、移動量は大きくなる。他方、タッチ面積が予め設定された閾値以下である場合、演算部110は、タッチダウン後のムーブ操作の座標情報をそのまま使用し、移動量とする。仮に、演算部110が、一律で画面比率を乗算した移動量を用いると、細かな操作を阻害する要因にもなり得るため、タッチダウン時のタッチ面積を用いることによりタッチダウン操作を行なったユーザの意思を考慮する。   On the other hand, the mobile terminal 100 executes the following process. First, when the mobile terminal 100 receives touchdown information from the external display device 200, the mobile terminal 100 acquires touch area information. When the touch area is greater than or equal to a preset threshold, the calculation unit 110 multiplies the movement amount information calculated from the move coordinate value information after the touchdown by the screen size ratio (X) calculated in step 1. To determine the amount of movement. If the display unit 250 of the external display device 200 is larger than the display unit 150 of the mobile terminal 100, the amount of movement is large. On the other hand, when the touch area is equal to or smaller than a preset threshold value, the calculation unit 110 uses the coordinate information of the move operation after the touchdown as it is and sets it as the movement amount. If the calculation unit 110 uses a movement amount obtained by uniformly multiplying the screen ratio, it may be a factor that hinders a fine operation. Therefore, the user who performed the touchdown operation by using the touch area at the time of the touchdown. Consider the intention of.

なお、上記の例では、演算部110は、外部表示機器200の表示部250においてタッチダウンが行なわれた領域の面積でユーザの意図を判別しているが、外部表示機器200が、タッチパネル220からの出力を用いてタッチ操作が行なわれた軌跡や領域の形状等を取得できるようにしてもよい。外部表示機器200が、当該形状を示す情報を携帯端末100に送ることで、その情報をユーザ意図として判別してもよい。   In the above example, the calculation unit 110 determines the user's intention based on the area of the area where the touchdown is performed on the display unit 250 of the external display device 200. However, the external display device 200 is It may be possible to acquire the locus of the touch operation, the shape of the region, and the like using the output. The external display device 200 may determine the information as the user intention by sending information indicating the shape to the mobile terminal 100.

<表示態様>
図2を参照して、本実施の形態に係る携帯端末100および外部表示機器200における画面の表示態様について説明する。図2は、携帯端末100の表示部150と外部表示機器200の表示部における画面の推移を表す図である。
<Display mode>
With reference to FIG. 2, the display mode of the screen in portable terminal 100 and external display device 200 according to the present embodiment will be described. FIG. 2 is a diagram illustrating screen transitions in the display unit 150 of the mobile terminal 100 and the display unit of the external display device 200.

状態Aに示されるように、携帯端末100と外部表示機器200とは通信状態にある。携帯端末100は、表示部150に画像11,12を表示している。このとき、外部表示機器200は、携帯端末100から送られた映像信号に基づいて、画像21,22を表示している。画像21は画像11に対応する。画像22は画像12に対応する。ある局面において、外部表示機器200のユーザ(視聴者)は、その指20を表示部250の表示領域にタッチダウンし、ムーブ操作を行なう。   As shown in the state A, the mobile terminal 100 and the external display device 200 are in a communication state. The portable terminal 100 displays images 11 and 12 on the display unit 150. At this time, the external display device 200 displays the images 21 and 22 based on the video signal transmitted from the mobile terminal 100. Image 21 corresponds to image 11. Image 22 corresponds to image 12. In one aspect, the user (viewer) of the external display device 200 touches down the finger 20 on the display area of the display unit 250 and performs a move operation.

状態Bに示されるように、外部表示機器200に対して行なわれたムーブ操作の移動量24と画面サイズの比率(X)との積が予め規定された閾値を上回る場合には、携帯端末100における画面の移動量も当該積に応じて大きくなる。より具体的には、外部表示機器200に表示されていた画像21は表示されなくなり、画像21は画像25として新たな場所に表示される。このとき、携帯端末100に表示されていた画像11も表示されなくなり、画像12は、画像15として表示される。   As shown in state B, when the product of the movement amount 24 of the move operation performed on the external display device 200 and the screen size ratio (X) exceeds a predetermined threshold value, the mobile terminal 100 The amount of movement of the screen at is also increased according to the product. More specifically, the image 21 displayed on the external display device 200 is not displayed, and the image 21 is displayed at a new location as the image 25. At this time, the image 11 displayed on the mobile terminal 100 is also not displayed, and the image 12 is displayed as the image 15.

一方、状態Cに示されるように、外部表示機器200に対して行なわれたムーブ操作の移動量と画面のサイズの比率(X)との積が予め規定された閾値よりも小さい場合には、携帯端末100における画面の移動量も当該積に応じて小さくなる。より具体的には、外部表示機器200に表示されていた画像21は、画像28として表示される。画像22は、画像29として表示される。また、携帯端末100に表示されていた画像11は画像18として表示される。画像12は画像19として表示される。   On the other hand, as shown in the state C, when the product of the movement amount of the move operation performed on the external display device 200 and the ratio (X) of the screen size is smaller than a predetermined threshold value, The moving amount of the screen in the portable terminal 100 is also reduced according to the product. More specifically, the image 21 displayed on the external display device 200 is displayed as an image 28. The image 22 is displayed as an image 29. The image 11 displayed on the mobile terminal 100 is displayed as an image 18. Image 12 is displayed as image 19.

<制御構造>
図3を参照して、本実施の形態に係る携帯端末100の制御構造について説明する。図3は、演算部110が実行する処理の一部を表すフローチャートである。この処理は、携帯端末100に保存されているプログラムがプロセッサによって実行されることにより実現される。
<Control structure>
With reference to FIG. 3, the control structure of portable terminal 100 according to the present embodiment will be described. FIG. 3 is a flowchart showing a part of processing executed by the arithmetic unit 110. This process is realized by executing a program stored in the mobile terminal 100 by the processor.

ステップS310にて、演算部110は、外部表示機器200に対する映像の出力準備を実行する。   In step S <b> 310, calculation unit 110 prepares to output video to external display device 200.

より具体的には、ステップS312にて、演算部110は、携帯端末100において設定されている情報に基づいて外部表示機器200に対して出力される映像の解像度を決定する。演算部110は、携帯端末100と外部表示機器200との通信を確立する。演算部110は、外部表示機器200に映像の出力要求を送信する。   More specifically, in step S312, calculation unit 110 determines the resolution of the video output to external display device 200 based on information set in portable terminal 100. The calculation unit 110 establishes communication between the mobile terminal 100 and the external display device 200. The computing unit 110 transmits a video output request to the external display device 200.

ステップS314にて、演算部110は、外部表示機器200によって送信された信号から表示部250の表示領域のサイズを取得する。他の局面において、携帯端末100は、外部表示機器200から送られた、表示部250における解像度を取得する。   In step S314, operation unit 110 acquires the size of the display area of display unit 250 from the signal transmitted by external display device 200. In another aspect, the mobile terminal 100 acquires the resolution in the display unit 250 sent from the external display device 200.

ステップS316にて、演算部110は、携帯端末100の表示部150のサイズと、外部表示機器200の表示部250のサイズとの比率(X)を算出する。   In step S316, calculation unit 110 calculates a ratio (X) between the size of display unit 150 of portable terminal 100 and the size of display unit 250 of external display device 200.

ステップS320にて、演算部110は、外部出力映像管理部170を介して、外部表示機器200に対する映像の出力を開始する。   In step S320, calculation unit 110 starts outputting video to external display device 200 via external output video management unit 170.

ステップS330にて、演算部110は、外部タッチイベント制御部190を介して、外部タッチイベントの取得処理を開始する。具体的には、外部タッチイベント制御部190は、外部出力制御情報通信部180を介して外部表示機器200からの信号を受信する。この信号は、表示部250におけるタッチ操作情報を含む。外部タッチイベント制御部190は、このタッチ操作情報から、外部表示機器200の表示部250においてどのようなタッチ操作がどの程度(移動量、座標値等)行なわれたかを表す情報を取得する。   In step S330, calculation unit 110 starts an external touch event acquisition process via external touch event control unit 190. Specifically, the external touch event control unit 190 receives a signal from the external display device 200 via the external output control information communication unit 180. This signal includes touch operation information on the display unit 250. The external touch event control unit 190 acquires information indicating what touch operation is performed and how much (movement amount, coordinate value, etc.) is performed on the display unit 250 of the external display device 200 from the touch operation information.

ステップS340にて、演算部110は、タッチ操作情報に基づいて、表示部250において行なわれたイベント(タッチ操作の種類)を判定する。当該イベントがタッチアップ操作である場合には、演算部110は、制御をステップS350に切り換える。当該イベントがタッチダウン操作である場合には、演算部110は、制御をステップS360に切り換える。当該イベントがムーブ操作である場合には、演算部110は、制御をステップS370に切り換える。   In step S340, calculation unit 110 determines an event (type of touch operation) performed on display unit 250 based on the touch operation information. When the event is a touch-up operation, the arithmetic unit 110 switches the control to step S350. When the event is a touchdown operation, the calculation unit 110 switches the control to step S360. If the event is a move operation, operation unit 110 switches control to step S370.

ステップS350にて、演算部110は、メモリ160をクリアする。より具体的には、演算部110は、タッチ操作に応じた描画処理を実現するために割り当てられたメモリ領域を解放する。   In step S350, operation unit 110 clears memory 160. More specifically, the calculation unit 110 releases a memory area allocated for realizing a drawing process corresponding to the touch operation.

ステップS360にて、演算部110は、外部表示機器200から送られた信号から表示部250においてタッチされた領域の面積(タッチ面積)を示す情報を取得し、当該情報をメモリ160に保持する。   In step S <b> 360, calculation unit 110 acquires information indicating the area (touch area) of the area touched on display unit 250 from the signal transmitted from external display device 200, and stores the information in memory 160.

ステップS370にて、演算部110は、タッチ面積をメモリ160から読み出す。
ステップS380にて、演算部110は、当該タッチ面積と閾値との大小関係を判定する。当該タッチ面積が予め設定された閾値よりも大きい場合には、演算部110は、制御をステップS382に切り換える。そうでない場合には、演算部110は、制御をステップS386に切り換える。
In step S370, operation unit 110 reads the touch area from memory 160.
In step S380, operation unit 110 determines the magnitude relationship between the touch area and the threshold value. When the touch area is larger than a preset threshold, the calculation unit 110 switches the control to step S382. When that is not right, the calculating part 110 switches control to step S386.

ステップS382にて、演算部110は、ステップS316において算出しておいた画面比率(X)と当該移動量との積を算出することにより、移動量を重み付けする。これにより、携帯端末100における移動量が導出される。   In step S382, the calculation unit 110 weights the movement amount by calculating the product of the screen ratio (X) calculated in step S316 and the movement amount. Thereby, the movement amount in the portable terminal 100 is derived.

ステップS384にて、演算部110は、算出した移動量を用いて、表示部150におけるムーブ処理を実行する。   In step S384, calculation unit 110 executes a move process in display unit 150 using the calculated movement amount.

ステップS386にて、演算部110は、外部タッチイベント制御部190からの信号に基づいて、外部タッチイベントの取得処理が終了したことを検知する。より具体的には、演算部110は、外部表示機器200からの信号に基づいて、表示部250におけるタッチ操作が終了したことを検知する。この信号は、表示部250におけるタッチ操作が終了した場合に、外部入力制御情報通信部280から外部出力制御情報通信部180に送信される。   In step S386, calculation unit 110 detects that the external touch event acquisition process has ended based on a signal from external touch event control unit 190. More specifically, the calculation unit 110 detects that the touch operation on the display unit 250 has ended based on a signal from the external display device 200. This signal is transmitted from the external input control information communication unit 280 to the external output control information communication unit 180 when the touch operation on the display unit 250 is completed.

ステップS390にて、演算部110は、外部表示機器200に対する映像の出力を停止する。   In step S <b> 390, calculation unit 110 stops outputting video to external display device 200.

図4を参照して、外部表示機器200の制御構造について説明する。図4は、外部表示機器200が実行する処理の一部を表すフローチャートである。   A control structure of the external display device 200 will be described with reference to FIG. FIG. 4 is a flowchart showing a part of processing executed by the external display device 200.

ステップS410にて、演算部210は、携帯端末100から送信される映像信号の入力を受け付けるための準備を行なう。より具体的には、ステップS412にて、演算部210は、携帯端末100から外部表示機器200に入力される画像の解像度を決定する。ステップS414にて、演算部210は、外部入力制御情報通信部280を介して携帯端末100の外部出力制御情報通信部180と通信することにより、表示部250の画面サイズを、携帯端末100に通知する。他の局面において、演算部210は、上記解像度を含む信号を携帯端末100に送信する。   In step S410, calculation unit 210 makes preparations for accepting an input of a video signal transmitted from portable terminal 100. More specifically, in step S412, the calculation unit 210 determines the resolution of an image input from the mobile terminal 100 to the external display device 200. In step S414, the arithmetic unit 210 notifies the mobile terminal 100 of the screen size of the display unit 250 by communicating with the external output control information communication unit 180 of the mobile terminal 100 via the external input control information communication unit 280. To do. In another aspect, the arithmetic unit 210 transmits a signal including the resolution to the mobile terminal 100.

ステップS420にて、演算部210は、外部入力映像管理部270を介して、携帯端末100から送信される映像信号の入力の受信を開始する。   In step S420, operation unit 210 starts receiving an input of a video signal transmitted from portable terminal 100 via external input video management unit 270.

ステップS430にて、演算部210は、タッチパネル220からの出力信号に基づいて、タッチイベント外部送出処理を開始する。   In step S430, operation unit 210 starts touch event external transmission processing based on an output signal from touch panel 220.

ステップS440にて、演算部210は、タッチパネル220から送られるタッチ操作の内容を表す情報に基づいて、イベント種別を判定する。当該情報は、たとえば、タッチダウン操作が行われた点を表す座標値、タッチダウン操作が検出された領域を表す座標値、ムーブ操作が行われた軌跡を表す座標値、タッチアップ操作が検出された点を表す座標値を含む。演算部210は、イベント種別がタッチアップ操作またはムーブ操作であると判定すると、制御をステップS450に切り換える。演算部210は、イベント種別がタッチダウン操作であると判定すると、制御をステップS460に切り換える。   In step S440, operation unit 210 determines the event type based on information representing the content of the touch operation sent from touch panel 220. The information includes, for example, a coordinate value representing a point where a touchdown operation has been performed, a coordinate value representing a region where a touchdown operation has been detected, a coordinate value representing a locus where a move operation has been performed, and a touchup operation being detected. Contains the coordinate value that represents the point. If computing unit 210 determines that the event type is a touch-up operation or a move operation, control unit 210 switches control to step S450. If computing unit 210 determines that the event type is a touch-down operation, control unit 210 switches control to step S460.

ステップS450にて、演算部210は、外部入力制御情報通信部280を介して、外部表示機器200で検出されたイベント種別(タッチアップ操作またはムーブ操作)を携帯端末100に通知する。また、演算部210は、当該イベント種別で特定されるムーブ操作の移動量たはタッチアップ操作における座標値も、外部入力制御情報通信部280を介して、携帯端末100に通知する。   In step S450, calculation unit 210 notifies portable terminal 100 of the event type (touch-up operation or move operation) detected by external display device 200 via external input control information communication unit 280. In addition, the calculation unit 210 notifies the mobile terminal 100 of the movement amount of the move operation specified by the event type or the coordinate value in the touch-up operation via the external input control information communication unit 280.

ステップS460にて、タッチ面積算出部260は、タッチパネル制御部230からの出力に基づいて、表示部250において行なわれたタッチ操作によってタッチされた面積を算出する。当該面積は、たとえば、画素数として表わされる。   In step S <b> 460, touch area calculation unit 260 calculates the area touched by the touch operation performed on display unit 250 based on the output from touch panel control unit 230. The area is expressed as, for example, the number of pixels.

ステップS470にて、演算部210は、外部入力制御情報通信部280を介して、外部表示機器200で検出されたイベント種別(=タッチダウン操作)を携帯端末100に通知する。また、演算部210は、当該イベント種別で特定されるタッチダウン操作が検出された点または領域を表す座標値も、外部入力制御情報通信部280を介して、携帯端末100に通知する。   In step S470, calculation unit 210 notifies portable terminal 100 of the event type (= touchdown operation) detected by external display device 200 via external input control information communication unit 280. The calculation unit 210 also notifies the portable terminal 100 of the coordinate value representing the point or area where the touchdown operation specified by the event type is detected via the external input control information communication unit 280.

ステップS480にて、演算部210は、タッチイベント外部送出処理を終了する。
ステップS490にて、演算部210は、携帯端末100から送信された映像信号の入力の受け付けを終了する。
In step S480, operation unit 210 ends the touch event external transmission process.
In step S490, operation unit 210 ends accepting input of the video signal transmitted from portable terminal 100.

以上のようにして、本実施の形態によれば、外部表示機器200の画面サイズの大きさを考慮したタッチ操作が可能となるため、大きい画面サイズの外部表示機器200において、小さいタッチ操作でも大きく画面操作することができる。   As described above, according to the present embodiment, a touch operation in consideration of the size of the screen size of the external display device 200 can be performed. The screen can be operated.

今回開示された実施の形態はすべての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は上記した説明ではなくて特許請求の範囲によって示され、特許請求の範囲と均等の意味および範囲内でのすべての変更が含まれることが意図される。   The embodiment disclosed this time should be considered as illustrative in all points and not restrictive. The scope of the present invention is defined by the terms of the claims, rather than the description above, and is intended to include any modifications within the scope and meaning equivalent to the terms of the claims.

1 システム、11,12,15,18,19,21,22,25,28,29 画像、20 指、24 移動量、100 携帯端末、110,210 演算部、120,220、130,230 タッチパネル制御部、140,240 表示制御部、150,250 表示部、160 メモリ、170 外部出力映像管理部、180,280 外部出力制御情報通信部、190 外部タッチイベント制御部、200 外部出力機器、260 タッチ面積算出部、270 外部入力映像管理部、280 外部入力制御情報通信部。   1 system 11, 12, 15, 18, 19, 19, 22, 25, 28, 29 images, 20 fingers, 24 travel, 100 mobile terminals, 110, 210 computing units, 120, 220, 130, 230 touch panel control , 140, 240 Display control unit, 150, 250 Display unit, 160 Memory, 170 External output video management unit, 180, 280 External output control information communication unit, 190 External touch event control unit, 200 External output device, 260 Touch area Calculation unit, 270 external input video management unit, 280 external input control information communication unit.

Claims (5)

映像を表示機器に表示可能な携帯端末であって、
前記表示機器に映像信号を送信するための送信手段と、
画像を表示するための端末表示部と、
前記表示部の画像表示領域に対するタッチ操作を受け付けるためのタッチパネル制御部と、
前記携帯端末の動作を制御するための端末制御部とを備え、
前記表示機器は、
前記携帯端末から送信される信号を受信するための受信手段と、
画像を表示するための外部表示部と、
前記外部表示部の画像表示領域に対するタッチ操作を受け付けるためのタッチパネル制御部と、
前記表示機器の動作を制御するための機器制御部とを備え、
前記端末制御部は、
前記表示機器から、前記外部表示部に対するタッチ操作を表す情報を受信し、
前記端末表示部の表示画面のサイズと、前記外部表示部の表示画面のサイズとに基づいて、前記受信された情報により特定されるタッチ操作に応じた画面操作を前記端末表示部に実行させるように構成されている、携帯端末。
A portable terminal capable of displaying video on a display device,
Transmitting means for transmitting a video signal to the display device;
A terminal display for displaying images;
A touch panel control unit for receiving a touch operation on the image display area of the display unit;
A terminal control unit for controlling the operation of the mobile terminal,
The display device
Receiving means for receiving a signal transmitted from the portable terminal;
An external display for displaying images;
A touch panel control unit for accepting a touch operation on the image display area of the external display unit;
A device control unit for controlling the operation of the display device,
The terminal control unit
Receiving information representing a touch operation on the external display unit from the display device;
Based on the size of the display screen of the terminal display unit and the size of the display screen of the external display unit, the terminal display unit is caused to execute a screen operation corresponding to the touch operation specified by the received information. A mobile terminal configured in
前記外部表示部に対するタッチ操作は、タッチダウン操作を含み、
当該タッチダウン操作を表す情報は、タッチダウンが検出された領域の面積を表す情報を含む、請求項1に記載の携帯端末。
The touch operation on the external display unit includes a touch-down operation,
The mobile terminal according to claim 1, wherein the information representing the touchdown operation includes information representing an area of a region where the touchdown is detected.
前記端末制御部は、前記領域の面積が予め設定された閾値以上である場合に、前記端末表示部の表示画面のサイズと、前記外部表示部の表示画面のサイズとの比率に応じて、前記端末表示部における画面の移動量を算出するように構成されている、請求項2に記載の携帯端末。   When the area of the region is equal to or larger than a preset threshold, the terminal control unit, according to the ratio between the size of the display screen of the terminal display unit and the size of the display screen of the external display unit, The mobile terminal according to claim 2, wherein the mobile terminal is configured to calculate a moving amount of the screen in the terminal display unit. 前記端末制御部は、前記領域の面積が前記閾値以下である場合に、前記タッチダウン操作後に行われるムーブ操作による前記外部表示部における移動量を、前記端末表示部における移動量として算出するように構成されている、請求項3に記載の携帯端末。   When the area of the region is equal to or less than the threshold, the terminal control unit calculates a movement amount in the external display unit due to a move operation performed after the touchdown operation as a movement amount in the terminal display unit. The mobile terminal according to claim 3, which is configured. 映像を表示するためのシステムであって、
携帯端末と、
前記携帯端末と通信可能な表示機器とを備え、
前記携帯端末は、
前記表示機器に映像信号を送信するための送信手段と、
画像を表示するための端末表示部と、
前記表示部の画像表示領域に対するタッチ操作を受け付けるためのタッチパネル制御部と、
前記携帯端末の動作を制御するための端末制御部とを備え、
前記表示機器は、
前記携帯端末から送信される信号を受信するための受信手段と、
画像を表示するための外部表示部と、
前記外部表示部の画像表示領域に対するタッチ操作を受け付けるためのタッチパネル制御部と、
前記表示機器の動作を制御するための機器制御部とを備え、
前記端末制御部は、
前記表示機器から、前記外部表示部に対するタッチ操作を表す情報を受信し、
前記端末表示部の表示画面のサイズと、前記外部表示部の表示画面のサイズとに基づいて、前記受信された情報により特定されるタッチ操作に応じた画面操作を前記端末表示部に実行させるように構成されている、システム。
A system for displaying video,
A mobile device,
A display device capable of communicating with the portable terminal,
The portable terminal is
Transmitting means for transmitting a video signal to the display device;
A terminal display for displaying images;
A touch panel control unit for receiving a touch operation on the image display area of the display unit;
A terminal control unit for controlling the operation of the mobile terminal,
The display device
Receiving means for receiving a signal transmitted from the portable terminal;
An external display for displaying images;
A touch panel control unit for accepting a touch operation on the image display area of the external display unit;
A device control unit for controlling the operation of the display device,
The terminal control unit
Receiving information representing a touch operation on the external display unit from the display device;
Based on the size of the display screen of the terminal display unit and the size of the display screen of the external display unit, the terminal display unit is caused to execute a screen operation corresponding to the touch operation specified by the received information. Configured in the system.
JP2013047810A 2013-03-11 2013-03-11 Portable terminal and system for displaying video Pending JP2014174808A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2013047810A JP2014174808A (en) 2013-03-11 2013-03-11 Portable terminal and system for displaying video

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2013047810A JP2014174808A (en) 2013-03-11 2013-03-11 Portable terminal and system for displaying video

Publications (1)

Publication Number Publication Date
JP2014174808A true JP2014174808A (en) 2014-09-22

Family

ID=51695954

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013047810A Pending JP2014174808A (en) 2013-03-11 2013-03-11 Portable terminal and system for displaying video

Country Status (1)

Country Link
JP (1) JP2014174808A (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017102857A (en) * 2015-12-04 2017-06-08 ファナック株式会社 Touch panel input device

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009157908A (en) * 2007-12-07 2009-07-16 Sony Corp Information display terminal, information display method, and program
JP2010262525A (en) * 2009-05-08 2010-11-18 Alps Electric Co Ltd Input processing device
JP2012524474A (en) * 2009-04-14 2012-10-11 クゥアルコム・インコーポレイテッド External touch screen for mobile devices

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009157908A (en) * 2007-12-07 2009-07-16 Sony Corp Information display terminal, information display method, and program
JP2012524474A (en) * 2009-04-14 2012-10-11 クゥアルコム・インコーポレイテッド External touch screen for mobile devices
JP2010262525A (en) * 2009-05-08 2010-11-18 Alps Electric Co Ltd Input processing device

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017102857A (en) * 2015-12-04 2017-06-08 ファナック株式会社 Touch panel input device

Similar Documents

Publication Publication Date Title
US8760557B2 (en) User interface for a digital camera
US20160283059A1 (en) Terminal and method for setting menu environments in the terminal
US9720567B2 (en) Multitasking and full screen menu contexts
US9704028B2 (en) Image processing apparatus and program
US20130106700A1 (en) Electronic apparatus and input method
WO2022048633A1 (en) Display method and apparatus and electronic device
US20120299846A1 (en) Electronic apparatus and operation support method
JP6105822B1 (en) Touch screen control method and apparatus
TW201421350A (en) Method for displaying images of touch control device on external display device
EP2530573A2 (en) Touch control method and electronic apparatus
JP2015504219A (en) Pan animation
WO2014097650A1 (en) Method and system for wirelessly controlling image display
CN107148776B (en) Method, device and system for acquiring video data and computer readable storage medium
US20150253943A1 (en) Method and Apparatus for Implementing Remote Browsing
JP2018531564A6 (en) Method, apparatus and system for obtaining video data and computer-readable storage medium
JP5384706B2 (en) Multi-touch operation method and system
CN113655929A (en) Interface display adaptation processing method and device and electronic equipment
CN111880759A (en) Control method and device for multi-split screen display picture, display and storage medium
US9910560B2 (en) Electronic apparatus and menu displaying method
JP5783610B2 (en) INPUT DISPLAY CONTROL DEVICE, THIN CLIENT SYSTEM, INPUT DISPLAY CONTROL METHOD, AND PROGRAM
US20140215347A1 (en) Portable device and control method thereof
US10645144B2 (en) Computer-implemented method for controlling a remote device with a local device
JP2014174808A (en) Portable terminal and system for displaying video
CA2807866C (en) User interface for a digital camera
WO2017016333A1 (en) Screen adjustment method and device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20150916

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20160727

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160823

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20170228