JP2014174808A - Portable terminal and system for displaying video - Google Patents
Portable terminal and system for displaying video Download PDFInfo
- Publication number
- JP2014174808A JP2014174808A JP2013047810A JP2013047810A JP2014174808A JP 2014174808 A JP2014174808 A JP 2014174808A JP 2013047810 A JP2013047810 A JP 2013047810A JP 2013047810 A JP2013047810 A JP 2013047810A JP 2014174808 A JP2014174808 A JP 2014174808A
- Authority
- JP
- Japan
- Prior art keywords
- display
- unit
- terminal
- external
- touch
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Abstract
Description
本発明は、映像の表示に関し、より特定的には、映像を表示可能な携帯端末における制御に関する。 The present invention relates to video display, and more particularly to control in a mobile terminal capable of displaying video.
ユーザインターフェイスとしてタッチパネルを有する電子機器が増えており、操作性を向上させるための技術も提案されている。 Electronic devices having a touch panel as a user interface are increasing, and a technique for improving operability has also been proposed.
たとえば、特開2012−164272号公報(特許文献1)は、「タッチパネル機器の操作性を向上させることができる操作情報取得装置」を開示している。操作情報取得装置100は、タッチパネルディスプレイ200の出力信号に基づいて操作情報を取得する装置であって、出力信号に基づいて操作種別を取得する操作種別判定部120と、出力信号に基づいてタッチパネルにおけるタッチ面積を取得するタッチ面積算出部130と、取得されたタッチ面積に対応する量を、取得された操作種別の操作量として決定する操作量決定部140と」を備える([要約]参照)。
For example, Japanese Patent Laying-Open No. 2012-164272 (Patent Document 1) discloses “an operation information acquisition device capable of improving the operability of a touch panel device”. The operation
ところで、携帯端末(たとえばスマートフォン、タブレット端末その他の携帯型の情報通信端末)と外部表示機器(たとえばテレビ)とを接続して、携帯端末が有する映像コンテンツを外部表示機器に表示して、携帯端末の画面よりも通常は大きな画面を有する外部表示機器の画面で当該映像コンテンツを視聴したいという要請がある。そのとき、外部表示機器がタッチパネルを有する場合に、外部表示機器に表示されている画像へのタッチ操作に基づいて画面を切り換えようとする操作もある。このような操作が行われる場合、携帯端末の画面のサイズと外部表示機器の画面のサイズとが異なるために、外部表示機器のタッチパネルに対する操作による画面の移動量と、携帯端末の画面の移動量とが異なる場合もあり得る。そのため、外部表示機器のユーザが操作について違和感を感じる場合もある。したがって、外部表示機器における操作性を向上させるための技術が必要とされている。 By the way, a portable terminal (for example, a smart phone, a tablet terminal or other portable information communication terminal) is connected to an external display device (for example, a television), and the video content of the portable terminal is displayed on the external display device. There is a demand for viewing the video content on a screen of an external display device having a screen that is usually larger than the screen. At that time, when the external display device has a touch panel, there is also an operation for switching the screen based on a touch operation on an image displayed on the external display device. When such an operation is performed, since the screen size of the mobile terminal and the screen size of the external display device are different, the screen movement amount by the operation on the touch panel of the external display device and the screen movement amount of the mobile terminal May be different. Therefore, the user of the external display device may feel uncomfortable about the operation. Therefore, a technique for improving the operability in the external display device is required.
この開示は、上述のような問題点を解決するためになされたものであって、ある局面における目的は、外部表示機器における画面の操作性が向上するように映像を外部表示機器に送信できる携帯端末を提供することである。他の局面における目的は、携帯端末と通信可能な外部表示機器における画面の操作性が向上するシステムを提供することである。 This disclosure has been made in order to solve the above-described problems, and an object in one aspect is to provide a portable device capable of transmitting video to an external display device so that operability of a screen in the external display device is improved. To provide a terminal. An object in another aspect is to provide a system that improves the operability of a screen in an external display device that can communicate with a mobile terminal.
一実施の形態に従うと、映像を表示機器に表示可能な携帯端末は、表示機器に映像信号を送信するための送信手段と、画像を表示するための端末表示部と、表示部の画像表示領域に対するタッチ操作を受け付けるためのタッチパネル制御部と、携帯端末の動作を制御するための端末制御部とを備える。表示機器は、携帯端末から送信される信号を受信するための受信手段と、画像を表示するための外部表示部と、外部表示部の画像表示領域に対するタッチ操作を受け付けるためのタッチパネル制御部と、表示機器の動作を制御するための機器制御部とを備える。端末制御部は、表示機器から、外部表示部に対するタッチ操作を表す情報を受信し、端末表示部の表示画面のサイズと、外部表示部の表示画面のサイズとに基づいて、受信された情報により特定されるタッチ操作に応じた画面操作を端末表示部に実行させるように構成されている。 According to one embodiment, a mobile terminal capable of displaying video on a display device includes a transmission means for transmitting a video signal to the display device, a terminal display unit for displaying an image, and an image display area of the display unit A touch panel control unit for receiving a touch operation on the mobile phone and a terminal control unit for controlling the operation of the mobile terminal. The display device includes a receiving unit for receiving a signal transmitted from the mobile terminal, an external display unit for displaying an image, a touch panel control unit for receiving a touch operation on the image display area of the external display unit, A device control unit for controlling the operation of the display device. The terminal control unit receives information representing a touch operation on the external display unit from the display device, and based on the received information based on the size of the display screen of the terminal display unit and the size of the display screen of the external display unit. The terminal display unit is configured to execute a screen operation corresponding to the specified touch operation.
好ましくは、外部表示部に対するタッチ操作は、タッチダウン操作を含む。当該タッチダウン操作を表す情報は、タッチダウンが検出された領域の面積を表す情報を含む。 Preferably, the touch operation on the external display unit includes a touch-down operation. The information representing the touchdown operation includes information representing the area of the region where the touchdown is detected.
好ましくは、端末制御部は、領域の面積が予め設定された閾値以上である場合に、端末表示部の表示画面のサイズと、外部表示部の表示画面のサイズとの比率に応じて、端末表示部における画面の移動量を算出するように構成されている。 Preferably, the terminal control unit displays the terminal according to a ratio between the size of the display screen of the terminal display unit and the size of the display screen of the external display unit when the area of the region is equal to or larger than a preset threshold. The movement amount of the screen in the unit is calculated.
好ましくは、端末制御部は、領域の面積が閾値以下である場合に、タッチダウン操作後に行われるムーブ操作による外部表示部における移動量を、端末表示部における移動量として算出するように構成されている。 Preferably, the terminal control unit is configured to calculate a movement amount in the external display unit by a move operation performed after the touchdown operation as a movement amount in the terminal display unit when the area of the region is equal to or less than a threshold value. Yes.
他の実施の形態に従うと、映像を表示するためのシステムが提供される。このシステムは、携帯端末と、携帯端末と通信可能な表示機器とを備える。携帯端末は、表示機器に映像信号を送信するための送信手段と、画像を表示するための端末表示部と、表示部の画像表示領域に対するタッチ操作を受け付けるためのタッチパネル制御部と、携帯端末の動作を制御するための端末制御部とを備える。表示機器は、携帯端末から送信される信号を受信するための受信手段と、画像を表示するための外部表示部と、外部表示部の画像表示領域に対するタッチ操作を受け付けるためのタッチパネル制御部と、表示機器の動作を制御するための機器制御部とを備える。端末制御部は、表示機器から、外部表示部に対するタッチ操作を表す情報を受信し、端末表示部の表示画面のサイズと、外部表示部の表示画面のサイズとに基づいて、受信された情報により特定されるタッチ操作に応じた画面操作を端末表示部に実行させるように構成されている。 According to another embodiment, a system for displaying video is provided. This system includes a mobile terminal and a display device capable of communicating with the mobile terminal. The portable terminal includes a transmission means for transmitting a video signal to a display device, a terminal display unit for displaying an image, a touch panel control unit for receiving a touch operation on an image display area of the display unit, and a portable terminal A terminal control unit for controlling the operation. The display device includes a receiving unit for receiving a signal transmitted from the mobile terminal, an external display unit for displaying an image, a touch panel control unit for receiving a touch operation on the image display area of the external display unit, A device control unit for controlling the operation of the display device. The terminal control unit receives information representing a touch operation on the external display unit from the display device, and based on the received information based on the size of the display screen of the terminal display unit and the size of the display screen of the external display unit. The terminal display unit is configured to execute a screen operation corresponding to the specified touch operation.
ある局面において、タッチパネルを備える外部表示機器における画面の操作性が向上し得る。 In one aspect, the operability of a screen in an external display device including a touch panel can be improved.
この発明の上記および他の目的、特徴、局面および利点は、添付の図面と関連して理解されるこの発明に関する次の詳細な説明から明らかとなるであろう。 The above and other objects, features, aspects and advantages of the present invention will become apparent from the following detailed description of the present invention taken in conjunction with the accompanying drawings.
以下、図面を参照しつつ、本発明の実施の形態について説明する。以下の説明では、同一の部品には同一の符号を付してある。それらの名称および機能も同じである。したがって、それらについての詳細な説明は繰り返さない。 Hereinafter, embodiments of the present invention will be described with reference to the drawings. In the following description, the same parts are denoted by the same reference numerals. Their names and functions are also the same. Therefore, detailed description thereof will not be repeated.
<携帯端末100の構成>
図1を参照して、本実施の形態に係るシステム1について説明する。図1は、本発明の実施の形態に係るシステム1の構成の概略を表す図である。システム1は、携帯端末100と、外部表示機器200とを備える。携帯端末100は、たとえば、スマートフォン、タブレット端末その他の通信機能と画像表示機能とを備える携帯型の通信端末として実現される。外部表示機器200は、テレビ、モニタ装置その他の機器であって、上記通信端末との通信機能を有する映像表示装置として実現される。
<Configuration of
A system 1 according to the present embodiment will be described with reference to FIG. FIG. 1 is a diagram showing an outline of a configuration of a system 1 according to an embodiment of the present invention. The system 1 includes a
携帯端末100は、演算部110と、タッチパネル120と、タッチパネル制御部130と、表示制御部140と、表示部150と、メモリ160と、外部出力映像管理部170と、外部出力制御情報通信部180と、外部タッチイベント制御部190とを備える。
The
演算部110は、携帯端末100に対して予め規定された処理を実現するための命令を実行する。
タッチパネル120は、表示部150に対する操作を検出する。
タッチパネル制御部130は、演算部110によって出力される命令に基づいて、タッチパネル120の動作を制御する。当該動作は、たとえば、タッチ操作の検出部のオンやオフ等を含む。
The
The touch
表示制御部140は、演算部110から出力される命令に基づいて、表示部150における画面の表示を制御する。たとえば、携帯端末100と外部表示機器200との通信が確立されている場合において、携帯端末100が映像信号を外部表示機器200に送信しているとき、表示制御部140は、表示部150における動画像の表示または非表示を切り換える。
The
表示部150は、表示制御部140から出力される信号に基づいて、画像を表示する。表示される画像は、メモリ160に保存されている動画像、静止画像、写真その他のコンテンツ、携帯端末100の外部から与えられる同様のコンテンツ等を含む。表示部150は、液晶モニタ、有機EL(Electro Luminescence)モニタその他の表示装置として実現される。
The display unit 150 displays an image based on the signal output from the
メモリ160は、携帯端末100に対して予め規定された動作を実行させるためのデータおよびプログラムを含むシステム情報、および、前述のコンテンツその他のユーザデータを格納する。メモリ160は、フラッシュメモリ、ハードディスク、SSD(Solid State Drive)その他の不揮発記憶装置、あるいは、RAM(Random Access Memory)その他の揮発記憶装置として実現される。また、メモリ160は、着脱可能なメモリカードによっても実現され得る。
The
外部出力映像管理部170は、演算部110の制御に基づいて、携帯端末100の外部に対する映像信号の出力(送信)を制御する。たとえば、外部出力映像管理部170は、メモリ160に保存されている映像データをストリーム信号として無線送信する。
The external output
外部出力制御情報通信部180は、外部表示機器200によって送信された信号の入力を受け付ける。当該信号は、外部表示機器200において検出された表示部250に対するタッチ操作(タッチイベントともいう。)の種別、当該タッチ操作を特定する座標値情報等を含む。タッチ操作は、たとえば、表示部250におけるタッチダウン操作、ムーブ操作、タッチアップ操作であるが、これらに限られない。座標値情報は、たとえば、タッチダウン操作またはタッチアップ操作が検出された点または領域を表す座標値、または、ムーブ操作が行われた移動量を表す座標値を含む。
The external output control
外部タッチイベント制御部190は、外部出力制御情報通信部180からの出力を受け、外部表示機器200において検出されたタッチイベントに基づいて表示部150における画像の表示を制御する。たとえば、携帯端末100が、表示部250におけるタッチダウン操作が行なわれた旨および当該タッチダウン操作を表す情報(タッチダウンされた点の座標値)を外部表示機器200から受信すると、外部タッチイベント制御部190は、、当該情報に基づいて、当該タッチダウン操作が行なわれた点に相当する点の座標値を、表示部150に表示されている画像の中で特定する。その後の処理は、この点の座標値が起点となる。
The external touch
別の局面において、携帯端末100が、表示部250におけるムーブ操作が行なわれた旨および当該ムーブ操作を表す情報(たとえば、画面上の軌跡を表す座標値)を外部表示機器200から受信すると、外部タッチイベント制御部190は、当該情報に基づいて、当該ムーブ操作が行なわれた軌跡に相当する各点の座標値を、表示部150に表示されている画像の中で特定する。
In another aspect, when the
さらに別の局面において、携帯端末100が、表示部250におけるタッチアップ操作が行なわれた旨および当該タッチアップ操作を表す情報(タッチアップされた点の座標値)を外部表示機器200から受信すると、外部タッチイベント制御部190は、当該情報に基づいて、当該タッチアップ操作が行なわれた点に相当する点の座標値を、表示部150に表示されている画像の中で特定する。
In yet another aspect, when the
演算部110とタッチパネル制御部130と表示制御部140と外部タッチイベント制御部190とは、たとえば、CPU(Central Processing Unit)その他のプロセッサとして実現される。
The
<外部表示機器200の構成>
図1を再び参照して、外部表示機器200は、演算部210と、タッチパネル220と、タッチパネル制御部230と、表示制御部240と、表示部250と、タッチ面積算出部260と、外部入力映像管理部270と、外部入力制御情報通信部280とを備える。
<Configuration of
Referring to FIG. 1 again, the
演算部210は、外部表示機器200の動作を制御する。
タッチパネル220は、表示部250の画像表示領域に対するタッチ操作を受け付ける。
The
The
タッチパネル制御部230は、演算部210によって出力される命令に基づいて、タッチパネル220の動作を制御する。当該動作は、たとえば、タッチ操作の検出部のオンやオフ等を含む。
The touch
表示制御部240は、演算部210から出力される命令に基づいて、表示部250における画面の表示を制御する。たとえば、携帯端末100と外部表示機器200との通信が確立されている場合において、外部表示機器200が、携帯端末100から映像信号を受信すると、表示制御部240は、その映像信号に基づく映像を表示部250に表示する。外部表示機器200がテレビである場合には、表示制御部240は、チューナによる選局結果に応じてテレビ放送番組を表示部250に表示する。
The
表示部250は、表示制御部240から出力される信号に基づいて、画像を表示する。表示される画像は、携帯端末100から送信された映像信号に基づく動画像、静止画像、写真その他のコンテンツ、テレビ放送信号に基づく番組等である。表示部250は、液晶モニタ、有機ELモニタその他の表示装置として実現される。
The
タッチ面積算出部260は、タッチパネル制御部230からの出力に基づいて、タッチ操作が検出された領域の面積を算出する。当該面積は、たとえば、画素数として算出される。
The touch
外部入力映像管理部270は、演算部210の制御に基づいて、外部表示機器200の外部に対する映像信号の受信を制御する。たとえば、外部入力映像管理部270は、携帯端末100との通信を確立し、携帯端末100から送信される映像信号の受信を受け付ける。
The external input video management unit 270 controls reception of video signals to the outside of the
外部入力制御情報通信部280は、外部表示機器200において検出されたタッチ操作に応じた信号を携帯端末100に送信する。当該信号は、検出された表示部250に対するタッチ操作(タッチイベントともいう。)の種別、当該タッチ操作を特定する座標値情報等を含む。タッチ操作は、たとえば、表示部250におけるタッチダウン操作、ムーブ操作、タッチアップ操作であるが、これらに限られない。座標値情報は、たとえば、タッチダウン操作またはタッチアップ操作が検出された点または領域を表す座標値、または、ムーブ操作が行われた移動量を表す座標値を含む。
The external input control
なお、演算部210とタッチパネル制御部230と表示制御部240とタッチ面積算出部260とは、たとえば、CPUその他のプロセッサとして実現される。
In addition, the calculating
<技術思想>
ここで、図1を参照して、本実施の形態に係る技術思想について説明する。
<Technology>
Here, the technical concept according to the present embodiment will be described with reference to FIG.
たとえば、携帯端末100から外部表示機器200に映像を出力するとき、多くの場合、外部表示機器200(たとえば、液晶テレビ)の画面サイズは、携帯端末100(たとえば、スマートフォン、タブレット端末その他の携帯情報通信端末)の画面サイズよりも大きい。
For example, when a video is output from the
ユーザが、外部表示機器200においてタッチ操作を行なう場合、次の2つの場合がある。
・ケース(1)外部表示機器200の表示部250の画面上の位置をタッチ操作で指す場合(たとえば、表示部250に表示されているブラウザ画面へのクリック操作など)
・ケース(2)表示部250の画面において表示内容を大きく移動する場合(たとえば、画面を大きくスクロールする動作など)
ケース(1)に関しては、特に画面のサイズによる操作性への懸念はないが、ケース(2)に関しては、画面サイズが大きくなるにつれ、大きく画面スクロールをしようとすると、操作しにくくなる場合がある。
When the user performs a touch operation on the
Case (1) When a position on the screen of the
Case (2) When the display content is moved largely on the screen of the display unit 250 (for example, an operation of scrolling the screen greatly)
Regarding the case (1), there is no particular concern about the operability due to the size of the screen. However, regarding the case (2), as the screen size increases, it may become difficult to operate if the screen is greatly scrolled. .
そこで、本実施の形態においては、上記について、ケース(2)に関する操作性を向上させ、また、ケース(1)の操作性が損なわれない方法が開示される。 Therefore, in the present embodiment, a method is disclosed in which the operability related to the case (2) is improved and the operability of the case (1) is not impaired.
たとえば、携帯端末100から外部表示機器200への映像出力時に、外部表示機器200からのタッチ操作情報を携帯端末100で処理する場合を考える。この場合、携帯端末100から送出している映像の解像度に対する外部表示機器200の画面サイズ(実際の大きさ)が携帯端末100で把握できないために、ケース(2)のような状況では、ユーザに直感的なタッチ操作を提供できない。
For example, let us consider a case where touch operation information from the
そこで、以下のような手法が考えられる。
[ステップ1]
携帯端末100が外部表示機器200に対する映像信号の出力を開始する。
Therefore, the following method can be considered.
[Step 1]
The mobile terminal 100 starts outputting video signals to the
たとえば、映像信号の出力を開始する際の携帯端末100と外部表示機器200との間のネゴシエーションにて、携帯端末100は、携帯端末100から外部表示機器200に送出される映像信号の解像度を決定する。携帯端末100は、外部表示機器200の表示部250の画面サイズ(SA)を外部表示機器200から取得して、当該画面サイズと表示部150の画面サイズ(SB)との比率(X=SA/SB)を算出する。
For example, in the negotiation between the
[ステップ2]
携帯端末100が映像信号を出力している間に、外部表示機器200は、ユーザによるタッチパネル220に対する操作を受け付ける。
[Step 2]
While the
タッチパネル220に対する操作に応答して、外部表示機器200は、携帯端末100に対して、外部入力制御情報通信部280を介して、情報(以下「タッチ操作情報」ともいう。)を送信する。タッチ操作情報は、たとえば、タッチダウンが検出された点の座標値情報と、ムーブ操作が検出された点(たとえば、開始点または終了点)の座標値情報と、タッチダウン操作が検出された領域のタッチ面積(たとえば、画素数)情報とのいずれかを含む。
In response to an operation on the
一方、携帯端末100は、以下のような処理を実行する。まず、携帯端末100は、外部表示機器200から、タッチダウンの情報を受信した際、タッチ面積の情報を取得する。タッチ面積が予め設定された閾値以上である場合、演算部110は、タッチダウン後のムーブ座標値情報から算出される移動量情報に、ステップ1で算出された画面サイズの比率(X)を乗算して、移動量を決定する。外部表示機器200の表示部250が携帯端末100の表示部150よりも大きければ、移動量は大きくなる。他方、タッチ面積が予め設定された閾値以下である場合、演算部110は、タッチダウン後のムーブ操作の座標情報をそのまま使用し、移動量とする。仮に、演算部110が、一律で画面比率を乗算した移動量を用いると、細かな操作を阻害する要因にもなり得るため、タッチダウン時のタッチ面積を用いることによりタッチダウン操作を行なったユーザの意思を考慮する。
On the other hand, the
なお、上記の例では、演算部110は、外部表示機器200の表示部250においてタッチダウンが行なわれた領域の面積でユーザの意図を判別しているが、外部表示機器200が、タッチパネル220からの出力を用いてタッチ操作が行なわれた軌跡や領域の形状等を取得できるようにしてもよい。外部表示機器200が、当該形状を示す情報を携帯端末100に送ることで、その情報をユーザ意図として判別してもよい。
In the above example, the
<表示態様>
図2を参照して、本実施の形態に係る携帯端末100および外部表示機器200における画面の表示態様について説明する。図2は、携帯端末100の表示部150と外部表示機器200の表示部における画面の推移を表す図である。
<Display mode>
With reference to FIG. 2, the display mode of the screen in
状態Aに示されるように、携帯端末100と外部表示機器200とは通信状態にある。携帯端末100は、表示部150に画像11,12を表示している。このとき、外部表示機器200は、携帯端末100から送られた映像信号に基づいて、画像21,22を表示している。画像21は画像11に対応する。画像22は画像12に対応する。ある局面において、外部表示機器200のユーザ(視聴者)は、その指20を表示部250の表示領域にタッチダウンし、ムーブ操作を行なう。
As shown in the state A, the
状態Bに示されるように、外部表示機器200に対して行なわれたムーブ操作の移動量24と画面サイズの比率(X)との積が予め規定された閾値を上回る場合には、携帯端末100における画面の移動量も当該積に応じて大きくなる。より具体的には、外部表示機器200に表示されていた画像21は表示されなくなり、画像21は画像25として新たな場所に表示される。このとき、携帯端末100に表示されていた画像11も表示されなくなり、画像12は、画像15として表示される。
As shown in state B, when the product of the
一方、状態Cに示されるように、外部表示機器200に対して行なわれたムーブ操作の移動量と画面のサイズの比率(X)との積が予め規定された閾値よりも小さい場合には、携帯端末100における画面の移動量も当該積に応じて小さくなる。より具体的には、外部表示機器200に表示されていた画像21は、画像28として表示される。画像22は、画像29として表示される。また、携帯端末100に表示されていた画像11は画像18として表示される。画像12は画像19として表示される。
On the other hand, as shown in the state C, when the product of the movement amount of the move operation performed on the
<制御構造>
図3を参照して、本実施の形態に係る携帯端末100の制御構造について説明する。図3は、演算部110が実行する処理の一部を表すフローチャートである。この処理は、携帯端末100に保存されているプログラムがプロセッサによって実行されることにより実現される。
<Control structure>
With reference to FIG. 3, the control structure of
ステップS310にて、演算部110は、外部表示機器200に対する映像の出力準備を実行する。
In step S <b> 310,
より具体的には、ステップS312にて、演算部110は、携帯端末100において設定されている情報に基づいて外部表示機器200に対して出力される映像の解像度を決定する。演算部110は、携帯端末100と外部表示機器200との通信を確立する。演算部110は、外部表示機器200に映像の出力要求を送信する。
More specifically, in step S312,
ステップS314にて、演算部110は、外部表示機器200によって送信された信号から表示部250の表示領域のサイズを取得する。他の局面において、携帯端末100は、外部表示機器200から送られた、表示部250における解像度を取得する。
In step S314,
ステップS316にて、演算部110は、携帯端末100の表示部150のサイズと、外部表示機器200の表示部250のサイズとの比率(X)を算出する。
In step S316,
ステップS320にて、演算部110は、外部出力映像管理部170を介して、外部表示機器200に対する映像の出力を開始する。
In step S320,
ステップS330にて、演算部110は、外部タッチイベント制御部190を介して、外部タッチイベントの取得処理を開始する。具体的には、外部タッチイベント制御部190は、外部出力制御情報通信部180を介して外部表示機器200からの信号を受信する。この信号は、表示部250におけるタッチ操作情報を含む。外部タッチイベント制御部190は、このタッチ操作情報から、外部表示機器200の表示部250においてどのようなタッチ操作がどの程度(移動量、座標値等)行なわれたかを表す情報を取得する。
In step S330,
ステップS340にて、演算部110は、タッチ操作情報に基づいて、表示部250において行なわれたイベント(タッチ操作の種類)を判定する。当該イベントがタッチアップ操作である場合には、演算部110は、制御をステップS350に切り換える。当該イベントがタッチダウン操作である場合には、演算部110は、制御をステップS360に切り換える。当該イベントがムーブ操作である場合には、演算部110は、制御をステップS370に切り換える。
In step S340,
ステップS350にて、演算部110は、メモリ160をクリアする。より具体的には、演算部110は、タッチ操作に応じた描画処理を実現するために割り当てられたメモリ領域を解放する。
In step S350,
ステップS360にて、演算部110は、外部表示機器200から送られた信号から表示部250においてタッチされた領域の面積(タッチ面積)を示す情報を取得し、当該情報をメモリ160に保持する。
In step S <b> 360,
ステップS370にて、演算部110は、タッチ面積をメモリ160から読み出す。
ステップS380にて、演算部110は、当該タッチ面積と閾値との大小関係を判定する。当該タッチ面積が予め設定された閾値よりも大きい場合には、演算部110は、制御をステップS382に切り換える。そうでない場合には、演算部110は、制御をステップS386に切り換える。
In step S370,
In step S380,
ステップS382にて、演算部110は、ステップS316において算出しておいた画面比率(X)と当該移動量との積を算出することにより、移動量を重み付けする。これにより、携帯端末100における移動量が導出される。
In step S382, the
ステップS384にて、演算部110は、算出した移動量を用いて、表示部150におけるムーブ処理を実行する。
In step S384,
ステップS386にて、演算部110は、外部タッチイベント制御部190からの信号に基づいて、外部タッチイベントの取得処理が終了したことを検知する。より具体的には、演算部110は、外部表示機器200からの信号に基づいて、表示部250におけるタッチ操作が終了したことを検知する。この信号は、表示部250におけるタッチ操作が終了した場合に、外部入力制御情報通信部280から外部出力制御情報通信部180に送信される。
In step S386,
ステップS390にて、演算部110は、外部表示機器200に対する映像の出力を停止する。
In step S <b> 390,
図4を参照して、外部表示機器200の制御構造について説明する。図4は、外部表示機器200が実行する処理の一部を表すフローチャートである。
A control structure of the
ステップS410にて、演算部210は、携帯端末100から送信される映像信号の入力を受け付けるための準備を行なう。より具体的には、ステップS412にて、演算部210は、携帯端末100から外部表示機器200に入力される画像の解像度を決定する。ステップS414にて、演算部210は、外部入力制御情報通信部280を介して携帯端末100の外部出力制御情報通信部180と通信することにより、表示部250の画面サイズを、携帯端末100に通知する。他の局面において、演算部210は、上記解像度を含む信号を携帯端末100に送信する。
In step S410,
ステップS420にて、演算部210は、外部入力映像管理部270を介して、携帯端末100から送信される映像信号の入力の受信を開始する。
In step S420,
ステップS430にて、演算部210は、タッチパネル220からの出力信号に基づいて、タッチイベント外部送出処理を開始する。
In step S430,
ステップS440にて、演算部210は、タッチパネル220から送られるタッチ操作の内容を表す情報に基づいて、イベント種別を判定する。当該情報は、たとえば、タッチダウン操作が行われた点を表す座標値、タッチダウン操作が検出された領域を表す座標値、ムーブ操作が行われた軌跡を表す座標値、タッチアップ操作が検出された点を表す座標値を含む。演算部210は、イベント種別がタッチアップ操作またはムーブ操作であると判定すると、制御をステップS450に切り換える。演算部210は、イベント種別がタッチダウン操作であると判定すると、制御をステップS460に切り換える。
In step S440,
ステップS450にて、演算部210は、外部入力制御情報通信部280を介して、外部表示機器200で検出されたイベント種別(タッチアップ操作またはムーブ操作)を携帯端末100に通知する。また、演算部210は、当該イベント種別で特定されるムーブ操作の移動量たはタッチアップ操作における座標値も、外部入力制御情報通信部280を介して、携帯端末100に通知する。
In step S450,
ステップS460にて、タッチ面積算出部260は、タッチパネル制御部230からの出力に基づいて、表示部250において行なわれたタッチ操作によってタッチされた面積を算出する。当該面積は、たとえば、画素数として表わされる。
In step S <b> 460, touch
ステップS470にて、演算部210は、外部入力制御情報通信部280を介して、外部表示機器200で検出されたイベント種別(=タッチダウン操作)を携帯端末100に通知する。また、演算部210は、当該イベント種別で特定されるタッチダウン操作が検出された点または領域を表す座標値も、外部入力制御情報通信部280を介して、携帯端末100に通知する。
In step S470,
ステップS480にて、演算部210は、タッチイベント外部送出処理を終了する。
ステップS490にて、演算部210は、携帯端末100から送信された映像信号の入力の受け付けを終了する。
In step S480,
In step S490,
以上のようにして、本実施の形態によれば、外部表示機器200の画面サイズの大きさを考慮したタッチ操作が可能となるため、大きい画面サイズの外部表示機器200において、小さいタッチ操作でも大きく画面操作することができる。
As described above, according to the present embodiment, a touch operation in consideration of the size of the screen size of the
今回開示された実施の形態はすべての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は上記した説明ではなくて特許請求の範囲によって示され、特許請求の範囲と均等の意味および範囲内でのすべての変更が含まれることが意図される。 The embodiment disclosed this time should be considered as illustrative in all points and not restrictive. The scope of the present invention is defined by the terms of the claims, rather than the description above, and is intended to include any modifications within the scope and meaning equivalent to the terms of the claims.
1 システム、11,12,15,18,19,21,22,25,28,29 画像、20 指、24 移動量、100 携帯端末、110,210 演算部、120,220、130,230 タッチパネル制御部、140,240 表示制御部、150,250 表示部、160 メモリ、170 外部出力映像管理部、180,280 外部出力制御情報通信部、190 外部タッチイベント制御部、200 外部出力機器、260 タッチ面積算出部、270 外部入力映像管理部、280 外部入力制御情報通信部。
1
Claims (5)
前記表示機器に映像信号を送信するための送信手段と、
画像を表示するための端末表示部と、
前記表示部の画像表示領域に対するタッチ操作を受け付けるためのタッチパネル制御部と、
前記携帯端末の動作を制御するための端末制御部とを備え、
前記表示機器は、
前記携帯端末から送信される信号を受信するための受信手段と、
画像を表示するための外部表示部と、
前記外部表示部の画像表示領域に対するタッチ操作を受け付けるためのタッチパネル制御部と、
前記表示機器の動作を制御するための機器制御部とを備え、
前記端末制御部は、
前記表示機器から、前記外部表示部に対するタッチ操作を表す情報を受信し、
前記端末表示部の表示画面のサイズと、前記外部表示部の表示画面のサイズとに基づいて、前記受信された情報により特定されるタッチ操作に応じた画面操作を前記端末表示部に実行させるように構成されている、携帯端末。 A portable terminal capable of displaying video on a display device,
Transmitting means for transmitting a video signal to the display device;
A terminal display for displaying images;
A touch panel control unit for receiving a touch operation on the image display area of the display unit;
A terminal control unit for controlling the operation of the mobile terminal,
The display device
Receiving means for receiving a signal transmitted from the portable terminal;
An external display for displaying images;
A touch panel control unit for accepting a touch operation on the image display area of the external display unit;
A device control unit for controlling the operation of the display device,
The terminal control unit
Receiving information representing a touch operation on the external display unit from the display device;
Based on the size of the display screen of the terminal display unit and the size of the display screen of the external display unit, the terminal display unit is caused to execute a screen operation corresponding to the touch operation specified by the received information. A mobile terminal configured in
当該タッチダウン操作を表す情報は、タッチダウンが検出された領域の面積を表す情報を含む、請求項1に記載の携帯端末。 The touch operation on the external display unit includes a touch-down operation,
The mobile terminal according to claim 1, wherein the information representing the touchdown operation includes information representing an area of a region where the touchdown is detected.
携帯端末と、
前記携帯端末と通信可能な表示機器とを備え、
前記携帯端末は、
前記表示機器に映像信号を送信するための送信手段と、
画像を表示するための端末表示部と、
前記表示部の画像表示領域に対するタッチ操作を受け付けるためのタッチパネル制御部と、
前記携帯端末の動作を制御するための端末制御部とを備え、
前記表示機器は、
前記携帯端末から送信される信号を受信するための受信手段と、
画像を表示するための外部表示部と、
前記外部表示部の画像表示領域に対するタッチ操作を受け付けるためのタッチパネル制御部と、
前記表示機器の動作を制御するための機器制御部とを備え、
前記端末制御部は、
前記表示機器から、前記外部表示部に対するタッチ操作を表す情報を受信し、
前記端末表示部の表示画面のサイズと、前記外部表示部の表示画面のサイズとに基づいて、前記受信された情報により特定されるタッチ操作に応じた画面操作を前記端末表示部に実行させるように構成されている、システム。 A system for displaying video,
A mobile device,
A display device capable of communicating with the portable terminal,
The portable terminal is
Transmitting means for transmitting a video signal to the display device;
A terminal display for displaying images;
A touch panel control unit for receiving a touch operation on the image display area of the display unit;
A terminal control unit for controlling the operation of the mobile terminal,
The display device
Receiving means for receiving a signal transmitted from the portable terminal;
An external display for displaying images;
A touch panel control unit for accepting a touch operation on the image display area of the external display unit;
A device control unit for controlling the operation of the display device,
The terminal control unit
Receiving information representing a touch operation on the external display unit from the display device;
Based on the size of the display screen of the terminal display unit and the size of the display screen of the external display unit, the terminal display unit is caused to execute a screen operation corresponding to the touch operation specified by the received information. Configured in the system.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013047810A JP2014174808A (en) | 2013-03-11 | 2013-03-11 | Portable terminal and system for displaying video |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013047810A JP2014174808A (en) | 2013-03-11 | 2013-03-11 | Portable terminal and system for displaying video |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2014174808A true JP2014174808A (en) | 2014-09-22 |
Family
ID=51695954
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013047810A Pending JP2014174808A (en) | 2013-03-11 | 2013-03-11 | Portable terminal and system for displaying video |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2014174808A (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2017102857A (en) * | 2015-12-04 | 2017-06-08 | ファナック株式会社 | Touch panel input device |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009157908A (en) * | 2007-12-07 | 2009-07-16 | Sony Corp | Information display terminal, information display method, and program |
JP2010262525A (en) * | 2009-05-08 | 2010-11-18 | Alps Electric Co Ltd | Input processing device |
JP2012524474A (en) * | 2009-04-14 | 2012-10-11 | クゥアルコム・インコーポレイテッド | External touch screen for mobile devices |
-
2013
- 2013-03-11 JP JP2013047810A patent/JP2014174808A/en active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009157908A (en) * | 2007-12-07 | 2009-07-16 | Sony Corp | Information display terminal, information display method, and program |
JP2012524474A (en) * | 2009-04-14 | 2012-10-11 | クゥアルコム・インコーポレイテッド | External touch screen for mobile devices |
JP2010262525A (en) * | 2009-05-08 | 2010-11-18 | Alps Electric Co Ltd | Input processing device |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2017102857A (en) * | 2015-12-04 | 2017-06-08 | ファナック株式会社 | Touch panel input device |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8760557B2 (en) | User interface for a digital camera | |
US20160283059A1 (en) | Terminal and method for setting menu environments in the terminal | |
US9720567B2 (en) | Multitasking and full screen menu contexts | |
US9704028B2 (en) | Image processing apparatus and program | |
US20130106700A1 (en) | Electronic apparatus and input method | |
WO2022048633A1 (en) | Display method and apparatus and electronic device | |
US20120299846A1 (en) | Electronic apparatus and operation support method | |
JP6105822B1 (en) | Touch screen control method and apparatus | |
TW201421350A (en) | Method for displaying images of touch control device on external display device | |
EP2530573A2 (en) | Touch control method and electronic apparatus | |
JP2015504219A (en) | Pan animation | |
WO2014097650A1 (en) | Method and system for wirelessly controlling image display | |
CN107148776B (en) | Method, device and system for acquiring video data and computer readable storage medium | |
US20150253943A1 (en) | Method and Apparatus for Implementing Remote Browsing | |
JP2018531564A6 (en) | Method, apparatus and system for obtaining video data and computer-readable storage medium | |
JP5384706B2 (en) | Multi-touch operation method and system | |
CN113655929A (en) | Interface display adaptation processing method and device and electronic equipment | |
CN111880759A (en) | Control method and device for multi-split screen display picture, display and storage medium | |
US9910560B2 (en) | Electronic apparatus and menu displaying method | |
JP5783610B2 (en) | INPUT DISPLAY CONTROL DEVICE, THIN CLIENT SYSTEM, INPUT DISPLAY CONTROL METHOD, AND PROGRAM | |
US20140215347A1 (en) | Portable device and control method thereof | |
US10645144B2 (en) | Computer-implemented method for controlling a remote device with a local device | |
JP2014174808A (en) | Portable terminal and system for displaying video | |
CA2807866C (en) | User interface for a digital camera | |
WO2017016333A1 (en) | Screen adjustment method and device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20150916 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20160727 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160823 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20170228 |