JP2006058946A - Image display control system, image display control method, image display controller and portable terminal equipment - Google Patents
Image display control system, image display control method, image display controller and portable terminal equipment Download PDFInfo
- Publication number
- JP2006058946A JP2006058946A JP2004237254A JP2004237254A JP2006058946A JP 2006058946 A JP2006058946 A JP 2006058946A JP 2004237254 A JP2004237254 A JP 2004237254A JP 2004237254 A JP2004237254 A JP 2004237254A JP 2006058946 A JP2006058946 A JP 2006058946A
- Authority
- JP
- Japan
- Prior art keywords
- image display
- pointer
- display control
- terminal device
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Abstract
Description
本発明は、携帯電話等の携帯端末装置から、セットトップボックス等の画像表示制御装置に対して赤外線信号等の無線信号を送信することで、テレビ等の画像表示装置におけるポインタ表示等の表示制御を行う際に用いて好適な画像表示制御システム、画像表示制御方法、画像表示制御装置および携帯端末装置に関する。 The present invention provides a display control such as a pointer display in an image display device such as a television by transmitting a radio signal such as an infrared signal from a mobile terminal device such as a mobile phone to an image display control device such as a set top box. The present invention relates to an image display control system, an image display control method, an image display control device, and a portable terminal device that are suitable for use when performing the above.
従来、AV機器(Audio Visual機器)の遠隔操作技術の分野においては、リモコン装置により、表示モニタ上でマウスの代替となる遠隔操作指示を提供することができた(特許文献1〜3等)。また、個人を識別する為にリモコン内に固有コードを持たせ、AV機器内に設定済みの個人情報を照合することで、たとえば、子供のリモコンからは大人用のチャンネルは選択できないように制限することができた(特許文献4等)。
Conventionally, in the field of remote operation technology of AV equipment (Audio Visual equipment), remote control instructions that can substitute for a mouse on a display monitor can be provided by a remote control device (
特許文献1記載の「指示入力装置」では、マウスの代替となる遠隔操作の指示入力装置を提供する。特許文献2記載の「リモコン装置及び該リモコン装置を用いた情報処理装置」では、リモコン信号にカーソル移動信号を割当てている。特許文献3記載の「Webブラウザ用リモコン」では、リモコンに設けた十字キーに移動信号を割当、操作することでインプットタグにマウスカーソルが自在に移動する。そして、特許文献4記載の「電子機器制御装置」では、複数のリモコンに固有のコードを持たせ、受信側でリモコンを識別し個人情報を有効とすることができる。
The “instruction input device” described in
一方、現在、急速に普及し始めた携帯電話には、赤外線通信(双方向:約20cm)や赤外線リモコン(片方向:約5m)などの通信手段を備えているものがある。
従来技術によれば、専用の赤外線リモコンの十字キー等により、TVモニタ(テレビモニタ)上でマウスの代替となる遠隔操作指示を提供することができたが、ポインタの移動に時間がかかっていた。 According to the prior art, it was possible to provide a remote operation instruction as an alternative to a mouse on a TV monitor (TV monitor) by using a cross key or the like of a dedicated infrared remote controller, but it took time to move the pointer .
また、従来の技術では、専用リモコン等からのポインティング信号を受信する場合、1つのリモコンからの信号しか想定しておらず、例えば、複数の閲覧者が複数の専用リモコンを操作しSTB(セットトップボックス)等へ信号を送信する場合、信号が競合し正常に受信できなかったり、複数のポインタカーソルの識別ができず、正常に操作することはできなかった。 Further, in the conventional technology, when a pointing signal from a dedicated remote controller or the like is received, only a signal from one remote controller is assumed. For example, a plurality of viewers operate a plurality of dedicated remote controllers to operate STB (Set Top When transmitting a signal to a box) or the like, the signals conflicted and could not be received normally, or a plurality of pointer cursors could not be identified, and the operation could not be performed normally.
また、従来の技術では、STB等に複数ユーザ対応の情報を蓄積管理し、複数ユーザからの呼出操作により、それぞれ個別に制限された分割画面で情報を表示することができなかった。 Further, according to the conventional technique, information corresponding to a plurality of users is stored and managed in the STB or the like, and information cannot be displayed on divided screens individually restricted by a call operation from a plurality of users.
本発明は、上記の事情を考慮してなされたものであって、携帯電話等の携帯端末装置からの遠隔操作によってテレビ等の画像表示装置の画面上に表示するポインタを表示制御するなど際の操作性や利便性を向上させることができる画像表示制御システム、画像表示制御方法、画像表示制御装置および携帯端末装置を提供することを目的とする。 The present invention has been made in consideration of the above-described circumstances, and is used for controlling display of a pointer displayed on the screen of an image display device such as a television by remote control from a mobile terminal device such as a mobile phone. An object of the present invention is to provide an image display control system, an image display control method, an image display control device, and a portable terminal device that can improve operability and convenience.
請求項1記載の発明は、当該装置の識別符号を記憶する記憶手段と、複数の操作子と、複数の操作子の操作情報と記憶手段に記憶されている識別符号とを無線信号で送信する信号送信手段とを有する携帯端末装置と、一体として形成され又は外部に接続された画像表示装置を制御する装置であって、携帯端末装置から出力された無線信号を受信する信号受信手段と、受信した無線信号に基づいて複数の操作子の操作情報を識別符号に応じて解析する操作情報解析手段と、操作情報解析結果に応じて画像表示装置に表示されるポインタの位置を制御する表示制御手段とを有する画像表示制御装置とを備えることを特徴とする。 According to the first aspect of the present invention, the storage means for storing the identification code of the device, the plurality of operators, the operation information of the plurality of operators, and the identification code stored in the storage means are transmitted by radio signals. A portable terminal device having a signal transmitting means, and an apparatus for controlling an image display device formed integrally or connected to the outside, wherein the signal receiving means receives a radio signal output from the portable terminal device; Operation information analyzing means for analyzing the operation information of the plurality of operators based on the identification code based on the radio signal, and display control means for controlling the position of the pointer displayed on the image display device according to the operation information analysis result And an image display control device.
請求項2記載の発明は、前記操作情報解析手段が、識別符号に対応して前記複数の操作子の操作と前記ポインタの移動制御の関係とを定義したテーブルを参照し、所定の操作子の操作を前記画像表示装置の画面上の所定の位置への即時のポインタ移動指示として又は方向を指示する所定の操作子と他の所定の操作子との同時操作を単独操作と異なる移動速度での所定の方向へのポインタ移動指示として解析することを特徴とする。 According to a second aspect of the present invention, the operation information analyzing means refers to a table defining the relationship between the operations of the plurality of operators and the movement control of the pointer corresponding to the identification code, and the predetermined operator Operation as an immediate pointer movement instruction to a predetermined position on the screen of the image display device or simultaneous operation of a predetermined operation element indicating a direction and another predetermined operation element at a moving speed different from that of a single operation It is characterized by analyzing as a pointer movement instruction in a predetermined direction.
請求項3記載の発明は、前記信号送信手段が、携帯端末装置毎に設定されたタイミングで前記無線信号を送信し、前記操作情報解析手段が、前記識別符号に基づいて2以上の携帯端末装置を識別し、各携帯端末装置の複数の操作子の操作情報を各携帯端末装置に対応する各ポインタの移動制御情報として解析し、前記表示制御手段によって複数のポインタの表示制御を行うことを特徴とする。 According to a third aspect of the present invention, the signal transmitting means transmits the wireless signal at a timing set for each portable terminal device, and the operation information analyzing means has two or more portable terminal devices based on the identification code. And operating information of a plurality of operators of each mobile terminal device is analyzed as movement control information of each pointer corresponding to each mobile terminal device, and display control of the plurality of pointers is performed by the display control means. And
請求項4記載の発明は、前記表示制御手段によって表示制御される複数のポインタの移動範囲を携帯端末装置毎に個別に制限することを特徴とする。
The invention according to
請求項5記載の発明は、前記画像表示制御装置が、各携帯端末装置に割り当て可能な画像データ記憶手段をさらに有し、前記表示制御手段が、前記各ポインタの移動制限範囲に対応させて画像データ記憶手段に記憶された各携帯端末装置に対応する画像データを表示させることを特徴とする。 According to a fifth aspect of the present invention, the image display control device further includes image data storage means that can be assigned to each portable terminal device, and the display control means displays an image corresponding to the movement restriction range of each pointer. Image data corresponding to each portable terminal device stored in the data storage means is displayed.
請求項6記載の発明は、携帯端末装置毎に優先度を設定し、所定の優先度が設定された携帯端末装置に対応するポインタの移動範囲の制限を行わないことを特徴とする。
The invention described in
請求項7記載の発明は、前記所定の優先度が設定された携帯端末装置の所定の操作子が操作された場合に、その携帯端末装置に対応するポインタが位置する他の優先度を設定された他の携帯端末装置に対応するポインタの移動制限範囲を拡大して表示することを特徴とする。 According to the seventh aspect of the present invention, when a predetermined operator of the mobile terminal device to which the predetermined priority is set is operated, another priority at which a pointer corresponding to the mobile terminal device is positioned is set. The pointer movement restriction range corresponding to another portable terminal device is enlarged and displayed.
請求項8記載の発明は、前記画像データ記憶手段への画像データの記憶が、前記携帯端末装置の識別符号に基づいて携帯端末装置毎の割当領域に対して自動的に行われることを特徴とする。
The invention according to
請求項9記載の発明は、当該装置の識別符号を記憶する記憶手段と、複数の操作子とを有する携帯端末装置において、複数の操作子の操作情報と記憶手段に記憶されている識別符号とを無線信号で送信し、一体として形成され又は外部に接続された画像表示装置を制御する装置であって、携帯端末装置から出力された無線信号を受信する信号受信手段を有する画像表示制御装置において、受信した無線信号に基づいて複数の操作子の操作情報を識別符号に応じて解析し、操作情報解析結果に応じて画像表示装置に表示されるポインタの位置を制御することを特徴とする。 According to a ninth aspect of the present invention, in a portable terminal device having a storage means for storing an identification code of the device and a plurality of operators, operation information of the plurality of operators and an identification code stored in the storage means In an image display control apparatus having a signal receiving means for receiving a radio signal output from a portable terminal device The operation information of the plurality of operators is analyzed according to the identification code based on the received radio signal, and the position of the pointer displayed on the image display device is controlled according to the operation information analysis result.
請求項10記載の発明は、当該装置の識別符号を記憶する記憶手段と、複数の操作子と、複数の操作子の操作情報と記憶手段に記憶されている識別符号とを無線信号で、一体として形成され又は外部に接続された画像表示装置を制御する装置であって、携帯端末装置から出力された無線信号を受信する信号受信手段と、受信した無線信号に基づいて複数の操作子の操作情報を識別符号に応じて解析する操作情報解析手段と、操作情報解析結果に応じて画像表示装置に表示されるポインタの位置を制御する表示制御手段とを有する画像表示制御装置に対して送信する信号送信手段とを備えることを特徴とする。 According to a tenth aspect of the present invention, the storage means for storing the identification code of the device, the plurality of operators, the operation information of the plurality of operators and the identification code stored in the storage means are integrated with a radio signal. A device for controlling an image display device formed as an external device or connected to the outside, comprising: signal receiving means for receiving a radio signal output from a mobile terminal device; and operations of a plurality of operators based on the received radio signal The information is transmitted to an image display control device having operation information analysis means for analyzing information according to the identification code and display control means for controlling the position of the pointer displayed on the image display device according to the operation information analysis result. And a signal transmission means.
請求項11記載の発明は、一体として形成され又は外部に接続された画像表示装置を制御する装置であって、当該携帯端末装置の識別符号を記憶する記憶手段と、複数の操作子と、複数の操作子の操作情報と記憶手段に記憶されている識別符号とを無線信号で送信する信号送信手段とを有する携帯端末装置から出力された無線信号を受信する信号受信手段と、受信した無線信号に基づいて複数の操作子の操作情報を識別符号に応じて解析する操作情報解析手段と、操作情報解析結果に応じて画像表示装置に表示されるポインタの位置を制御する表示制御手段とを備えることを特徴とする。
The invention described in
本発明によれば、(ア)例えばTVモニタに対し専用リモコンを使用せず、携帯電話等の携帯端末に対する簡単な操作でポインタ(ポインティングデバイス)を表示し、素早く移動させたり、移動速度を変更することができ、操作性が向上する。本発明によれば、また、(イ)TVモニタに複数の携帯電話等からの操作に対応する複数のポインタを表示し、同時に操作が反映されるので、複数の利用者の共同作業やコミュニケーションを行うことができる。本発明によれば、また、(ウ)携帯電話等に蓄積された映像データ等をSTB上等の専用の領域に転送することができ、専用の領域画面(各ポインタの移動制限範囲に対応する各領域)でポインタを操作することなどで映像データを簡単に表示することができる。 According to the present invention, (a) a pointer (pointing device) is displayed by a simple operation on a mobile terminal such as a mobile phone without using a dedicated remote control for a TV monitor, for example, and the movement speed is changed. And the operability is improved. According to the present invention, (a) a plurality of pointers corresponding to operations from a plurality of mobile phones or the like are displayed on the TV monitor, and the operations are reflected at the same time. It can be carried out. According to the present invention, (c) video data stored in a mobile phone or the like can be transferred to a dedicated area on the STB or the like, and a dedicated area screen (corresponding to the movement restriction range of each pointer). Video data can be easily displayed by operating a pointer in each area).
以下に図面を参照して説明する本発明の実施の形態は、本発明の画像表示制御システムを構成する携帯端末装置および画像表示制御装置を、それぞれ携帯電話およびSTBとしている。その際、携帯電話およびSTBは、赤外線通信機能と、所定のプログラムを実行する機能を備えていて、各所定のプログラムを本発明の実施に必要な構成とすることで本発明の実施の形態が実現される。ただし、携帯端末装置は、携帯電話に限らず、個人情報端末(PDA)等の他の携帯情報処理機能を備えた端末とすることができる。また、画像表示制御装置は、STBに限らず、TVモニタが備える情報処理装置を利用するものとして一定として構成されていても良いし、一部あるいは全部をパーソナルコンピュータを利用した構成とするものであってもよい。また、赤外線通信機能は、赤外線以外の電波を用いる無線通信機能であってもよいし、構成の一部をなすプログラムの一部あるいは全部はハードウェアを利用して構成するものであってもよい。 In the embodiment of the present invention described below with reference to the drawings, the mobile terminal device and the image display control device constituting the image display control system of the present invention are a mobile phone and an STB, respectively. At that time, the mobile phone and the STB have an infrared communication function and a function for executing a predetermined program, and the embodiment of the present invention is configured by making each predetermined program necessary for implementing the present invention. Realized. However, the mobile terminal device is not limited to a mobile phone, but may be a terminal having other mobile information processing functions such as a personal information terminal (PDA). In addition, the image display control device is not limited to the STB, and may be configured as a device that uses an information processing device provided in the TV monitor, or a part or all of the device may be configured using a personal computer. There may be. Further, the infrared communication function may be a wireless communication function using radio waves other than infrared rays, or a part or all of a program constituting a part of the configuration may be configured using hardware. .
本実施の形態は、携帯電話の操作によってTVモニタ等に表示されるポインタの表示制御(位置制御)を行う際に、携帯電話の十字キー(カーソルキー)、10キー等の複数の操作子の操作情報を、携帯電話識別ID(Identification)とともに送信し、受信したSTBで携帯電話識別IDに対応するように操作情報をポインタの移動情報等に変換することで画像表示制御を実行する。この基本的な機能に関連して複数の機能を設けているが、その主なものは次の通りである。 In this embodiment, when display control (position control) of a pointer displayed on a TV monitor or the like by operation of a mobile phone is performed, a plurality of operators such as a cross key (cursor key) and 10 keys of the mobile phone are used. The operation information is transmitted together with the mobile phone identification ID (Identification), and the image display control is executed by converting the operation information into the movement information of the pointer so as to correspond to the mobile phone identification ID by the received STB. A plurality of functions are provided in relation to this basic function, and the main ones are as follows.
(1)簡単なキー操作でポインタの位置を大きく移動させたり、移動速度を速くしたりする機能、(2)複数の携帯電話を同時に使用する場合に、携帯電話からSTBに送信されるリモコン信号(赤外線信号)の送信タイミングを各携帯電話間でずらすための機能、(3)複数の携帯電話を同時に使用する場合に、STBに接続されたTVモニタの画面を複数の領域に分割するとともに、各携帯電話に対応する複数のポインタを各領域内に移動範囲を限定して表示したり、STB内に携帯電話から受信した静止画像、動画像(映像)からななる画像データを記憶するための記憶装置を設け、各画像データを各ポインタに対応する領域に表示したり、TVモニタの複数の分割領域の一つの領域を全画面に表示したりする機能、そして、(4)画像データを記憶するための記憶装置を複数の領域に分割可能で、かつ各携帯電話に対応して各記憶領域を自動的に割り当てる機能である。以下、これらの機能毎に実施の形態の構成および動作について説明する。 (1) A function for greatly moving the position of the pointer by a simple key operation or increasing the moving speed. (2) A remote control signal transmitted from the mobile phone to the STB when a plurality of mobile phones are used simultaneously. (3) A function for shifting the transmission timing of (infrared signal) between each mobile phone, (3) When using a plurality of mobile phones at the same time, the screen of the TV monitor connected to the STB is divided into a plurality of areas, A plurality of pointers corresponding to each mobile phone are displayed within each area with a limited movement range, and image data consisting of still images and moving images (videos) received from the mobile phone is stored in the STB. A storage device, a function of displaying each image data in an area corresponding to each pointer, or displaying one area of a plurality of divided areas of the TV monitor on the entire screen, and (4) Can divide the storage device for storing data into a plurality of regions, and is automatically assigns functions each storage area corresponding to each cellular phone. The configuration and operation of the embodiment will be described below for each of these functions.
(1)簡単なキー操作でポインタの位置を大きく移動させたり、移動速度を速くしたりする機能:図1は本機能を実現するための構成を説明するためのブロック図であり、図2および図3はその処理を説明するためのフローチャートであり、そして図4は本機能のシステム動作を説明するための説明図である。ここで図1のブロック図の各構成は、携帯電話10またはSTB20内のハードウェアや、図示していないCPU(中央処理装置)、記憶装置等からなる処理装置上で実行されるプログラムの、一方または組み合わせによって構成されている。また、STB20にはTVモニタ等の表示装置が接続されており、表示装置の画面上にSTB20において各種アプリケーションを実行することでポインタ表示や画像表示が行えるようになっている。
(1) Function for greatly moving the position of the pointer by a simple key operation or increasing the moving speed: FIG. 1 is a block diagram for explaining a configuration for realizing this function. FIG. 3 is a flowchart for explaining the processing, and FIG. 4 is an explanatory diagram for explaining the system operation of this function. Here, each configuration in the block diagram of FIG. 1 is one of programs executed on a processing device including hardware in the
図1に示すように本実施の形態では携帯電話10内に、十字キー12、中央キー13およびテンキー等の他のキー16と、入力制御部101、リモコンコード制御部102、およい赤外線信号発光部103とが設けられるとともに、所定の記憶装置内にリモコンコード情報104、携帯電話識別ID105、および送信タイミング情報106が記憶されている。入力制御部101は、各キー12〜16のオン/オフ状態を検知して検知したキーの情報をキーコード情報として出力する。リモコンコード制御部102は、入力制御部101の出力信号に基づいて入力されたキーコードに応じたリモコンコードをリモコンコード情報104から読み出し、携帯電話識別ID105を付加し、他リモコンとの競合を防止する為に送信タイミング情報106に基づいてタイミングを調整し、赤外線発光部103へ情報を転送する。赤外線発光部103は、入力された情報に基づいて所定の形式で変調した赤外線信号をリモコン信号として出力する。
As shown in FIG. 1, in the present embodiment,
リモコンコード情報104は、図18に示すように、各キー(十字キー、中央キー、テンキー、特定キー)のキーコードとリモコンコードを対応させた情報である。図18に示す例では、図4の十字キー12u、12d、12r、12lの押下に対応して発生されるキーコード「01」〜「04」にリモコンコード「011」、「012」、「013」、「014」が対応し、図4のメニューキー14と十字キー12u、12d、12r、12lとの同時押下に対応して発生されるキーコード「01+99」〜「04+99」にリモコンコード「021」、「022」、「023」、「024」が対応し、中央キー13の押下に対応して発生されるキーコード「55」にリモコンコード「055」が対応し、図示していないクリアキーの押下に対応して発生されるキーコード「66」にリモコンコード「066」が対応し、そして、テンキー15の内の9番キー159の押下に対応して発生されるキーコード「19」にリモコンコード「190」が対応するようになっている。
As shown in FIG. 18, the remote
携帯電話識別ID105は、携帯電話に付与される識別ID情報である。送信タイミング情報106は、図19に示すように、リモコン信号出力の基本周期時間を示す基本周期情報とリモコン信号送信時刻を決定する為のオフセット時間と送信可能時間とを表す情報である。基本周期情報は、複数の携帯電話の送信可能期間を1台のSTBに対して時分割制御する場合の1周期であり、図19の例では1台当たり250msとして4台分の時間1秒を基本周期としている(すなわち基本周期1秒を4個のタイムスロットに分割して時分割制御している)。オフセット時間は、携帯電話10の基本周期クロック信号を基準とした場合に各周期におけるリモコン信号の出力開始時刻を表す情報である。送信可能時間は、オフセット時間で決まるリモコン信号出力開始時刻から継続して出力可能な時間を示すものである。図19の例では、1秒の基本周期の開始時刻から200ms後に信号出力可能となり、400ms(=200ms+200ms)後まで継続して出力可能となる。なお、各情報の設定方法については後述する。
The mobile
一方、図1のSTB20には、赤外線信号受光部201、リモコンコード解析部202、ポインタ制御部203、アクション処理部204、ポインタ描画部205、アプリケーション206およびオペレーティングシステム207が設けられるとともに、所定の記憶装置内に携帯電話識別ID登録テーブル208、リモコンコード情報209、アクション情報210およびポインタ状態情報211が記憶されている。赤外線信号受光部201は、受信した赤外線信号を復調し、リモコンコードに変換して出力する。リモコンコード解析部202は、携帯電話識別ID登録テーブル208およびリモコンコード情報209を参照して、携帯電話識別IDの判定を行うとともに、リモコンコードを解析し、ポインタ制御部203へ判定結果および解析結果を引き継ぐ。
On the other hand, the
携帯電話識別ID登録テーブル208は、図20に示すように、TS割当番号、携帯電話識別ID、および優先度情報から構成されている。TS割当番号は、複数の携帯電話10を同時に使用する際に用いる時分割制御のタイムスロットを識別する番号である。優先度は、各携帯電話10間の優先順位を示す情報であり、複数の携帯電話10間にポインタ等の操作条件の差異を設ける場合に用いられる。携帯電話識別ID登録テーブル208は、リモコン動作に先立ってSTB20に対して各携帯電話10から登録操作を行うことで設定される(詳細は後述する)。図20に示す例では、TS割当番号「01」〜「04」のうちの「01」〜「03」に対して携帯電話識別IDが登録されていて、TS割当番号「01」に対して優先度「0」が、その他に対して優先度「3」が設定されている。この例では、「0」の優先度が最も高く、以下、「1」、「2」、「3」、…と優先度が低くなることとしている。
As shown in FIG. 20, the mobile phone identification ID registration table 208 is composed of a TS allocation number, a mobile phone identification ID, and priority information. The TS allocation number is a number for identifying a time division control time slot used when a plurality of
リモコンコード情報209は、図21に示すように、リモコンコード、ポインタ指示コード、指定座標、および移動量を示す各情報から構成されている。リモコンコードは、図18に示す携帯電話10側のリモコンコード情報104に対応する値を有し、携帯電話10側で操作された各キー(十字キー、中央キー、テンキー、特定キー、あるいはそれらのキーの所定の組み合わせ)を示すコードである。ポインタ指示コードは、リモコンコードをポインタの移動指示やポインタをクリックする操作を行ったときの動作指示を示す所定のコードであり、STB20で実行されているアプリケーション毎に設定される。指定座標は、ポインタを画面上の所定の位置に即時に移動させる際の値である。移動量は、1回の操作でポインタを移動させる量を示す値である。図21の例では、例えば十字キー12u(図4参照)の操作に対応するリモコンコード「011」に対して、ポインタ指示コード「111」(上方移動)と移動量「5」が設定され、十字キー12uとメニューキー14(図4参照)の同時操作に対応するリモコンコード「021」に対して、ポインタ指示コード「121」(上方移動)と移動量「10」が設定され、また、9番キー159(図4参照)の操作に対応するリモコンコード「190」に対して、ポインタ指示コード「219」(指定移動)と指定座標「300,300」が設定されている。
As shown in FIG. 21, the remote
一方、図1のポインタ制御部203は、リモコンコード解析部202によって解析された情報に基づいて、アクション情報210およびポインタ情報211にアクセスして、ポインタ状態情報を設定・更新するとともに、アクション情報を決定し、決定したアクション情報または最新のポインタ状態情報を、アクション処理部204およびポインタ描画部205へ引継ぐ処理を行う。
On the other hand, the
アクション情報210は、リモコンコード解析部202から引き継いだポインタ指示コードに基づいて、アクション処理部204またはポインタ描画部205を介してポインタ描画部205あるいはオペレーティングシステム207に対してイベントメッセージを送信する為に用いられる情報ある。すなわち、ポインタ指示コードを、メニューを起動したり、ボタンを選択・実行したりするアクションに変換するための情報が設定されている。例えば図22に示すようにこのアクション情報210には、アプリケーション206が起動済みの場合と、未起動の場合とに分けて、アクション処理部204やポインタ描画部205へ引き渡すアクション情報が設定されている。図22に示す例では、ポインタ指示コード「155」(中央キー13が押された時)に対して、アプリケーション206が起動済みの場合は選択あるいは決定を意味する「マウス左クリック指示」が、未起動の場合はアプリケーションメニュー表示の指示を意味する「マウス右クリック指示」が設定されている。
The
ポインタ状態情報211は、TS割当番号毎に、起動中(ポインタを表示中)であるか否かの情報、全画面表中であるか否かの情報、状態変化時刻、ポインタ現在位置情報などの状態を記憶するためのテーブルである。例えば、図23に示すように、各TS割当番号に対応して、起動中表示や全画面表示の有無を表すフラグや、状態変化時刻、xy座標で表したポインタ位置情報が登録される。
For each TS allocation number, the
また、アクション処理部204は、ポインタ制御部203から送られてきたアクション情報に従い、アプリケーション206やオペレーティングシステム207へイベントメッセージを送信する。ポインタ描画部205は、アクション情報やポインタ状態情報に従いポインタカーソルを描画するイベントメッセージをオペレーティングシステム207に対して送信する。
Further, the
次に図1に示す構成の処理手順について図2および図3のフローチャートならびに図4のシステム図を参照して説明する。この例では、携帯電話10における各キーの操作が、STB20による画面表示における次のような機能に対応していることとする。
Next, the processing procedure of the configuration shown in FIG. 1 will be described with reference to the flowcharts of FIGS. 2 and 3 and the system diagram of FIG. In this example, it is assumed that the operation of each key on the
(ア)十字キー12:ポインタカーソルを移動させる時のX軸、またはY軸方向への移動方向情報を与える。 (A) Cross key 12: Gives movement direction information in the X-axis or Y-axis direction when the pointer cursor is moved.
(イ)中央キー13:ポインタカーソルの座標位置にアプリケーション(AP)(すなわちアプリケーションの所定のアイコン等)があった場合、実行アクション(マウスのダブルクリック、左クリック)の役割を与える。 (A) Center key 13: When there is an application (AP) (that is, a predetermined icon of the application, etc.) at the coordinate position of the pointer cursor, a role of execution action (double mouse click, left click) is given.
(ウ)テンキー15:1〜9の数字キーをTV画面31にオーバーラップさせ、たとえば「9」キー159を押すとTV画面31の右下の部分309(図4参照)にポインタカーソル4を一瞬で移動させる役割を与える。
(C) The numeric keys 15: 1 to 9 are overlapped with the
(エ)特定キー:上記以外のその他のキー(ここではメニューキー14とする)に、XY軸移動速度を変化(移動量を増減)させる役割を与えたり、優先度の高い携帯電話10のリモコン機能に対して、画面切り替えの役割を与える。移動量を変化させる場合、例えば、十字キー12とメニューキー14を同時に押した場合に移動量を増やしたリモコンキーを割当てるように、リモコンコード情報104を設定する。
(D) Specific key: A key other than the above (here, the menu key 14) is given a role of changing the XY axis moving speed (moving amount is increased or decreased), or the remote controller of the
図2は、携帯電話10側の処理手順を示すフローチャートである。携帯電話10側では所定のアプリケーションが起動されてリモコン機能が起動されると、各キーの操作状態が繰り返し監視される(図2のステップS11〜S12)。各キーのオン情報があった場合(ステップS12で「Yes」)、リモコンコード情報104から各キーコードに対応するリモコンコードを読み出し、これに携帯電話識別IDを付与する(ステップS13)。次に、送信信号が他リモコンと競合しないように、送信タイミング情報106からオフセット時間を抽出し、携帯電話現在時刻から送出時刻を算出し、そのタイミングで、赤外線発光部103へ送信情報を送信する(ステップS14)。そして、生成したリモコンコード情報を赤外線発光部103から送信する(ステップS15)。
FIG. 2 is a flowchart showing a processing procedure on the
一方、STB20側では、赤外線受光部201で赤外線信号を受光し(図3のステップS21)、リモコンコード解析部202で監視し、受光されるたびリモコンコード情報209との照合を行い、リモコンコード解析を行う(ステップS22)。具体的には、リモコンコード解析部202が、受信したリモコンコード情報に対応するポインタ指示コード、移動量、指定座標を読み出し、以後の処理へ引継ぐ情報を生成する。リモコンコード解析部202は、また、解析後のリモコンコード情報から、携帯電話識別IDを抽出し、登録済の識別IDかを判定し(ステップS23)、登録済みであればステップS24へ進む。他方、未登録の場合は終了する(ステップS23で「No」から「終了」)。携帯電話識別IDは予めSTB20に対して登録する必要があるが、登録方法の詳細については後述する。
On the other hand, on the
次に、ポインタ制御部203が、ポインタ状態情報211を参照し、起動済みの携帯電話識別IDか判定し(ステップS24)、起動済みであればポインタ状態情報を読み込み、次にポインタ指示コードによってXY軸移動方向を決定し、移動量によってポインタ状態情報211を更新する。未起動の場合は、ポインタ現在位置に初期値を設定し、XY軸移動方向、移動量によりポインタ状態情報211を更新する(ステップS26)。ここで、ポインタ指示コードによっては、移動量を多くした場合や、移動する座標が指定されていたりする場合もある。
Next, the
次に、ポインタ描画部205によって、現在位置情報とXY軸移動方向と移動量、指定座標をもとにポインタカーソルの描画を行うとともに、受信したリモコンコード情報とアクション情報210を照合し、アクション情報が含まれる場合、対応するアプリケーション(AP)206やオペレーティングシステム(OS)207に対してイベントとしてメッセージを送る(ステップS27)。
Next, the
以上の処理によって、図4に示すように、例えば、携帯電話10のリモコン機能を用いて、十字キー12、中央キー13、メニューキー14、テンキー15等を操作することで、TVモニタ30の画面31上に表示されるポインタカーソル4(4a、4b)を制御する情報を携帯電話10からリモコンコード情報に変換し赤外線信号として送信し、STB20に受信させることでTVモニタ30上のポインタカーソル4の移動とクリックを実現する。テンキー15の配置をTVモニタ画面31へオーバーラップすることで(すなわちテンキー「1」〜「9」を画面領域301〜309に対応させることで)、例えばテンキーの「9」159を押すとTV画面31の右下領域309へマウスポインタ4が即座に移動し、大雑把な移動を行うことができ、次に十字キー12で詳細な移動が行うことができる。また、特別に指定されたキー(この例ではメニューキー14)を押し続けながら十字キー12を押すことで、マウスポインタの移動速度を変えることができる。ポインタ4aはメニューキー14を押さない場合の同一時間での移動を表し、ポインタ4bはメニューキー14を押しながらの場合の移動を表している。
As a result of the above processing, as shown in FIG. 4, the screen of the
(2)複数の携帯電話を同時に使用する場合に、携帯電話からSTBに送信されるリモコン信号(赤外線信号)の送信タイミングを各携帯電話間でずらすための機能:図5は、本機能の概要を示すシステム図である。図5は、3台の携帯電話10a、10bおよび10cを同時に1台のSTB20に対して使用する例を示している。携帯電話1(10a)、携帯電話2(10b)、携帯電話3(10c)からのリモコン信号の送信時間が、各携帯電話内部の時刻情報を利用してそれぞれ期間TS1、TS2、およびTS3に時分割制御される。図5の例では、期間TS4は使用されていないが、TS1〜TS4の4個のタイムロット(TS)を1周期としてこれが繰り返される。また、画面31には、携帯電話1(10a)に対応するポインタ4a、携帯電話2(10b)に対応するポインタ4b、および携帯電話3(10c)に対応するポインタ4cが表示される。各ポインタ4a〜4cは、各携帯電話10a〜10cのリモコン操作に応じて移動したり、クリック指示を行ったりする。また、図5の例では、各ポインタ4a〜4cに、丸で囲んだ「1」〜「3」の数字を表示することでポインタの識別ができるようにしている。ただし、数字以外に、イメージや文字を表示したり、ポインタカーソル自体を異なる形状(色)の矢印にしたり、矢印以外のイメージとするようにしてもよい。
(2) Function for shifting the transmission timing of a remote control signal (infrared signal) transmitted from a mobile phone to an STB when using a plurality of mobile phones simultaneously: FIG. 5 shows an overview of this function FIG. FIG. 5 shows an example in which three
本機能を実現するための構成を図6に示した。なお、図1と同一の構成には同一の参照符号を用いている(以下、他の図においても同様)。図6に示す通信データ制御部120は、赤外線通信によって、STB20からTS(タイムスロット)割当情報や基本周期情報を受信し、送信タイミング情報106を生成する。時計時刻情報121は、携帯電話10に備えられている時計機能によって生成された時刻を表す情報を記憶した記憶装置である。STB20内の通信データ制御部220は、携帯電話10a、10b、…のリモコン同士を同期させるために、TS割当開始時間、送信可能時間、基本周期情報を送信する。同期情報230は、基本周期情報、携帯電話識別ID登録数上限値、自動登録の可否情報、送信可能時間を示す情報である(図25参照)。ここで、基本周期情報は時分割制御の繰り返し周期であり、送信可能時間は各TS内の信号送信可能時間である。通信データ制御部220によって、携帯電話識別ID毎に異なるTSが割当てられることになる。
A configuration for realizing this function is shown in FIG. Note that the same reference numerals are used for the same components as those in FIG. 1 (hereinafter, the same applies to other drawings). The communication
次に、図6に示す構成の処理手順を、図7および図8のフローチャートならびに送信タイミング情報106生成の詳細処理を示すシステム図(図9)を参照して説明する。なお、時分割制御が成立するには、各携帯電話10a、10b、…の時刻情報が同期している必要がある。本実施の形態では、STB20の時刻情報を基準としてその差分情報を各携帯電話で検知し、これを記録することで各携帯電話間の同期を取るようにしている。これとは別に、各携帯電話の同期を携帯電話間相互で赤外線通信等を行うことによって確立するようにすることもできる。ただし、例えば携帯電話において実行するアプリケーションの権限上の制約等で時計情報を直接合わせることができないような場合には、本実施の形態のように差分情報と時計情報とで同期をとるようにすることが有効となる。
Next, the processing procedure of the configuration shown in FIG. 6 will be described with reference to the flowcharts of FIGS. 7 and 8 and the system diagram (FIG. 9) showing the detailed processing of
図7および図8において(図7と図8の各ステップは相互に関連するものとする)、STB20と携帯電話10の赤外線送受信部を対向させるようにした後、例えば利用者によってSTB20または携帯電話10に対して所定の操作が行われると、携帯電話10とSTB20間で赤外線通信が開始され、通信路が確立される(図7のステップS31および図8のステップS41)。次に、携帯電話10が携帯電話識別IDをSTBに対して送信する(図7のステップS32)。
7 and 8 (the steps in FIGS. 7 and 8 are related to each other), the
次に、STB20では、携帯電話10の携帯電話識別IDを受信した場合、登録済の携帯電話識別IDかを携帯電話識別ID登録テーブル208に存在するかで判定し(図8のステップS42)、登録済みであればステップS45へ進む。ただし、前提として、同期情報230には、携帯電話識別ID登録数上限値と自動登録の可否を設定しておくものとする。
Next, when the mobile phone identification ID of the
未登録の場合は(ステップS42で「No」の場合は)、同期情報230の自動登録可否が可能で、かつ、携帯電話識別ID登録数上限値と現在の登録数を判定し空きがあるときには(ステップS43で「Yes」のときには)、携帯電話識別ID登録テーブル208に携帯電話識別IDを登録する(ステップS44)。同時に識別ID別データエリア情報231(図26を参照して詳細は後述する)を参照し、識別IDが登録されていなければ、追加登録を行う。自動登録不可の場合は(ステップS43で「No」の場合は)、赤外線通信を終了する(ステップS47および図7のステップS36)。登録済みの状態となった場合は(ステップS42で「Yes」またはステップS44で登録した場合は)、携帯電話識別ID登録数上限値と基本周期と登録時の携帯電話識別IDに対応したTS割当番号によって、TS割当開始時間を計算し、送信可能時間を示す情報とともに送信する(ステップS45)。以後、同様の内容を基本周期毎(この例では1秒毎)に同じ信号を繰り返し送信する(ステップS46)。
If unregistered (if “No” in step S42), automatic registration of the
携帯電話10側では、STB20側からTS割当開始時間(ここでは図9の時間ts2とする)を受信した後(図7のステップS33、図9の吹き出しで囲んで示した手順(1))、STB20側から基本周期で情報を繰り返し受信することで基本周期(STB20側の時計情報によるもの)を認識し、送信タイミング情報106に設定するとともに、その時点での携帯電話側の時計情報から基本周期との差分t1を抽出する(図7のステップS34、図9の手順(2)および(3))。次に、受信済みのTS割当開始時間ts2と基本周期との差分t1から、携帯電話10側の時間でのオフセット時間tofを抽出し送信タイミング情報106に設定する(図7のステップS35、図9の手順(4))。そして、赤外線通信を終了する(図7のステップS36および図8のステップS47)。
On the
なお、携帯電話10では、STB20側からTS割当開始時間を取得したときに同時に(あるいは他の時刻に)、送出可能時間(TSe)を取得して、送信タイミング情報106に設定する(図9の手順(5))。送出可能時間TSeは、信号を送出可能な時間を表すものであり、送出可能開始時刻(STB20の基本周期開始時刻からTS割当開始時間ts2後の時刻または携帯電話10の時刻周期開始時刻からオフセット時間tof後の時刻)から送出が禁止されるまでの時間である。
At the same time (or at another time) when the TS allocation start time is acquired from the
以上の処理によって携帯電話10側で送信タイミング情報106を設定することができる。この送出タイミング情報106を用いることで、例えば図2のステップS14でタイミング調整が行われる。
Through the above processing, the
(3)複数の携帯電話を同時に使用する場合に、STBに接続されたTVモニタの画面を複数の領域に分割するとともに、各携帯電話に対応する複数のポインタを各領域内に移動範囲を限定して表示したり、STB内に携帯電話から受信した静止画像、動画像(映像)からななる画像データを記憶するための記憶装置を設け、各画像データを各ポインタに対応する領域に表示したり、TVモニタの複数の分割領域の一つの領域を全画面に表示したりする機能:本機能を実現するための構成例を図10に示した。図1に示す構成に対して、図10に示す構成ではSTB20内に画面移動制限情報212が追加されていて、またポインタ制御部203aの内部処理が一部追加されている。さらにオペレーティングシステム207(またはアプリケーション206)によって各携帯電話10に対応した画像データを記録するためのデータエリア240を新たに図示している。なお、図1と同一の参照符号を付けた構成は、同一またはほぼ同一の構成からなるものであり、説明を省略する。
(3) When using a plurality of mobile phones at the same time, the screen of the TV monitor connected to the STB is divided into a plurality of areas, and a plurality of pointers corresponding to the respective mobile phones are limited within the respective areas. A storage device for storing image data consisting of still images and moving images (video) received from a mobile phone is provided in the STB, and each image data is displayed in an area corresponding to each pointer. Or a function of displaying one area of a plurality of divided areas of the TV monitor on the entire screen: FIG. 10 shows a configuration example for realizing this function. In contrast to the configuration shown in FIG. 1, in the configuration shown in FIG. 10, screen
図10において、ポインタ制御部203aは、リモコンコード解析部202で解析された情報によって、ポインタ状態情報を設定・更新し、画面移動制限情報212から移動範囲を決定し、アクション情報を決定し、アクション処理部204およびポインタ描画部205へ引継ぐ。画面移動制限情報212には、図24に示すように、起動中のポイントカーソルの数に応じて、レイアウトパターンを用意し、TS番号毎に制限領域が、X・Y座標、X・Y幅で設定されている。本実施の形態では、図12に示すように、複数の携帯電話を使用する場合に、画面31を複数の領域に分割し(図12では3分割)、各領域を特定の携帯電話の専用領域(ポインタ4a、4b、4cが移動可能な領域)とする機能を提供する。領域の分割形態は、分割数によって異なり、図24の画面移動制限情報212には、分割しない場合をレイアウトパターン「01」、2〜4分割する場合をレイアウトパターン「02」〜「04」として、4つのレイアウトパターンを設定している。そして、各レイアウトパターンに対して、各制限領域を1〜4個設定するとともに、各制限領域とタイムスロット番号とを対応付けることで各制限領域と各携帯電話とを対応させるようにしている。例えば図12に示すように、画面31を制限領域31a、31bおよび31cに3分割する場合、レイアウトパターン「03」が使用され、各制限領域31a〜31cの座標情報がタイムスロット「TS01〜TS03」に割り当てられた値に設定されることになる。
In FIG. 10, the
次に図10の構成の処理手順を図11のフローチャートを参照して説明する。携帯電話10側の処理手順は図2に示すものと同一である。ただし、図2のステップS14における各携帯電話10a〜10cのリモコン信号送出タイミングはそれぞれ異なっている。
Next, the processing procedure of the configuration of FIG. 10 will be described with reference to the flowchart of FIG. The processing procedure on the
STB20側では、赤外線受光部201で赤外線信号を受光し(ステップS501)、リモコンコード解析部202で監視して、受光されるたびリモコンコード情報209との照合を行い、リモコンコード解析を行う(ステップS502)。次に、登録済み携帯電話識別IDかを判定し(ステップS503)、登録済みの場合には(ステップS503で「Yes」)、ポインタ状態情報211を参照し、起動済みの携帯電話識別IDか判定する(ステップS504)。起動済みの携帯電話識別IDの判定は、ポインタ状態情報211の“起動中表示”のところが“1”となっている行のTS割当番号に対応する携帯電話識別IDを、携帯電話識別ID登録テーブル208を参照することによって行われる。
On the
起動済みの時(ステップS504で「Yes」)、ポインタ状態情報211のすべてのポインタに対する全画面表示を参照し、全画面表示中のポインタがあるか判定する(ステップS505)。ここで、全画面表示中のポインタとは、図13に示すように、分割された特定の制限領域(図13では制限領域31c)を全画面に表示している表示状態(図13の右下の状態)である場合に、その全画面表示中の特定の制限領域(31c)で表示すべきポインタ(この例ではポインタ4cまたは4d)であることを意味する。なお、図13でポインタ4cは制限領域31cに対応する携帯電話10cのポインタであり、ポインタ4dは領域制限に関わらず制限領域31a〜31cのいずれにも移動可能な高優先度を持つ他の携帯電話10dのポインタである。
When activated ("Yes" in step S504), the full screen display for all pointers in the
全画面表示中のポインタがある場合(ステップS505で「Yes」)、そのポインタと今回起動済みのポインタが一致するか判定する(ステップS506)。一致する場合(ステップS506で「Yes」)、ステップS507へ進む。一致しない場合(ステップS506で「No」)、画面表示できないので処理を終了する。一方、全画面表示中のポインタがなければ(ステップS505で「No」)、ステップS507へ進む。 If there is a pointer that is displayed on the full screen (“Yes” in step S505), it is determined whether the pointer matches the currently activated pointer (step S506). If they match (“Yes” in step S506), the process proceeds to step S507. If they do not match (“No” in step S506), the screen is not displayed and the process ends. On the other hand, if there is no pointer being displayed on the full screen (“No” in step S505), the process proceeds to step S507.
ステップS507では、優先識別IDの判定を行う。ここで優先識別IDとは携帯電話識別ID登録テーブル208の当該携帯電話識別IDに対応する優先度が所定の値未満(図20の例では「1」未満)の場合の携帯電話識別IDであり、制限領域のすべてに渡って移動可能なポインタに対応するものである。優先識別ID以外の時は(ステップS507で「No」)、今回のポインタ指示コードと指定座標、移動量を参照し、画面移動制限情報212の対応するTS割当のx幅y幅の範囲から超えないかチェックし(ステップS515)、範囲を超える場合は範囲内の値に変更し、ポインタ状態情報211を更新する(ステップS510)。
In step S507, the priority identification ID is determined. Here, the priority identification ID is a cellular phone identification ID when the priority corresponding to the cellular phone identification ID in the cellular phone identification ID registration table 208 is less than a predetermined value (less than “1” in the example of FIG. 20). , Corresponding to a pointer that can be moved over the entire restricted area. When the ID is other than the priority identification ID (“No” in step S507), the current pointer instruction code, the designated coordinates, and the movement amount are referred to, and exceed the x width y width range of the corresponding TS allocation in the screen
優先識別IDの時は(ステップS507で「Yes」)、ポインタ指示コードが画面切替か判定する(ステップS508)。画面切替とは、図21に示すようにポインタ指示コードが例えば「166」となるリモコンコード「066」(クリアキー(図18参照))が受信されたときのアクションを意味する。図13の例では、優先携帯電話10dにおいて画面切替を指示する操作が行われた場合に、分割した複数の制限領域を同時に表示する状態と、1つの制限領域を全画面表示(拡大表示)する状態とを交互に切り替える機能が提供される。 If it is a priority identification ID (“Yes” in step S507), it is determined whether the pointer instruction code is a screen switch (step S508). The screen switching means an action when a remote control code “066” (clear key (see FIG. 18)) in which the pointer instruction code becomes “166”, for example, is received as shown in FIG. In the example of FIG. 13, when an operation for instructing screen switching is performed on the priority mobile phone 10d, a state in which a plurality of divided restricted areas are simultaneously displayed and one restricted area is displayed in full screen (enlarged display). A function for alternately switching between states is provided.
画面切替でない時は(ステップS508で「No」)、指示された情報でポインタ状態情報を更新する。画面切替の場合(ステップS508で「Yes」)は、指定領域の全画面表示または全画面表示からの復帰を行う(ステップS509)。 When the screen is not switched (“No” in step S508), the pointer state information is updated with the instructed information. In the case of screen switching (“Yes” in step S508), the designated area is restored to full screen display or full screen display (step S509).
ここでステップS509の処理について詳細に説明する。未全画面表示の時、現在のポインタ位置の座標を含む領域を、画面移動制限情報のx幅y幅の範囲より抽出する。その際、参照するレイアウトパターンは、ポインタ状態情報211の起動中の数により決定する。次に決定した領域に対応するポインタのポインタ状態情報211の全画面表示にYES(“1”)を設定し、それ以外のポインタおよびそのポインタにより起動されたアプリケーション(制限領域)は非表示とさせる描画制御指示を設定する(ステップS510)。一方、全画面表示の時は、ポインタ状態情報211の全画面表示をNO(“0”)に設定し、全画面表示の時に非表示としたポインタおよびポインタにより起動されていたアプリケーション(制限領域)を再度個別表示するように描画制御指示を設定する(ステップS510)。
Here, the process of step S509 will be described in detail. When not fully displayed, an area including the coordinates of the current pointer position is extracted from the range of x width and y width of the screen movement restriction information. At this time, the layout pattern to be referenced is determined by the number of
一方、ステップS504で起動済みでないと判定された場合(ステップS504で「No」)、ポインタ状態情報211の各ポインタの全画面表示を参照し、全画面表示中のポインタがあるか判定する(ステップS512)。全画面表示中のポインタがある場合(ステップS512で「No」)、画面表示できないので処理を終了する。
On the other hand, if it is determined in step S504 that it has not been activated (“No” in step S504), the full screen display of each pointer in the
全画面表示中のポインタがなければ(ステップS512で「Yes」)、ポインタ状態情報211を参照し現在起動中のポインタ数を抽出し、そのポインタ数により、画面移動制限情報212から今回ポインタを新規追加した場合のレイアウトパターンを抽出する。既に起動中の全てのポインタ状態情報211の位置情報を、画面移動制限情報212の対応するTS割当のx幅y幅の範囲の中央に位置するように変更する(ステップS513)。次に、新規追加ポインタのポインタ状態情報211には、レイアウトパターンで指定されたx幅y幅の範囲の中央位置を基準に、ポインタ指示コードで指示されるように移動情報を設定する(ステップS514)。
If there is no pointer being displayed on the full screen (“Yes” in step S512), the
ステップS511では、ポインタ状態情報および、描画制御指示を基にポインタカーソル等の描画を行う。ポインタ指示コードがアクション指示の時は、アクション情報を照合し対応するアプリケーション206やオペレーティングシステム207に対してイベントとしてメッセージを送る。たとえは、アクション情報としてアプリケーション起動のメニュー表示が設定されていれば、起動できるアプリケーション一覧を表示し、さらに次のアクションで、アプリケーションを選択し実行することができる。例えば、画像ビューワを選択した場合、画像ビューワが起動され、携帯電話識別ID対応のデータ領域240の画像データを表示することができる。
In step S511, a pointer cursor or the like is drawn based on the pointer state information and the drawing control instruction. When the pointer instruction code is an action instruction, action information is collated and a message is sent as an event to the
図12に画面分割の一例を示した。図12に示す例では、画面31を制限領域31a、31bおよび31cの3つに分割している。各制限領域31a、31bおよび31cは、携帯電話1(10a)、携帯電話2(10b)および携帯電話3(10c)に対応し、またカーソル4a、4bおよび4cが表示されている。また、各制限領域31a、31bおよび31cには、各携帯電話1(10a)、携帯電話2(10b)および携帯電話3(10c)に対応する画像情報51、52および53が表示されている。これらの画像情報51、52および53は、データエリア240中の各携帯電話1(10a)、携帯電話2(10b)および携帯電話3(10c)に対して割り当てられた記憶領域241、242および243に記憶されている画像データ51、52および53に対応するものである。
FIG. 12 shows an example of screen division. In the example shown in FIG. 12, the
また、図13に示す例では、3つの携帯電話1(10a)、携帯電話2(10b)および携帯電話3(10c)よりも高い優先度が設定された携帯電話X(10d)のカーソル4dを起動し、画面の切り替えを行う例を示している。
Further, in the example shown in FIG. 13, the
(4)画像データを記憶するための記憶装置を複数の領域に分割可能で、かつ各携帯電話に対応して各記憶領域を自動的に割り当てる機能:本機能を実現するための構成例を図14に示した。図6または図10に示す構成に対して、図14に示す構成では携帯電話10内に画像データ用の記憶手段である蓄積データエリア130が追加されるとともに通信データ制御部120bが本機能に対応する処理手順を行うものに変更されている。またSTB20側では、識別ID別データエリア情報231が設けられるとともに、通信データ制御部220bがデータエリア240内のデータを制御可能なものに変更されている。なお、他の図と同一の参照符号を付けた構成は、同一またはほぼ同一の構成であり、説明を省略する。
(4) Function that can divide a storage device for storing image data into a plurality of areas and automatically assign each storage area in correspondence with each mobile phone: configuration example for realizing this
図14において、携帯電話10側の通信データ制御部120bは、赤外線通信によって蓄積データエリア130内の画像データを、携帯電話識別IDとともに送信する処理を行う(図17のシステム図参照)。蓄積データエリア130には、動画または静止画の画像データが記憶されている。一方、STB側の通信データ制御部220bは、赤外線通信によってデータを受信する際、携帯電話識別IDを受信すると、携帯電話識別ID別データエリア情報231から、データエリア240内の携帯電話識別ID別のデータエリアのアドレスを取得し、受信したデータを該当するエリアへ自動的に蓄積する。識別ID別データエリア情報231は、図26に示すように、データエリア240内の識別ID別領域(蓄積エリア)241、242、243、…のアドレス情報を、携帯電話識別ID毎に登録した情報である。
In FIG. 14, the communication
次に、図14の構成の処理手順を、図15および図16のフローチャートを参照して説明する。まず、携帯電話10とSTB20との間で赤外線通信を開始し通信路を確立する(図15のステップS61および図16のステップS71)。次に携帯電話10が携帯電話の識別IDを送信する(図15のステップS62)。
Next, the processing procedure of the configuration of FIG. 14 will be described with reference to the flowcharts of FIGS. 15 and 16. First, infrared communication is started between the
STB20では、携帯電話10の携帯電話識別IDを受信した場合、登録済の携帯電話識別IDかを判定し(図16のステップS72)、登録済みであれば通信を継続するが、未登録の場合は通信を終了する(図16のステップS75および図15のステップS64)。
When the mobile phone identification ID of the
登録済みの場合、携帯電話10は送信データを選択して送信し(ステップS63)、STB20は識別ID別データエリア情報231から、該当する識別IDのデータエリアアドレスを抽出し(図16のステップS73)、携帯電話10から受信したデータを該当する識別ID別データエリア241、242、243等へ蓄積する(図16のステップS74)。そして、データの送受信が終了した後、赤外線通信を終了する(図15のステップS64および図16のステップS75)。
If registered, the
以上の処理で、図17に示すように、データエリア240内に携帯電話毎の記憶領域が自動的に作成され、自動的に携帯電話毎に送信されたデータが蓄積される。
With the above processing, as shown in FIG. 17, a storage area for each mobile phone is automatically created in the
以上、各機能(1)〜(4)について説明したが、全体の処理手順は例えば次のようになる。(ア)携帯電話10からSTB20のデータエリア240内の個別割当エリアへ赤外線通信によるデータ転送が行われる(機能(4))。(イ)同時に携帯電話10とSTB20との間で赤外線通信を行い、同期を取り、携帯電話10毎に異なる時間割当を行う(機能2)。(ウ)複数の携帯電話10からSTB20へ信号を送信し、複数のポインタカーソルを制御する(機能3)。(エ)また個別に画像データなどを個別表示エリアに表示させることができる(機能3)。なお、機能(1)については、(ア)〜(エ)のいずれにおいても用いることができる。
The functions (1) to (4) have been described above. The overall processing procedure is as follows, for example. (A) Data transfer by infrared communication is performed from the
本実施の形態によれば次のような効果を得られる。一方通行の信号しか送信できない携帯電話リモコン信号(携帯電話リモコンとはリモコン信号の送信機能を使用可能な状態にした携帯電話を意味する)の複数信号の同時受信は、信号が混ざり合い、正常に受信できない。そこで、予め、個別に携帯電話リモコンとSTBの間で、赤外線通信(通信距離が約20cmで、1対1の双方向通信)を行い、同期を取り、携帯電話リモコン毎に異なる時間割当を行い、それぞれの携帯電話リモコン側で、割当どおりのタイミングで信号を送信できるようにする。複数の信号が同時に発信されたとしても、STB側では混ざり合わず、順番に受信することができ、見かけ上の同時受信を可能とした。複数の赤外線リモコン信号を同時に受信できる。したがって、TVモニタ上に複数のマウスポインタを表示し、個別に制御することが可能となる。TVモニタ上で個別に制御できるメリットとして、個別データの同時表示があり、これを実現するために赤外線通信によるSTBの個別割当エリアへのデータ転送とTVモニタ上に個別の表示エリアを設けることで実現する。 According to the present embodiment, the following effects can be obtained. Simultaneous reception of multiple signals of mobile phone remote control signals that can only send one-way signals (cell phone remote control means a mobile phone that can use the remote control signal transmission function) Cannot receive. Therefore, infrared communication (one-to-one two-way communication with a communication distance of about 20 cm) is individually performed in advance between the mobile phone remote controller and the STB, and synchronization is performed, and different time allocation is performed for each mobile phone remote controller. In each mobile phone remote control side, a signal can be transmitted at the timing according to the allocation. Even if a plurality of signals are transmitted at the same time, they are not mixed on the STB side and can be received in order, and apparent simultaneous reception is possible. Multiple infrared remote control signals can be received simultaneously. Therefore, a plurality of mouse pointers can be displayed on the TV monitor and individually controlled. As an advantage that can be individually controlled on the TV monitor, there is simultaneous display of individual data. To realize this, data transfer to the STB individual allocation area by infrared communication and provision of an individual display area on the TV monitor Realize.
また、各機能の概要をまとめると次のようになる。(a)携帯電話リモコンの十字キー、中央キー、テンキー等を操作することで、ポインタカーソルを制御する情報をリモコンコードに変換し赤外線信号として送信し、STB等に受信させることでTVモニタ上のポインタカーソルの移動とクリックを実現する。テンキーの配置をTVモニタ画面へオーバーラップすることで、例えばテンキーの9を押すとTV画面の右下へマウスポインタが即座に移動し、大雑把な移動を行い次に十字キーで詳細な移動が行うことができる。また、特別に指定されたキーを押し続けながら十字キーを押すことで、マウスポインタの移動速度を変えることができる。
The summary of each function is as follows. (A) By operating the cross key, center key, numeric keypad, etc. of the mobile phone remote controller, information for controlling the pointer cursor is converted into a remote control code, transmitted as an infrared signal, and received by the STB etc. on the TV monitor Move and click the pointer cursor. By overlapping the numeric keypad layout on the TV monitor screen, for example, when the
(b)携帯電話リモコンからの送信信号に携帯電話対応の識別IDを付与し、送信時には他の携帯電話リモコンとの競合を避けるためにタイミングを調整して送信する。STB等では、受信した識別IDをもとに送信者を特定することで、それぞれの送信者に対応したポインタカーソルを同一TV画面に表示し制御することができる。この場合、特に上記(a)の機能と組み合わせることで、リモコン信号の受付可能時間帯が制限されることによるポインタ移動指示の不連続性による影響を容易に小さく抑えることができる。なお、携帯電話識別IDの代わりに、TS割当番号を送信信号に付与するようにしてもよい。つまり、送信信号に付与する情報は、携帯電話をそれぞれ識別できる情報(識別符号)であれば、識別IDに限らない。 (B) An identification ID corresponding to a mobile phone is given to a transmission signal from the mobile phone remote controller, and at the time of transmission, the timing is adjusted to avoid competition with other mobile phone remote controllers. In the STB or the like, by specifying the sender based on the received identification ID, a pointer cursor corresponding to each sender can be displayed and controlled on the same TV screen. In this case, in particular, by combining with the function (a) above, it is possible to easily suppress the influence of the discontinuity of the pointer movement instruction due to the limitation of the receivable time zone of the remote control signal. Note that a TS allocation number may be assigned to the transmission signal instead of the mobile phone identification ID. That is, the information added to the transmission signal is not limited to the identification ID as long as it is information (identification code) that can identify each mobile phone.
(c)識別IDにより特定された送信者のポインタカーソルが移動できる範囲を制限することで、識別ID毎の専用表示領域をつくることができる。 (C) By limiting the range in which the sender's pointer cursor specified by the identification ID can be moved, a dedicated display area for each identification ID can be created.
(d)識別IDごとの専用記憶領域を割り当てて、蓄積された映像データ等をポインティングデバイスで制御することで専用表示領域に表示することができる。 (D) A dedicated storage area for each identification ID is allocated, and the stored video data and the like can be displayed on the dedicated display area by controlling with a pointing device.
(e)識別IDを持つ送信者には、優先度を設定することができ、優先度の高いリモコン信号は全ての領域でポインタを表示させることができる。また、特定のボタンを押すこと現在ポイント中の領域を全画面表示したり、もとの分割領域に切替えることもできる。 (E) A sender having an identification ID can set a priority, and a remote control signal having a high priority can display a pointer in all areas. In addition, by pressing a specific button, the area at the current point can be displayed on the full screen or switched to the original divided area.
(f)STB等へ赤外線通信により映像データ等を転送する場合、識別IDも転送し、STB側で識別することで、自動的に映像データ等を識別ID対応の記憶領域に蓄積させることができる。 (F) When video data or the like is transferred to the STB by infrared communication, the identification ID is also transferred and identified on the STB side, whereby the video data or the like can be automatically stored in a storage area corresponding to the identification ID. .
以上説明したように本発明の実施の形態によれば次のような効果を得ることができる。(ア)TVモニタに対し専用リモコンを使用せず、携帯電話の簡単な操作でポインティングデバイスを表示し、素早く移動させたり、移動速度を変更することができ操作性が向上する。(イ)TVモニタに複数の携帯電話から複数のポインタを表示し、同時に操作が反映されることができ、複数の利用者の共同作業やコミュニケーションを行うことができる。(ウ)携帯電話機に蓄積された映像データ等をSTB上の専用の領域に転送することができ、専用の領域画面でポインタを操作することで映像データを表示することができる。 As described above, according to the embodiment of the present invention, the following effects can be obtained. (A) A pointing device can be displayed by a simple operation of a mobile phone without using a dedicated remote control for the TV monitor, and the operability can be improved by quickly moving or changing the moving speed. (A) A plurality of pointers can be displayed on a TV monitor from a plurality of mobile phones, and the operation can be reflected at the same time, so that a plurality of users can collaborate and communicate. (C) Video data or the like stored in the mobile phone can be transferred to a dedicated area on the STB, and the video data can be displayed by operating a pointer on the dedicated area screen.
また、適用分野としては、例えば、リビングにおいて、TVが情報家電のホームターミナルとなった場合にファミリーコミュニケーションのツールとして活用することが考えられる。 As an application field, for example, in a living room, when a TV becomes a home terminal of an information appliance, it can be used as a family communication tool.
なお、本発明の実施の形態は、上記のものに限定されず、各構成をさらに処理(ステップ)単位で分割したり、あるいは各構成を統合したり、あるいは各データを通信回線等を介して分散して配置したりする変更が適宜可能である。本発明の各構成は、ハードウェアとソフトウェアとから構成され、そのソフトウェアの全部または一部は電子計算機読み取り可能な記録媒体や通信回線を介して配布することができる。 Note that the embodiments of the present invention are not limited to the above-described ones, and each configuration is further divided in units of processing (steps), or each configuration is integrated, or each data is transmitted via a communication line or the like. It is possible to change the arrangement in a distributed manner as appropriate. Each configuration of the present invention includes hardware and software, and all or a part of the software can be distributed via a computer-readable recording medium or a communication line.
また、携帯電話とSTBとの間の双方向通信の方法については、赤外線通信以外にも、インターネットメール、電波による無線通信、ケーブル接続等でも実現可能である。 Further, the bidirectional communication method between the mobile phone and the STB can be realized not only by infrared communication but also by Internet mail, wireless communication using radio waves, cable connection, and the like.
4a、4b ポインタ
10 携帯電話
12 十字キー
13 中央キー
14 メニューキー
15 テンキー
20 STB
30 TVモニタ
31 TV画面
102 リモコンコード制御部
103 赤外線信号発光部
105 携帯電話識別ID
106 送信タイミング情報
201 赤外線信号受光部
202 リモコンコード解析部
203 ポインタ制御部
208 携帯電話識別ID登録テーブル
230 同期情報
4a,
30
106
Claims (11)
複数の操作子と、
複数の操作子の操作情報と記憶手段に記憶されている識別符号とを無線信号で送信する信号送信手段と
を有する携帯端末装置と、
一体として形成され又は外部に接続された画像表示装置を制御する装置であって、
携帯端末装置から出力された無線信号を受信する信号受信手段と、
受信した無線信号に基づいて複数の操作子の操作情報を識別符号に応じて解析する操作情報解析手段と、
操作情報解析結果に応じて画像表示装置に表示されるポインタの位置を制御する表示制御手段と
を有する画像表示制御装置と
を備えることを特徴とする画像表示制御システム。 Storage means for storing an identification code of the device;
Multiple controls,
A portable terminal device comprising: signal transmission means for transmitting operation information of a plurality of operators and identification codes stored in the storage means by radio signals;
An apparatus for controlling an image display device formed as a single unit or connected to the outside,
Signal receiving means for receiving a radio signal output from the mobile terminal device;
Operation information analyzing means for analyzing operation information of a plurality of operating elements according to the identification code based on the received radio signal;
An image display control system comprising: a display control unit that controls a position of a pointer displayed on the image display device according to an operation information analysis result.
ことを特徴とする請求項1記載の画像表示制御システム。 The operation information analyzing means refers to a table that defines the operation of the plurality of operators and the relationship of the pointer movement control corresponding to the identification code, and performs the operation of the predetermined operator on the screen of the image display device. Pointer movement instruction in a predetermined direction at a movement speed different from that of a single operation as an immediate pointer movement instruction to a predetermined position above or simultaneous operation of a predetermined operation element indicating a direction and another predetermined operation element The image display control system according to claim 1, wherein the image display control system is analyzed as follows.
前記操作情報解析手段が、前記識別符号に基づいて2以上の携帯端末装置を識別し、各携帯端末装置の複数の操作子の操作情報を各携帯端末装置に対応する各ポインタの移動制御情報として解析し、
前記表示制御手段によって複数のポインタの表示制御を行う
ことを特徴とする請求項1記載の画像表示制御システム。 The signal transmission means transmits the wireless signal at a timing set for each mobile terminal device;
The operation information analyzing means identifies two or more portable terminal devices based on the identification code, and the operation information of a plurality of operators of each portable terminal device is used as movement control information for each pointer corresponding to each portable terminal device. Parse and
The image display control system according to claim 1, wherein display control of a plurality of pointers is performed by the display control means.
ことを特徴とする請求項3記載の画像表示制御システム。 The image display control system according to claim 3, wherein movement ranges of a plurality of pointers controlled by the display control unit are individually limited for each mobile terminal device.
前記表示制御手段が、前記各ポインタの移動制限範囲に対応させて画像データ記憶手段に記憶された各携帯端末装置に対応する画像データを表示させる
ことを特徴とする請求項4記載の画像表示制御システム。 The image display control device further includes image data storage means that can be assigned to each mobile terminal device,
5. The image display control according to claim 4, wherein the display control means displays image data corresponding to each portable terminal device stored in the image data storage means in correspondence with the movement restriction range of each pointer. 6. system.
ことを特徴とする請求項5記載の画像表示制御システム。 6. The image display control system according to claim 5, wherein a priority is set for each mobile terminal device, and the movement range of the pointer corresponding to the mobile terminal device for which the predetermined priority is set is not limited.
ことを特徴とする請求項6記載の画像表示制御システム。 Corresponds to another mobile terminal device set with another priority where the pointer corresponding to the mobile terminal device is located when a predetermined operator of the mobile terminal device set with the predetermined priority is operated The image display control system according to claim 6, wherein the movement limit range of the pointer to be displayed is enlarged and displayed.
ことを特徴とする請求項5記載の画像表示制御システム。 6. The image display according to claim 5, wherein the storage of the image data in the image data storage means is automatically performed on an allocation area for each mobile terminal device based on an identification code of the mobile terminal device. Control system.
複数の操作子の操作情報と記憶手段に記憶されている識別符号とを無線信号で送信し、
一体として形成され又は外部に接続された画像表示装置を制御する装置であって、携帯端末装置から出力された無線信号を受信する信号受信手段を有する画像表示制御装置において、
受信した無線信号に基づいて複数の操作子の操作情報を識別符号に応じて解析し、
操作情報解析結果に応じて画像表示装置に表示されるポインタの位置を制御する
ことを特徴とする画像表示制御方法。 In a mobile terminal device having storage means for storing the identification code of the device and a plurality of operators,
The operation information of the plurality of controls and the identification code stored in the storage means are transmitted by radio signals,
An apparatus for controlling an image display apparatus that is integrally formed or connected to the outside, wherein the image display control apparatus includes a signal receiving unit that receives a radio signal output from a mobile terminal device.
Based on the received radio signal, analyze the operation information of the plurality of controls according to the identification code,
An image display control method, comprising: controlling a position of a pointer displayed on an image display device in accordance with an operation information analysis result.
複数の操作子と、
複数の操作子の操作情報と記憶手段に記憶されている識別符号とを無線信号で、一体として形成され又は外部に接続された画像表示装置を制御する装置であって、携帯端末装置から出力された無線信号を受信する信号受信手段と、受信した無線信号に基づいて複数の操作子の操作情報を識別符号に応じて解析する操作情報解析手段と、操作情報解析結果に応じて画像表示装置に表示されるポインタの位置を制御する表示制御手段とを有する画像表示制御装置に対して送信する信号送信手段と
を備えることを特徴とする携帯端末装置。 Storage means for storing an identification code of the device;
Multiple controls,
A device for controlling an image display device that is formed as a single unit or connected to the outside with a wireless signal, the operation information of a plurality of controls and the identification code stored in the storage means, and is output from a portable terminal device A signal receiving means for receiving the received wireless signal, an operation information analyzing means for analyzing the operation information of the plurality of operating elements according to the identification code based on the received wireless signal, and an image display device according to the operation information analysis result A signal transmitting means for transmitting to an image display control device having a display control means for controlling the position of a displayed pointer.
当該携帯端末装置の識別符号を記憶する記憶手段と、複数の操作子と、複数の操作子の操作情報と記憶手段に記憶されている識別符号とを無線信号で送信する信号送信手段とを有する携帯端末装置から出力された無線信号を受信する信号受信手段と、
受信した無線信号に基づいて複数の操作子の操作情報を識別符号に応じて解析する操作情報解析手段と、
操作情報解析結果に応じて画像表示装置に表示されるポインタの位置を制御する表示制御手段と
を備えることを特徴とする画像表示制御装置。 An apparatus for controlling an image display device formed as a single unit or connected to the outside,
Storage means for storing the identification code of the portable terminal device, a plurality of operators, and a signal transmission means for transmitting operation information of the plurality of operators and the identification code stored in the storage means by radio signals Signal receiving means for receiving a radio signal output from the mobile terminal device;
Operation information analyzing means for analyzing operation information of a plurality of operating elements according to the identification code based on the received radio signal;
An image display control device comprising: display control means for controlling a position of a pointer displayed on the image display device according to an operation information analysis result.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004237254A JP2006058946A (en) | 2004-08-17 | 2004-08-17 | Image display control system, image display control method, image display controller and portable terminal equipment |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004237254A JP2006058946A (en) | 2004-08-17 | 2004-08-17 | Image display control system, image display control method, image display controller and portable terminal equipment |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2006058946A true JP2006058946A (en) | 2006-03-02 |
Family
ID=36106391
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2004237254A Pending JP2006058946A (en) | 2004-08-17 | 2004-08-17 | Image display control system, image display control method, image display controller and portable terminal equipment |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2006058946A (en) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008090795A (en) * | 2006-10-05 | 2008-04-17 | Denso Corp | On-vehicle multi-cursor system |
JP2009294579A (en) * | 2008-06-09 | 2009-12-17 | Yahoo Japan Corp | Voice output device, system, and method |
WO2012053764A2 (en) | 2010-10-20 | 2012-04-26 | Lg Electronics Inc. | Method for moving pointer in video display apparatus and video display apparatus thereof |
JP2014089379A (en) * | 2012-10-31 | 2014-05-15 | Seiko Epson Corp | Image display system, and control method of image display system |
JP2014187509A (en) * | 2013-03-22 | 2014-10-02 | Kddi Corp | Communication terminal, management device, program, system, and method |
-
2004
- 2004-08-17 JP JP2004237254A patent/JP2006058946A/en active Pending
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008090795A (en) * | 2006-10-05 | 2008-04-17 | Denso Corp | On-vehicle multi-cursor system |
JP2009294579A (en) * | 2008-06-09 | 2009-12-17 | Yahoo Japan Corp | Voice output device, system, and method |
WO2012053764A2 (en) | 2010-10-20 | 2012-04-26 | Lg Electronics Inc. | Method for moving pointer in video display apparatus and video display apparatus thereof |
CN103181183A (en) * | 2010-10-20 | 2013-06-26 | Lg电子株式会社 | Method for moving pointer in video display apparatus and video display apparatus thereof |
EP2630790A2 (en) * | 2010-10-20 | 2013-08-28 | LG Electronics Inc. | Method for moving pointer in video display apparatus and video display apparatus thereof |
EP2630790A4 (en) * | 2010-10-20 | 2014-04-02 | Lg Electronics Inc | Method for moving pointer in video display apparatus and video display apparatus thereof |
CN103181183B (en) * | 2010-10-20 | 2017-04-05 | Lg电子株式会社 | For the method and its video display apparatus of the mobile pointer in video display apparatus |
JP2014089379A (en) * | 2012-10-31 | 2014-05-15 | Seiko Epson Corp | Image display system, and control method of image display system |
JP2014187509A (en) * | 2013-03-22 | 2014-10-02 | Kddi Corp | Communication terminal, management device, program, system, and method |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101832761B1 (en) | Display device, method for remotely controlling display device | |
US11650667B2 (en) | Haptic feedback remote control systems and methods | |
WO2014090047A1 (en) | Multi-screen switching method and system for video conferencing | |
EP2658275A2 (en) | Display apparatus and method for providing user interface thereof | |
KR20130130453A (en) | Image display apparatus and operating method for the same | |
US20150189357A1 (en) | Multimedia device and remote control device for synchronizing screen, and method for same | |
KR20130026234A (en) | An image display device, a remote controller and method for operating the same | |
CN105763904A (en) | Method and apparatus for operating video play and control buttons of smart television set by using directional hand gestures | |
JP2010252005A (en) | Information communication system, information processing apparatus, information communication program, and information communication method | |
JP2005026740A (en) | Method of building device control interface | |
JP5093607B2 (en) | REMOTE DEVICE, REMOTE CONTROL METHOD, PROGRAM, AND DISPLAY CONTROL DEVICE | |
JP2006058946A (en) | Image display control system, image display control method, image display controller and portable terminal equipment | |
JP5184491B2 (en) | Television system | |
JP2013152566A (en) | Remote control device | |
KR20160095377A (en) | Display device and operating method thereof | |
KR20220048245A (en) | Wireless device and wireless system | |
CN106454457B (en) | Image display apparatus and control method thereof | |
KR101990867B1 (en) | Method of setting collectively a list and terminal using the same | |
KR101828399B1 (en) | Method for operating an Image Display Device and a Mobile terminal | |
CN106937144A (en) | A kind of set-top box remote controller based on mobile terminal realizes apparatus and method | |
JP2005176218A (en) | Data transmission and reception device and data transmission and reception system | |
EP3396968B1 (en) | Display apparatus and method of operating the same | |
KR101849563B1 (en) | Image display apparatus, and method for operating the same | |
JP2006171092A (en) | Display system and display control method | |
CN116264032A (en) | Equipment control method, device, storage medium and electronic equipment |