JP2005244866A - Information communication terminal and terminal control method, and terminal control program as well as record medium recording the same - Google Patents
Information communication terminal and terminal control method, and terminal control program as well as record medium recording the same Download PDFInfo
- Publication number
- JP2005244866A JP2005244866A JP2004055129A JP2004055129A JP2005244866A JP 2005244866 A JP2005244866 A JP 2005244866A JP 2004055129 A JP2004055129 A JP 2004055129A JP 2004055129 A JP2004055129 A JP 2004055129A JP 2005244866 A JP2005244866 A JP 2005244866A
- Authority
- JP
- Japan
- Prior art keywords
- information
- mark
- display
- unit
- communication
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Telephone Function (AREA)
- Telephonic Communication Services (AREA)
- Digital Computer Display Output (AREA)
- Information Transfer Between Computers (AREA)
Abstract
Description
本発明は、通信機能を持つ情報通信端末を利用する利用者同士が、お互いの情報通信端末の表示画面上に共通の画面を表示して、コミュニケーションをとることが可能な情報通信端末および端末制御方法、端末制御プログラム並びにこれを記録した記録媒体に関するものである。 The present invention relates to an information communication terminal and terminal control in which users using information communication terminals having a communication function can communicate with each other by displaying a common screen on the display screen of each information communication terminal. The present invention relates to a method, a terminal control program, and a recording medium on which the program is recorded.
近年、遠隔地の相手と、手軽にコミュニケーションを行うためのパーソナルツールとして、携帯型電話機が広く普及したことにより、音声通話や電子メールによるコミュニケーションは、年齢層を問わず日常的に行われるようになっている。 In recent years, mobile phones have become widespread as personal tools for easily communicating with remote parties, so that voice communication and e-mail communication can be performed on a daily basis regardless of age group. It has become.
また、携帯型電話機へのカメラ機能の搭載が一般的になってきたため、音声や文字だけのコミュニケーションから、撮影した静止画や動画等の画像を相手に送信する、テレビ電話機能を利用する等、ビジュアル的要素を加えたコミュニケーションが可能となっている。また、画像情報が付加されたことにより、コミュニケーションツールとしての機能が飛躍的に向上し、利便性が高まっている。 In addition, since it has become common to install camera functions on mobile phones, it is possible to transmit images such as still images and videos taken to the other party through communication using only voice and text, use video phone functions, etc. Communication with visual elements is possible. In addition, the addition of image information has dramatically improved the function as a communication tool, increasing convenience.
このような、ビジュアル的要素を加えたコミュニケーションにおいては、話題の対象となる画像を相手に送信する等して、お互いの表示画面上に共通の画像を表示し、その画像に関する話題について、音声通話機能により話し合うようなケースが、通信技術の発達と共に、今後ますます増えてくるものと予想される。 In such communication with visual elements added, a common image is displayed on each other's display screen, such as by sending an image to be talked about to the other party, and a voice call is made on the topic related to that image. It is expected that the number of cases that will be discussed by function will continue to increase with the development of communication technology.
このような、お互いの表示画面上に共通の画像を表示し、その画像に関する話題について音声通話するようなコミュニケーション形態としては、従来からテレビ電話システム等が考案されている。 As such a communication mode in which a common image is displayed on each other's display screen and a voice call is made on a topic related to the image, a videophone system or the like has been conventionally devised.
特許文献1では、テレビ通信システム等の位置指定表示装置において、電話機の数字操作子(ダイヤルボタン)をカーソル移動用の操作子と兼用し、各数字操作子にベクトルデータを割り当て、複数の数字操作子がオン操作されたとき、数字操作子に割り当てられたベクトルデータのベクトル和に基づいて、画像上に重畳表示されたカーソルを移動させる位置指定表示装置について開示されている。
In
また、特許文献2では、アナログ回線を利用したテレビ電話会議システム等の遠隔カーソル位置伝送装置において、DTMF信号によって、マウスカーソル情報を音声と多重化して伝送し、1本のアナログ電話回線を介して、マウスカーソル情報と音声とを同時に伝送できる遠隔カーソル位置伝送装置について開示されている。
Further, in
また、特許文献3では、ファクシミリ伝送画像に続けて、音声および座標入力された軌跡データを送信する情報伝送装置が開示されている。この情報伝送装置からデータを受信する受信側装置は、軌跡データに応じた軌跡画像を表示手段の画面上に、ファクシミリ画像に重ねて表示させるようになっている。
情報通信端末を利用して、話題の対象となる画像を相手に送信する等して、お互いの表示画面上に共通の画像を表示し、その画像に関する話題について、音声通話機能を用いて話し合うような場合、画像上での話題の対象となる部分について説明する際に、言葉では表現し辛いこともある。 Use an information communication terminal to send a topical image to the other party, display a common image on each other's display screen, and discuss the topic related to that image using the voice call function In such cases, it may be difficult to express in words when explaining the target part of the topic on the image.
例えば、複数人の名前を知らない人々が不整列に写っている場合に、その中のある人物を示したいときや、画像に複数の物体が写っている場合に、その中の名称がわからない物を示したいとき、あるいは表示コンテンツ上の複数のアイコン中の、どれかを示したいとき等である。 For example, when people who do not know the names of multiple people appear in an unaligned manner, when you want to show a person in the image, or when multiple objects are shown in the image, the name in the image is unknown Or when it is desired to indicate any of a plurality of icons on the display content.
また、言葉で伝えるよりも画像上の対象部分を直接示したほうが、間違いが生じにくく、容易である場合や、画像上のいろいろな部分をゲーム感覚でお互いに指し示しながら話し合いたい場合もある。 In addition, there are cases where it is easier to show the target portion on the image directly than to convey it in words, and it is easier to make mistakes, and there are cases where it is desirable to discuss various portions on the image while pointing to each other like a game.
これに対して、上記従来の技術を用いれば、送信側と受信側との間で共有する画像に対して、目印を互いに表示させることが可能となるが、以下に示すような問題が残ることになる。 On the other hand, if the above-described conventional technique is used, it is possible to display the marks on the image shared between the transmission side and the reception side, but the following problems remain. become.
まず、送信側と受信側とで、共有する画像が一致していないと、目印を互いに表示させたとしても、目印によって指し示されている対象物が異なることになり、無意味なものとなってしまう。すなわち、上記従来の技術では、共有する画像が自明である場合が想定されているので、様々な画像が共有されうる状況で、どの画像を共有するべきかについての対処方法については示されていないという問題がある。 First, if the images shared by the sender and receiver do not match, even if the landmarks are displayed together, the objects pointed to by the landmarks will be different and meaningless. End up. That is, in the above-described conventional technique, since it is assumed that the image to be shared is obvious, there is no indication on how to deal with which image should be shared in a situation where various images can be shared. There is a problem.
また、送信側と受信側とで共有する画像が動画データである場合、互いに同じ動画データを表示していたとしても、表示タイミングが異なっていると、目印によって指し示される対象物が異なってしまうことになる。すなわち、動画データを共有する場合に、どのようにして同じ対象物に目印を付すようにするかが問題となる。 Also, when the image shared between the transmitting side and the receiving side is moving image data, even if the same moving image data is displayed, if the display timing is different, the object pointed to by the mark is different. It will be. In other words, when sharing moving image data, the problem is how to mark the same object.
また、送信側と受信側とで共有する画像が例えば動画データである場合、目印をつけて相手に指し示す対象物が表示画面上から消えてしまった後に目印の表示が残ると、対象物を相手が知る際に混乱してしまうことが考えられる。 In addition, when the image shared between the transmission side and the reception side is, for example, moving image data, if the display of the mark remains after the mark and the object pointed to the other party disappear from the display screen, May be confused when knowing.
本発明は、上記の問題点に鑑みてなされたものであり、その目的は、複数の情報通信端末間でお互いの表示画面上に共通の画像を表示し、その画像上で話題の対象となる部分を指し示す目印を表示する際に生じる問題を解決することができる情報通信端末および端末制御方法、端末制御プログラム並びにこれを記録した記録媒体を提供することにある。 The present invention has been made in view of the above-described problems, and an object of the present invention is to display a common image on a display screen between a plurality of information communication terminals and to be a topic of interest on the image. An object of the present invention is to provide an information communication terminal, a terminal control method, a terminal control program, and a recording medium on which this is recorded, which can solve a problem that occurs when a mark indicating a part is displayed.
また、より詳細には、本発明の目的は、複数の情報通信端末間でお互いの表示画面上に共通の画像を表示し、その画像上で話題の対象となる部分を指し示す目印を表示する際に、どのコンテンツを送信側と受信側とで共有するかを通知することができる情報通信端末および端末制御方法、端末制御プログラム並びにこれを記録した記録媒体を提供することにある。 More specifically, an object of the present invention is to display a common image on a display screen between a plurality of information communication terminals, and to display a mark indicating a topic target portion on the image. It is another object of the present invention to provide an information communication terminal, a terminal control method, a terminal control program, and a recording medium recording the same, which can notify which content is shared between the transmission side and the reception side.
また、本発明の他の目的は、複数の情報通信端末間でお互いの表示画面上に共通の動画データを表示し、その画像上で話題の対象となる部分を指し示す目印を表示する際に、送信側と受信側とで同じ対象物を的確に指し示すことを可能とする情報通信端末および端末制御方法、端末制御プログラム並びにこれを記録した記録媒体を提供することにある。 Another object of the present invention is to display common video data on a display screen between a plurality of information communication terminals, and to display a mark indicating a topical part on the image. An object of the present invention is to provide an information communication terminal, a terminal control method, a terminal control program, and a recording medium on which the same is recorded so that the same object can be accurately pointed on the transmission side and the reception side.
また、本発明のさらに他の目的は、複数の情報通信端末間でお互いの表示画面上に共通の画像を表示し、その画像上で話題の対象となる部分を指し示す目印を表示する際に、目印が不必要に残っていることによる上記のような弊害を防止することができる情報通信端末および端末制御方法、端末制御プログラム並びにこれを記録した記録媒体を提供することにある。 Still another object of the present invention is to display a common image on a display screen between a plurality of information communication terminals, and to display a mark indicating a topical part on the image. An object of the present invention is to provide an information communication terminal, a terminal control method, a terminal control program, and a recording medium recording the same, which can prevent the above-described adverse effects caused by unneeded marks.
本発明に係る情報通信端末は、上記の課題を解決するために、画像情報に基づく画像を表示画面に表示する表示部と、利用者による入力操作を受け付ける入力操作子を有する入力受付部と、他の情報通信端末との間で情報の通信を行う通信部とを備えた情報通信端末であって、外部からコンテンツデータを取得するコンテンツ取得手段と、上記コンテンツ取得手段によって取得されたコンテンツデータ、および、目印を上記表示画面に表示するように上記表示部を制御する表示制御手段と、上記入力受付部によって受け付けられた利用者による入力操作情報に基づいて、上記目印の表示位置を移動させる目印情報移動制御手段と、上記目印の位置を示す目印情報、および、上記表示部に表示されているコンテンツデータの提供元を示すコンテンツ提供元情報を他の情報通信端末に対して送信するように上記通信部を制御する通信制御手段とを備えていることを特徴としている。 An information communication terminal according to the present invention, in order to solve the above problems, a display unit for displaying an image based on image information on a display screen, an input receiving unit having an input operator for receiving an input operation by a user, An information communication terminal comprising a communication unit for communicating information with other information communication terminals, content acquisition means for acquiring content data from the outside, content data acquired by the content acquisition means, And a display control means for controlling the display unit to display the mark on the display screen, and a mark for moving the display position of the mark based on input operation information received by the user by the input receiving unit. Information movement control means, mark information indicating the position of the mark, and a container indicating the provider of the content data displayed on the display unit It is characterized by comprising a communication control means for controlling the communication unit to transmit the tool providing source information to the other information communication terminal.
また、本発明に係る端末制御方法は、画像情報に基づく画像を表示画面に表示する表示部と、利用者による入力操作を受け付ける入力操作子を有する入力受付部と、他の情報通信端末との間で情報の通信を行う通信部とを備えた情報通信端末の端末制御方法であって、外部からコンテンツデータを取得するコンテンツ取得ステップと、上記コンテンツ取得ステップで取得されたコンテンツデータ、および、目印を上記表示画面に表示するように上記表示部を制御する表示制御ステップと、上記入力受付部によって受け付けられた利用者による入力操作情報に基づいて、上記目印の表示位置を移動させる目印情報移動制御ステップと、上記目印の位置を示す目印情報、および、上記表示部に表示されているコンテンツデータの提供元を示すコンテンツ提供元情報を他の情報通信端末に対して送信するように上記通信部を制御する通信制御ステップとを有していることを特徴としている。 The terminal control method according to the present invention includes a display unit that displays an image based on image information on a display screen, an input receiving unit that includes an input operator that receives an input operation by a user, and another information communication terminal. A terminal control method for an information communication terminal comprising a communication unit that communicates information between the contents, a content acquisition step of acquiring content data from the outside, the content data acquired in the content acquisition step, and a landmark A display control step for controlling the display unit to display the mark on the display screen, and mark information movement control for moving the display position of the mark based on input operation information received by the user by the input receiving unit. A step, a mark information indicating the position of the mark, and a content data provider that is displayed on the display unit. It is characterized by having a communication control step of controlling the communication unit to transmit the Ntsu providing source information to the other information communication terminal.
上記の構成および方法では、外部から取得されたコンテンツデータ、および、利用者によって入力操作によって移動する目印が表示部に表示されるようになっている。すなわち、表示部に、外部から取得したコンテンツデータが表示された画面上で、利用者が任意の位置に目印を表示させることが可能となっている。そして、目印の位置を示す目印情報、および、表示されているコンテンツデータの提供元を示すコンテンツ提供元情報が他の情報通信端末に対して送信されるようになっている。すなわち、これらを受信した情報通信端末は、コンテンツ提供元情報によって、表示すべきコンテンツデータをどこから取得すべきかを認識することが可能となり、そのコンテンツデータを表示した状態で、目印情報に応じて目印を表示することが可能となる。 In the above configuration and method, content data acquired from the outside and a mark that is moved by an input operation by the user are displayed on the display unit. That is, the user can display a mark at an arbitrary position on the screen on which content data acquired from the outside is displayed on the display unit. The mark information indicating the position of the mark and the content provider information indicating the provider of the displayed content data are transmitted to other information communication terminals. In other words, the information communication terminal that has received them can recognize from the content provider information where to obtain the content data to be displayed, and in the state in which the content data is displayed, Can be displayed.
したがって、送信側および受信側の双方の情報通信端末において、同じコンテンツデータを表示させた状態で目印情報の送受信を行うことが可能となり、送信側の意図する状態で的確に受信側での表示を行わせることが可能となる。 Therefore, it is possible to transmit / receive the landmark information in the state where the same content data is displayed in both the information communication terminals on the transmission side and the reception side, and display on the reception side accurately in the state intended by the transmission side. It becomes possible to do.
また、本発明に係る情報通信端末は、上記の構成において、テレビ放送を受信するテレビ放送受信部をさらに備えるとともに、上記コンテンツ取得手段が、受信すべきテレビ放送のチャンネルを設定するチャンネル設定手段であり、上記通信制御手段が、上記コンテンツ提供元情報として、上記チャンネル設定部によって設定されたチャンネルのチャンネル情報を送信するように上記通信部を制御する構成としてもよい。 The information communication terminal according to the present invention further includes a television broadcast receiving unit that receives a television broadcast in the above configuration, and the content acquisition unit is a channel setting unit that sets a channel of the television broadcast to be received. The communication control unit may control the communication unit to transmit the channel information of the channel set by the channel setting unit as the content provider information.
このような構成とすれば、送信側の情報通信端末で表示されているテレビ放送のチャンネル情報を、受信側の情報通信端末が認識することが可能となる。したがって、送信側および受信側の双方の情報通信端末において、同じチャンネルのテレビ放送を表示させた状態で目印情報の送受信を行うことが可能となり、送信側の意図する状態で的確に受信側での表示を行わせることが可能となる。 With such a configuration, it becomes possible for the information communication terminal on the reception side to recognize the channel information of the television broadcast displayed on the information communication terminal on the transmission side. Therefore, it is possible to transmit and receive the landmark information in the state where the television broadcast of the same channel is displayed in both the information communication terminals on the transmission side and the reception side, and in the state intended by the transmission side, it is possible to accurately transmit the information on the reception side. Display can be performed.
また、本発明に係る情報通信端末は、上記の構成において、上記コンテンツ取得手段が、外部のネットワークから上記通信部を介して上記コンテンツデータを取得するネットワークコンテンツ受信手段であり、上記通信制御手段が、上記コンテンツ提供元情報として、上記ネットワークコンテンツ受信手段によって取得されたコンテンツデータが提供されるネットワークアドレスのアドレス情報を送信するように上記通信部を制御する構成としてもよい。 In the information communication terminal according to the present invention, in the configuration described above, the content acquisition unit is a network content reception unit that acquires the content data from an external network via the communication unit, and the communication control unit includes The communication unit may be controlled to transmit, as the content provider information, address information of a network address where content data acquired by the network content receiving unit is provided.
このような構成とすれば、送信側の情報通信端末で表示されているコンテンツデータが提供されるネットワークアドレスを、受信側の情報通信端末が認識することが可能となる。したがって、送信側および受信側の双方の情報通信端末において、ネットワーク上で提供されている同じコンテンツデータを表示させた状態で目印情報の送受信を行うことが可能となり、送信側の意図する状態で的確に受信側での表示を行わせることが可能となる。 With this configuration, the information communication terminal on the reception side can recognize the network address where the content data displayed on the information communication terminal on the transmission side is provided. Therefore, the information communication terminals on both the transmission side and the reception side can transmit / receive the landmark information in a state where the same content data provided on the network is displayed. Can be displayed on the receiving side.
また、本発明に係る情報通信端末は、画像情報に基づく画像を表示画面に表示する表示部と、他の情報通信端末との間で情報の通信を行う通信部とを備えた情報通信端末であって、上記本発明に係る情報通信端末からの目印情報およびコンテンツ提供元情報を受信するように上記通信部を制御する通信制御手段と、受信したコンテンツ提供元情報に基づいて、外部からコンテンツデータを取得するコンテンツ取得手段と、上記表示画面に、受信した目印情報に基づいて、目印を表示するように上記表示部を制御するとともに、上記コンテンツ取得手段によって取得されたコンテンツデータを表示するように上記表示部を制御する表示制御手段とを備えていることを特徴としている。 An information communication terminal according to the present invention is an information communication terminal including a display unit that displays an image based on image information on a display screen, and a communication unit that communicates information with other information communication terminals. And communication control means for controlling the communication unit so as to receive landmark information and content provider information from the information communication terminal according to the present invention, and content data from the outside based on the received content provider information Content acquisition means for acquiring the content, and controlling the display unit to display the landmark on the display screen based on the received landmark information, and displaying the content data acquired by the content acquisition means And a display control means for controlling the display unit.
また、本発明に係る端末制御方法は、画像情報に基づく画像を表示画面に表示する表示部と、他の情報通信端末との間で情報の通信を行う通信部とを備えた情報通信端末の端末制御方法であって、上記本発明に係る情報通信端末からの目印情報およびコンテンツ提供元情報を受信するように上記通信部を制御する通信制御ステップと、受信したコンテンツ提供元情報に基づいて、外部からコンテンツデータを取得するコンテンツ取得ステップと、上記表示画面に、受信した目印情報に基づいて、目印を表示するように上記表示部を制御するとともに、上記コンテンツ取得ステップにおいて取得されたコンテンツデータを表示するように上記表示部を制御する表示制御ステップとを有していることを特徴としている。 The terminal control method according to the present invention is an information communication terminal comprising a display unit that displays an image based on image information on a display screen, and a communication unit that communicates information with other information communication terminals. A terminal control method, based on the communication control step for controlling the communication unit to receive landmark information and content provider information from the information communication terminal according to the present invention, and the received content provider information, A content acquisition step of acquiring content data from the outside, and the display unit is controlled to display a mark on the display screen based on the received mark information, and the content data acquired in the content acquisition step is And a display control step for controlling the display unit to display.
上記の構成および方法では、送信側の情報通信端末から受信したコンテンツ提供元情報に基づいて外部からコンテンツデータを取得し、これを表示するようになっている。そして、送信側の情報通信端末から受信した目印情報に基づいて目印を表示するようになっている。すなわち、受信側である当該情報通信端末は、どのコンテンツデータを表示させた状態で目印を表示させるべきかを認識することが可能となる。 In the above configuration and method, content data is acquired from the outside based on the content provider information received from the information communication terminal on the transmission side, and is displayed. The mark is displayed based on the mark information received from the information communication terminal on the transmission side. That is, the information communication terminal on the receiving side can recognize which content data should be displayed in a state where the mark is to be displayed.
したがって、送信側および受信側の双方の情報通信端末において、同じコンテンツデータを表示させた状態で目印情報の送受信を行うことが可能となり、送信側の意図する状態で的確に受信側での表示を行わせることが可能となる。 Therefore, it is possible to transmit / receive the landmark information in the state where the same content data is displayed in both the information communication terminals on the transmission side and the reception side, and display on the reception side accurately in the state intended by the transmission side. It becomes possible to do.
また、本発明に係る情報通信端末は、画像情報に基づく画像を表示画面に表示する表示部と、他の情報通信端末との間で情報の通信を行う通信部と、テレビ放送を受信するテレビ放送受信部とを備えた情報通信端末であって、上記本発明に係る情報通信端末からの目印情報およびチャンネル情報を受信するように上記通信部を制御する通信制御手段と、受信したチャンネル情報に対応するチャンネルを受信すべきテレビ放送のチャンネルとして設定するチャンネル設定手段と、上記表示画面に、受信した目印情報に基づいて、目印を表示するように上記表示部を制御するとともに、上記チャンネル設定手段によって設定されたチャンネルのテレビ映像を表示するように上記表示部を制御する表示制御手段とを備えていることを特徴としている。 In addition, an information communication terminal according to the present invention includes a display unit that displays an image based on image information on a display screen, a communication unit that communicates information with other information communication terminals, and a television that receives a television broadcast. An information communication terminal comprising a broadcast receiving unit, a communication control means for controlling the communication unit to receive landmark information and channel information from the information communication terminal according to the present invention, and a received channel information Channel setting means for setting a corresponding channel as a television broadcast channel to be received, and controlling the display unit to display a mark on the display screen based on the received mark information, and the channel setting means Display control means for controlling the display unit so as to display a television image of the channel set by
上記の構成では、送信側の情報通信端末から受信したチャンネル情報に基づいてテレビ放送を受信し、これを表示するようになっている。そして、送信側の情報通信端末から受信した目印情報に基づいて目印を表示するようになっている。すなわち、受信側である当該情報通信端末は、どのチャンネルのテレビ放送を表示させた状態で目印を表示させるべきかを認識することが可能となる。 In the above configuration, the television broadcast is received based on the channel information received from the information communication terminal on the transmission side and displayed. The mark is displayed based on the mark information received from the information communication terminal on the transmission side. That is, the information communication terminal on the receiving side can recognize which channel of the television broadcast should be displayed in the state in which the television broadcast is displayed.
したがって、送信側および受信側の双方の情報通信端末において、同じチャンネルのテレビ放送を表示させた状態で目印情報の送受信を行うことが可能となり、送信側の意図する状態で的確に受信側での表示を行わせることが可能となる。 Therefore, it is possible to transmit and receive the landmark information in the state where the television broadcast of the same channel is displayed in both the information communication terminals on the transmission side and the reception side, and in the state intended by the transmission side, it is possible to accurately transmit and receive the landmark information Display can be performed.
また、本発明に係る情報通信端末は、画像情報に基づく画像を表示画面に表示する表示部と、他の情報通信端末との間で情報の通信を行う通信部とを備えた情報通信端末であって、上記本発明に係る情報通信端末からの目印情報およびアドレス情報を受信するように上記通信部を制御する通信制御手段と、受信したアドレス情報に基づいて、外部のネットワークから上記通信部を介して該当アドレスにおいて提供されるコンテンツデータを取得するネットワークコンテンツ受信手段と、上記表示画面に、受信した目印情報に基づいて、目印を表示するように上記表示部を制御するとともに、上記ネットワークコンテンツ受信手段によって取得されたコンテンツデータを表示するように上記表示部を制御する表示制御手段とを備えていることを特徴としている。 An information communication terminal according to the present invention is an information communication terminal including a display unit that displays an image based on image information on a display screen, and a communication unit that communicates information with other information communication terminals. And communication control means for controlling the communication unit to receive the landmark information and the address information from the information communication terminal according to the present invention, and the communication unit from the external network based on the received address information. Network content receiving means for acquiring the content data provided at the corresponding address, and controlling the display unit to display the landmark on the display screen based on the received landmark information, and receiving the network content Display control means for controlling the display unit so as to display the content data acquired by the means. It is a symptom.
上記の構成では、送信側の情報通信端末から受信したアドレス情報に基づいてネットワークからコンテンツデータを取得し、これを表示するようになっている。そして、送信側の情報通信端末から受信した目印情報に基づいて目印を表示するようになっている。すなわち、受信側である当該情報通信端末は、どのネットワークアドレスにおいて提供されるコンテンツデータを表示させた状態で目印を表示させるべきかを認識することが可能となる。 In the above configuration, the content data is acquired from the network based on the address information received from the information communication terminal on the transmission side, and is displayed. The mark is displayed based on the mark information received from the information communication terminal on the transmission side. That is, the information communication terminal on the receiving side can recognize at which network address the content data provided is displayed and the mark should be displayed.
したがって、送信側および受信側の双方の情報通信端末において、ネットワーク上で提供されている同じコンテンツデータを表示させた状態で目印情報の送受信を行うことが可能となり、送信側の意図する状態で的確に受信側での表示を行わせることが可能となる。 Therefore, the information communication terminals on both the transmission side and the reception side can transmit / receive the landmark information in a state where the same content data provided on the network is displayed. Can be displayed on the receiving side.
また、本発明に係る情報通信端末は、上記の課題を解決するために、画像情報に基づく画像を表示画面に表示する表示部と、利用者による入力操作を受け付ける入力操作子を有する入力受付部と、他の情報通信端末との間で情報の通信を行う通信部とを備えた情報通信端末であって、特定の動画データ、および、目印を上記表示画面に表示するように上記表示部を制御する表示制御手段と、上記入力受付部によって受け付けられた利用者による入力操作情報に基づいて、上記目印の表示位置を移動させる目印情報移動制御手段と、上記表示部において上記動画データの再生を開始したときに、該動画データの再生開始を指示する再生命令情報を他の情報通信端末に対して送信するように上記通信部を制御するとともに、上記再生命令情報を送信した後に、上記目印の位置を示す目印情報を上記他の情報通信端末に対して送信するように上記通信部を制御する通信制御手段とを備えていることを特徴としている。 In order to solve the above-described problem, an information communication terminal according to the present invention includes a display unit that displays an image based on image information on a display screen, and an input reception unit that includes an input operator that receives an input operation by a user. And a communication unit that communicates information with other information communication terminals, wherein the display unit is configured to display specific video data and a mark on the display screen. Display control means for controlling, mark information movement control means for moving the display position of the mark based on input operation information received by the user received by the input receiving part, and reproduction of the moving image data on the display part When started, the communication unit is controlled to transmit reproduction command information for instructing the reproduction start of the video data to other information communication terminals, and the reproduction command information is transmitted. After, and the mark information indicating the position of the landmark is characterized in that a communication control means for controlling the communication unit to transmit to said other information communication terminal.
また、本発明に係る端末制御方法は、画像情報に基づく画像を表示画面に表示する表示部と、利用者による入力操作を受け付ける入力操作子を有する入力受付部と、他の情報通信端末との間で情報の通信を行う通信部とを備えた情報通信端末の端末制御方法であって、特定の動画データ、および、目印を上記表示画面に表示するように上記表示部を制御する表示制御ステップと、上記入力受付部によって受け付けられた利用者による入力操作情報に基づいて、上記目印の表示位置を移動させる目印情報移動制御ステップと、上記表示部において上記動画データの再生を開始したときに、該動画データの再生開始を指示する再生命令情報を他の情報通信端末に対して送信するように上記通信部を制御するとともに、上記再生命令情報を送信した後に、上記目印の位置を示す目印情報を上記他の情報通信端末に対して送信するように上記通信部を制御する通信制御ステップとを有していることを特徴としている。 The terminal control method according to the present invention includes a display unit that displays an image based on image information on a display screen, an input receiving unit that includes an input operator that receives an input operation by a user, and another information communication terminal. A display control step for controlling the display unit to display specific moving image data and a mark on the display screen. And a mark information movement control step for moving the display position of the mark based on the input operation information received by the user received by the input receiving unit, and when the reproduction of the moving image data is started on the display unit, The communication unit is controlled to transmit reproduction command information for instructing the start of reproduction of the moving image data to another information communication terminal, and the reproduction command information is transmitted. In, and a mark information indicating the position of the landmark is characterized by having a communication control step of controlling the communication unit to transmit to said other information communication terminal.
上記の構成および方法では、特定のデータ、および、利用者による入力操作によって移動する目印が表示部に表示されるようになっている。すなわち、表示部に、特定の動画データが表示された画面上で、利用者が任意の位置に目印を表示させることが可能となっている。そして、上記特定の動画データの再生が開始されると、他の情報通信端末に対して該動画データの再生命令情報が送信され、その後目印情報が送信されるようになっている。 In the above configuration and method, specific data and a mark that is moved by an input operation by the user are displayed on the display unit. That is, the user can display a mark at an arbitrary position on the screen on which specific moving image data is displayed on the display unit. When the reproduction of the specific moving image data is started, the reproduction command information of the moving image data is transmitted to another information communication terminal, and then the mark information is transmitted.
すなわち、送信側および受信側の双方の情報通信端末において、特定の動画データがほぼ同じタイミングで再生開始された状態で、目印情報の送受信が行われることになる。よって、送信側および受信側の双方の情報通信端末において、動画データの画像内の目印が付される対象物をほぼ一致させることが可能となる。 That is, in both the information communication terminals on the transmission side and the reception side, the landmark information is transmitted and received in a state where the reproduction of the specific moving image data is started at almost the same timing. Therefore, in both the information communication terminals on the transmission side and the reception side, it is possible to substantially match the objects to be marked in the image of the moving image data.
また、本発明に係る情報通信端末は、上記の構成において、外部のネットワークから上記通信部を介して上記動画データを取得するネットワークコンテンツ受信手段をさらに備え、上記表示制御手段が、上記特定の動画データとして、上記ネットワークコンテンツ受信手段によって取得される動画データを上記表示画面に表示するように上記表示部を制御するとともに、上記通信制御手段が、上記ネットワークコンテンツ受信手段によって取得された動画データが提供されるネットワークアドレスのアドレス情報を上記他の情報通信端末に対して送信するように上記通信部を制御する構成としてもよい。 The information communication terminal according to the present invention may further include network content receiving means for acquiring the moving image data from an external network via the communication unit in the configuration described above, wherein the display control means includes the specific moving image. As the data, the display unit is controlled to display the moving image data acquired by the network content receiving unit on the display screen, and the communication control unit provides the moving image data acquired by the network content receiving unit. The communication unit may be controlled to transmit the address information of the network address to be transmitted to the other information communication terminal.
この構成によれば、受信側の情報通信端末は、共有すべき動画データが提供されるネットワークアドレスを認識することができる。よって、送信側および受信側の双方の情報通信端末において、ネットワーク上で提供されている同じ動画データを共有し、該動画データの画像内の目印が付される対象物をほぼ一致させることが可能となる。 According to this configuration, the information communication terminal on the receiving side can recognize the network address where the moving image data to be shared is provided. Therefore, it is possible to share the same moving image data provided on the network in both the information communication terminals on the transmission side and the receiving side, and to substantially match the object to which the mark in the image of the moving image data is attached. It becomes.
また、本発明に係る情報通信端末は、上記の構成において、上記動画データを記憶する画像情報蓄積部をさらに備え、上記表示制御手段が、上記特定の動画データとして、上記画像情報蓄積部に記憶されている動画データを上記表示画面に表示するように上記表示部を制御するとともに、上記通信制御手段が、上記画像情報蓄積部に記憶されている動画データを上記他の情報通信端末に対して送信するように上記通信部を制御する構成としてもよい。 The information communication terminal according to the present invention further includes an image information storage unit that stores the moving image data in the above configuration, and the display control unit stores the specific moving image data as the specific moving image data in the image information storage unit. The display unit is controlled to display the moving image data displayed on the display screen, and the communication control unit transmits the moving image data stored in the image information storage unit to the other information communication terminal. It is good also as a structure which controls the said communication part so that it may transmit.
この構成によれば、送信側および受信側の双方の情報通信端末において、送信側の情報通信端末に記憶されている動画データを共有し、該動画データの画像内の目印が付される対象物をほぼ一致させることが可能となる。 According to this configuration, in both the information communication terminals on the transmission side and the reception side, the moving image data stored in the information communication terminal on the transmission side is shared, and the mark in the image of the moving image data is attached Can be substantially matched.
また、本発明に係る情報通信端末は、画像情報に基づく画像を表示画面に表示する表示部と、他の情報通信端末との間で情報の通信を行う通信部とを備えた情報通信端末であって、上記本発明に係る情報通信端末からの上記動画データの再生命令情報および目印情報を受信するように上記通信部を制御する通信制御手段と、上記再生命令を受信した際に、上記動画データの再生を開始して該動画データを表示するように上記表示部を制御するとともに、受信した目印情報に基づいて、目印を表示するように上記表示部を制御する表示制御手段とを備えていることを特徴としている。 An information communication terminal according to the present invention is an information communication terminal including a display unit that displays an image based on image information on a display screen, and a communication unit that communicates information with other information communication terminals. The communication control means for controlling the communication unit to receive the reproduction command information and the landmark information of the moving image data from the information communication terminal according to the present invention, and when the reproduction command is received, the moving image And a display control means for controlling the display unit to start reproduction of data and display the moving image data, and to control the display unit to display a mark based on the received mark information. It is characterized by being.
また、本発明に係る端末制御方法は、画像情報に基づく画像を表示画面に表示する表示部と、他の情報通信端末との間で情報の通信を行う通信部とを備えた情報通信端末の端末制御方法であって、上記本発明に係る情報通信端末からの上記動画データの再生命令情報および目印情報を受信するように上記通信部を制御する通信制御ステップと、上記再生命令を受信した際に、上記動画データの再生を開始して該動画データを表示するように上記表示部を制御するとともに、受信した目印情報に基づいて、目印を表示するように上記表示部を制御する表示制御ステップとを有していることを特徴としている。 The terminal control method according to the present invention is an information communication terminal comprising a display unit that displays an image based on image information on a display screen, and a communication unit that communicates information with other information communication terminals. A terminal control method, comprising: a communication control step for controlling the communication unit to receive reproduction instruction information and landmark information of the moving image data from the information communication terminal according to the present invention; and when the reproduction instruction is received In addition, the display control step for controlling the display unit to start displaying the moving image data by starting the reproduction of the moving image data and to control the display unit to display the mark based on the received mark information. It is characterized by having.
上記の構成および方法では、送信側の情報通信端末から受信した再生命令情報に従って、共有すべき特定の動画データを表示するとともに、送信側の情報通信端末から受信した目印情報に基づいて目印を表示するようになっている。 In the above configuration and method, specific moving image data to be shared is displayed according to the playback command information received from the transmitting information communication terminal, and the mark is displayed based on the mark information received from the transmitting information communication terminal. It is supposed to be.
すなわち、送信側および受信側の双方の情報通信端末において、特定の動画データがほぼ同じタイミングで再生開始された状態で、目印情報の送受信が行われることになる。よって、送信側および受信側の双方の情報通信端末において、動画データの画像内の目印が付される対象物をほぼ一致させることが可能となる。 That is, in both the information communication terminals on the transmission side and the reception side, the landmark information is transmitted and received in a state where the reproduction of the specific moving image data is started at almost the same timing. Therefore, in both the information communication terminals on the transmission side and the reception side, it is possible to substantially match the objects to be marked in the image of the moving image data.
また、本発明に係る情報通信端末は、画像情報に基づく画像を表示画面に表示する表示部と、他の情報通信端末との間で情報の通信を行う通信部とを備えた情報通信端末であって、上記本発明に係る情報通信端末からの上記動画データの再生命令情報、上記アドレス情報、および目印情報を受信するように上記通信部を制御する通信制御手段と、受信したアドレス情報に基づいて、外部のネットワークから上記通信部を介して該当アドレスにおいて提供される動画データを取得するネットワークコンテンツ受信手段をさらに備え、上記再生命令を受信した際に、上記ネットワークコンテンツ受信手段によって取得される上記動画データの再生を開始して該動画データを表示するように上記表示部を制御するとともに、受信した目印情報に基づいて、目印を表示するように上記表示部を制御する表示制御手段とを備えていることを特徴としている。 An information communication terminal according to the present invention is an information communication terminal including a display unit that displays an image based on image information on a display screen, and a communication unit that communicates information with other information communication terminals. Based on the received address information, communication control means for controlling the communication unit so as to receive the reproduction instruction information of the moving image data, the address information, and the landmark information from the information communication terminal according to the present invention. Network content receiving means for obtaining moving image data provided at the corresponding address from the external network via the communication unit, and the network content receiving means that receives the playback command when the playback command is received. The display unit is controlled to start reproducing the moving image data and display the moving image data, and based on the received landmark information. Te is characterized by comprising a display control means for controlling the display unit to display the mark.
上記の構成では、送信側の情報通信端末から受信した再生命令情報に従って、同じく送信側の情報通信端末から受信したアドレス情報で示されるアドレスにおいて提供される動画データを表示するとともに、送信側の情報通信端末から受信した目印情報に基づいて目印を表示するようになっている。 In the above configuration, the video data provided at the address indicated by the address information similarly received from the information communication terminal on the transmission side is displayed according to the reproduction command information received from the information communication terminal on the transmission side, and the information on the transmission side is displayed. A landmark is displayed based on the landmark information received from the communication terminal.
すなわち、送信側および受信側の双方の情報通信端末において、ネットワーク上で提供される動画データがほぼ同じタイミングで再生開始された状態で、目印情報の送受信が行われることになる。よって、ネットワーク上で提供される動画データを共有する場合においても、送信側および受信側の双方の情報通信端末において、該動画データの画像内の目印が付される対象物をほぼ一致させることが可能となる。 That is, in both the information communication terminals on the transmission side and the reception side, the landmark information is transmitted and received in a state where the reproduction of the moving image data provided on the network is started at almost the same timing. Therefore, even when the moving image data provided on the network is shared, it is possible to substantially match the object to which the mark in the image of the moving image data is attached in both the transmitting and receiving information communication terminals. It becomes possible.
また、本発明に係る情報通信端末は、画像情報に基づく画像を表示画面に表示する表示部と、他の情報通信端末との間で情報の通信を行う通信部とを備えた情報通信端末であって、上記本発明に係る情報通信端末からの上記動画データの再生命令情報、上記動画データ、および目印情報を受信するように上記通信部を制御する通信制御手段と、上記再生命令を受信した際に、上記通信部を介して受信された動画データの再生を開始して該動画データを表示するように上記表示部を制御するとともに、受信した目印情報に基づいて、目印を表示するように上記表示部を制御する表示制御手段とを備えていることを特徴としている。 An information communication terminal according to the present invention is an information communication terminal including a display unit that displays an image based on image information on a display screen, and a communication unit that communicates information with other information communication terminals. The communication control means for controlling the communication unit to receive the reproduction instruction information of the moving image data, the moving image data, and the landmark information from the information communication terminal according to the present invention, and the reproduction instruction In this case, the display unit is controlled to display the moving image data by starting the reproduction of the moving image data received via the communication unit, and to display the mark based on the received mark information. And a display control means for controlling the display unit.
上記の構成では、送信側の情報通信端末から受信した再生命令情報に従って、同じく送信側の情報通信端末から受信した動画データを表示するとともに、送信側の情報通信端末から受信した目印情報に基づいて目印を表示するようになっている。 In the above configuration, the moving image data received from the transmitting information communication terminal is displayed according to the reproduction command information received from the transmitting information communication terminal, and based on the landmark information received from the transmitting information communication terminal. A placemark is displayed.
すなわち、送信側および受信側の双方の情報通信端末において、送信側の情報通信端末に記憶されている動画データがほぼ同じタイミングで再生開始された状態で、目印情報の送受信が行われることになる。よって、送信側の情報通信端末に記憶されている動画データを共有する場合においても、送信側および受信側の双方の情報通信端末において、該動画データの画像内の目印が付される対象物をほぼ一致させることが可能となる。 That is, in both the information communication terminals on the transmission side and the reception side, the landmark information is transmitted and received in a state where the reproduction of the moving image data stored in the information communication terminal on the transmission side is started at almost the same timing. . Therefore, even when the moving image data stored in the information communication terminal on the transmission side is shared, the object to which the mark in the image of the moving image data is attached in both the information communication terminals on the transmission side and the reception side. It is possible to make almost the same.
また、本発明に係る情報通信端末は、上記の構成において、上記表示制御手段が、上記目印情報を受信した際に、該目印情報で示されている対象物を画像認識するとともに、画像認識した対象物の移動に追従して目印の表示位置を移動させる制御を行う構成としてもよい。 In the information communication terminal according to the present invention, in the above configuration, when the display control unit receives the mark information, the information communication terminal recognizes and recognizes the object indicated by the mark information. A configuration in which the display position of the mark is moved following the movement of the object may be performed.
この構成によれば、画像認識によって目印が付される対象物を認識し、該対象物の移動に伴って目印を移動させることが可能となる。よって、送信側は、最初に目印情報を送信するのみで、時間の経過とともに動画データの画像内の対象物が移動した際に、目印を移動させる目印情報を送信する必要をなくすことができる。また、送信側と受信側とにおける動画再生タイミングと目印情報との表示タイミングのずれが生じるという問題も解消することができる。 According to this configuration, it is possible to recognize an object to be marked by image recognition, and to move the mark as the object moves. Therefore, the transmitting side only needs to transmit the mark information first, and can eliminate the need to transmit the mark information for moving the mark when the object in the image of the moving image data moves with time. Further, it is possible to solve the problem that the display timing shift between the moving image reproduction timing and the landmark information on the transmission side and the reception side occurs.
また、本発明に係る情報通信端末は、上記の課題を解決するために、画像情報に基づく画像を表示画面に表示する表示部と、利用者による入力操作を受け付ける入力操作子を有する入力受付部と、他の情報通信端末との間で情報の通信を行う通信部とを備えた情報通信端末であって、上記入力受付部によって受け付けられた利用者による入力操作情報に基づいて、目印の表示位置を指定する目印情報を作成する目印情報作成手段と、上記目印情報、および、上記目印の消去命令を他の情報通信端末に対して送信するように上記通信部を制御する通信制御手段とを備えていることを特徴としている。 In order to solve the above-described problem, an information communication terminal according to the present invention includes a display unit that displays an image based on image information on a display screen, and an input reception unit that includes an input operator that receives an input operation by a user. And a communication unit that communicates information with other information communication terminals, and displays a mark based on the user's input operation information received by the input reception unit Mark information creating means for creating mark information for designating a position, and communication control means for controlling the communication section so as to transmit the mark information and the mark deletion command to another information communication terminal. It is characterized by having.
また、本発明に係る端末制御方法は、画像情報に基づく画像を表示画面に表示する表示部と、利用者による入力操作を受け付ける入力操作子を有する入力受付部と、他の情報通信端末との間で情報の通信を行う通信部とを備えた情報通信端末の端末制御方法であって、上記入力受付部によって受け付けられた利用者による入力操作情報に基づいて、目印の表示位置を指定する目印情報を作成する目印情報作成ステップと、上記目印情報、および、上記目印の消去命令を他の情報通信端末に対して送信するように上記通信部を制御する通信制御ステップとを有していることを特徴としている。 The terminal control method according to the present invention includes a display unit that displays an image based on image information on a display screen, an input receiving unit that includes an input operator that receives an input operation by a user, and another information communication terminal. A terminal control method for an information communication terminal including a communication unit that communicates information between them, and a mark that specifies a display position of a mark based on input operation information received by the user by the input receiving unit A mark information creating step for creating information; and a communication control step for controlling the communication unit so as to transmit the mark information and an erase command for the mark to another information communication terminal. It is characterized by.
例えば、共有コンテンツとして動画データを用いる場合、目印情報を消すということが重要になる。例えば、共有している動画内の特定の対象物に対して目印をつけて相手に指し示す場合、対象物が表示画面上から消えてしまった後に目印の表示が残ると、対象物を相手が知る際に混乱してしまうことが考えられる。このような事態にならないためには、必要でなくなった目印は消去するべきである。 For example, when using moving image data as shared content, it is important to delete the landmark information. For example, if you mark a specific object in a shared video and point it to the other party, the partner knows the object if the mark remains displayed after the object disappears from the display screen. It can be confusing. To avoid this situation, landmarks that are no longer needed should be deleted.
これに対して、上記の構成および方法では、利用者による入力操作情報に基づいて目印の表示位置を指定する目印情報、および、該目印の消去命令が、他の情報通信端末に対して送信されるようになっている。すなわち、受信側の情報通信端末は、受信した目印情報に従って目印を表示するとともに、目印の消去命令を受信すると、表示されている目印を消去することになる。したがって、送信側の情報通信端末において、目印を消去すべきであると判断された場合に、受信側に対して目印の消去指示が明示的に行われることによって、受信側の情報通信端末において、目印が不必要に残っていることによる上記のような弊害を防止することができる。 On the other hand, in the above configuration and method, the mark information for designating the display position of the mark based on the input operation information by the user and the delete command for the mark are transmitted to other information communication terminals. It has become so. That is, the information communication terminal on the receiving side displays the mark according to the received mark information, and deletes the displayed mark when receiving the mark deletion command. Therefore, in the information communication terminal on the transmission side, when it is determined that the mark should be deleted, in the information communication terminal on the reception side, an instruction to delete the mark is explicitly given to the reception side. It is possible to prevent the above-described adverse effects caused by the mark remaining unnecessarily.
また、本発明に係る情報通信端末は、上記の構成において、上記入力受付部によって受け付けられた利用者による入力操作情報に基づいて目印を表示するように上記表示部を制御するとともに、上記目印の消去命令に伴って表示されている目印を消去するように上記表示部を制御する表示制御手段をさらに備えている構成としてもよい。 The information communication terminal according to the present invention controls the display unit to display a mark based on the input operation information by the user received by the input receiving unit in the above configuration, and It is good also as a structure further provided with the display control means which controls the said display part so that the mark currently displayed with the erase | elimination command may be erase | eliminated.
この場合、送信側の情報通信端末においても目印の表示が行われることになるので、目印表示および目印消去の指示をどのように行ったかを送信側で確認することが可能となる。 In this case, since the mark is displayed also on the information communication terminal on the transmitting side, it is possible to confirm on the transmitting side how the mark display and mark erasure instructions are performed.
また、本発明に係る情報通信端末は、上記の構成において、利用者による消去指示を示す入力操作が上記入力受付部によって受け付けられたことによって、上記目印の消去命令が生成される構成としてもよい。 The information communication terminal according to the present invention may be configured such that, in the above configuration, an instruction to delete the mark is generated when an input operation indicating a delete instruction by a user is received by the input receiving unit. .
この構成によれば、利用者の指示に基づいて目印の消去命令が生成されるので、利用者が目印を消去すべきと判断した時点で、受信側において目印が消去されることになる。よって、より利用者の意図に沿った目印の表示制御を行うことが可能となる。 According to this configuration, since a mark erasure command is generated based on a user's instruction, the mark is erased on the receiving side when the user determines that the mark should be erased. Therefore, it is possible to perform display control of the mark more in line with the user's intention.
また、本発明に係る情報通信端末は、上記の構成において、上記入力受付部が、目印の表示位置を指定するための利用者による入力操作を所定の期間受け付けなかった場合に、上記通信制御手段が、上記目印の消去命令を他の情報通信端末に対して送信するように上記通信部を制御する構成としてもよい。 Further, in the information communication terminal according to the present invention, in the above configuration, when the input receiving unit has not received an input operation by a user for designating a display position of a mark for a predetermined period, the communication control unit However, the communication unit may be controlled to transmit an instruction for deleting the mark to another information communication terminal.
この構成によれば、目印の消去命令は、目印の表示位置指定に関する利用者の入力操作が所定の期間行われなかった場合に送信されることになる。ここで、目印の表示位置指定に関する利用者の入力操作が所定の期間行われないということは、利用者は目印の表示の必要性を感じなくなったことが予想される。すなわち、利用者が目印の表示の必要性を感じなくなった時点で、利用者による操作を必要とせずに、目印の消去命令を送信することが可能となる。 According to this configuration, the mark erasure command is transmitted when the user's input operation regarding designation of the mark display position is not performed for a predetermined period. Here, the fact that the user's input operation regarding designation of the display position of the mark is not performed for a predetermined period of time is expected that the user no longer feels the necessity of displaying the mark. That is, when the user no longer feels the necessity of displaying the mark, it is possible to transmit the mark erasing command without requiring any operation by the user.
また、本発明に係る情報通信端末は、画像情報に基づく画像を表示画面に表示する表示部と、他の情報通信端末との間で情報の通信を行う通信部とを備えた情報通信端末であって、上記本発明に係る情報通信端末からの目印情報および目印の消去命令を受信するように上記通信部を制御する通信制御手段と、上記表示画面に、受信した目印情報に基づいて、目印を表示するように上記表示部を制御するとともに、目印の消去命令を受信した場合に、表示されている目印を消去するように上記表示部を制御する表示制御手段とを備えていることを特徴としている。 An information communication terminal according to the present invention is an information communication terminal including a display unit that displays an image based on image information on a display screen, and a communication unit that communicates information with other information communication terminals. And a communication control means for controlling the communication unit to receive mark information and a mark erasure command from the information communication terminal according to the present invention, and a mark on the display screen based on the received mark information. And a display control means for controlling the display unit so as to erase the displayed mark when a mark erasing command is received. It is said.
また、本発明に係る端末制御方法は、画像情報に基づく画像を表示画面に表示する表示部と、他の情報通信端末との間で情報の通信を行う通信部とを備えた情報通信端末の端末制御方法であって、上記本発明に係る情報通信端末からの目印情報および目印の消去命令を受信するように上記通信部を制御する通信制御ステップと、上記表示画面に、受信した目印情報に基づいて、目印を表示するように上記表示部を制御するとともに、目印の消去命令を受信した場合に、表示されている目印を消去するように上記表示部を制御する表示制御ステップとを有していることを特徴としている。 The terminal control method according to the present invention is an information communication terminal comprising a display unit that displays an image based on image information on a display screen, and a communication unit that communicates information with other information communication terminals. A terminal control method comprising: a communication control step for controlling the communication unit to receive mark information and a mark erasure command from the information communication terminal according to the present invention; and the received mark information on the display screen. And a display control step for controlling the display unit so as to erase the displayed mark when a mark erasing command is received. It is characterized by having.
上記の構成および方法によれば、送信側の情報通信端末から目印情報を受信すると、これに基づいて目印を表示するとともに、目印の消去命令を受信すると、これに基づいて表示されている目印を消去するようになっている。よって、送信側の情報通信端末の意図どおりに目印の表示および消去を行うことが可能となる。 According to the above configuration and method, when the mark information is received from the information communication terminal on the transmission side, the mark is displayed based on the mark information, and when the mark deletion command is received, the mark displayed based on the mark is displayed. It is supposed to be erased. Therefore, it is possible to display and delete the mark as intended by the information communication terminal on the transmission side.
また、本発明に係る情報通信端末は、画像情報に基づく画像を表示画面に表示する表示部と、他の情報通信端末との間で情報の通信を行う通信部とを備えた情報通信端末であって、他の情報通信端末からの目印情報を受信するように上記通信部を制御する通信制御手段と、上記表示画面に、受信した目印情報に基づいて、目印を表示するように上記表示部を制御するとともに、上記通信制御手段が上記目印情報を所定の期間受信しなかった場合に、表示されている目印を消去するように上記表示部を制御する表示制御手段とを備えていることを特徴としている。 An information communication terminal according to the present invention is an information communication terminal including a display unit that displays an image based on image information on a display screen, and a communication unit that communicates information with other information communication terminals. And a communication control means for controlling the communication unit to receive the mark information from another information communication terminal, and the display unit to display the mark on the display screen based on the received mark information. Display control means for controlling the display unit so as to erase the displayed mark when the communication control means does not receive the mark information for a predetermined period. It is a feature.
また、本発明に係る端末制御方法は、画像情報に基づく画像を表示画面に表示する表示部と、他の情報通信端末との間で情報の通信を行う通信部とを備えた情報通信端末の端末制御方法であって、他の情報通信端末からの目印情報を受信するように上記通信部を制御する通信制御ステップと、上記表示画面に、受信した目印情報に基づいて、目印を表示するように上記表示部を制御するとともに、上記通信制御手段が上記目印情報を所定の期間受信しなかった場合に、表示されている目印を消去するように上記表示部を制御する表示制御ステップとを有していることを特徴としている。 The terminal control method according to the present invention is an information communication terminal comprising a display unit that displays an image based on image information on a display screen, and a communication unit that communicates information with other information communication terminals. A terminal control method for controlling the communication unit to receive landmark information from another information communication terminal, and displaying a landmark on the display screen based on the received landmark information. A display control step for controlling the display unit so as to erase the displayed mark when the communication control means does not receive the mark information for a predetermined period. It is characterized by that.
上記の構成および方法によれば、まず、送信側の情報通信端末から目印情報を受信すると、これに基づいて目印を表示するようになっている。そして、送信側の情報通信端末から目印情報を所定の期間受信しなかった場合に、目印の消去が行われるようになっている。ここで、送信側の情報通信端末から目印情報を所定の期間受信しないということは、送信側における利用者は目印の表示の必要性を感じなくなったことが予想される。すなわち、送信側の利用者が目印の表示の必要性を感じなくなった時点で、送信側の利用者による操作を必要とせずに、受信側において目印を消去することが可能となる。 According to the above configuration and method, first, when landmark information is received from the information communication terminal on the transmission side, the landmark is displayed based on the received landmark information. When the mark information is not received from the information communication terminal on the transmission side for a predetermined period, the mark is erased. Here, if the landmark information is not received from the information communication terminal on the transmission side for a predetermined period, it is expected that the user on the transmission side no longer feels the necessity of displaying the landmark. That is, when the user on the transmission side no longer feels the necessity of displaying the mark, the mark on the reception side can be deleted without requiring any operation by the user on the transmission side.
本発明の端末制御プログラムは、上記の課題を解決するために、上記情報通信端末を動作させる端末制御プログラムであって、上記各手段をコンピュータに実現させることを特徴としている。 A terminal control program of the present invention is a terminal control program for operating the information communication terminal in order to solve the above-described problem, and is characterized by causing a computer to realize the above means.
上記の構成によれば、上記端末制御プログラムによって、上記情報通信端末を実現することができる。 According to said structure, the said information communication terminal is realizable with the said terminal control program.
本発明の記録媒体は、上記の課題を解決するために、上記端末制御プログラムを記録したことを特徴としている。 The recording medium of the present invention is characterized in that the terminal control program is recorded in order to solve the above problems.
上記の構成によれば、本発明の記録媒体から読み出された端末制御プログラムによって、上記情報通信端末を実現することができる。 According to said structure, the said information communication terminal is realizable with the terminal control program read from the recording medium of this invention.
本発明に係る情報通信端末は、以上のように、目印の位置を示す目印情報、および、上記表示部に表示されているコンテンツデータの提供元を示すコンテンツ提供元情報を他の情報通信端末に対して送信するようになっている。これにより、送信側および受信側の双方の情報通信端末において、同じコンテンツデータを表示させた状態で目印情報の送受信を行うことが可能となり、送信側の意図する状態で的確に受信側での表示を行わせることが可能となるという効果を奏する。 As described above, the information communication terminal according to the present invention provides mark information indicating the position of the mark and content provider information indicating the provider of the content data displayed on the display unit to other information communication terminals. To send to. As a result, it is possible to transmit and receive landmark information in the state where the same content data is displayed in both the information communication terminals on the transmission side and the reception side, and display on the reception side accurately in the state intended by the transmission side. There is an effect that it is possible to perform.
また、本発明に係る情報通信端末は、以上のように、動画データの再生を開始したときに、該動画データの再生開始を指示する再生命令情報を他の情報通信端末に対して送信するとともに、上記再生命令情報を送信した後に、上記目印の位置を示す目印情報を上記他の情報通信端末に対して送信するようになっている。これにより、特定の動画データがほぼ同じタイミングで再生開始された状態で、目印情報の送受信が行われることになるので、送信側および受信側の双方の情報通信端末において、動画データの画像内の目印が付される対象物をほぼ一致させることが可能となるという効果を奏する。 In addition, as described above, when the information communication terminal according to the present invention starts the reproduction of the moving image data, the information communication terminal transmits reproduction instruction information for instructing the reproduction start of the moving image data to another information communication terminal. After the reproduction command information is transmitted, the mark information indicating the position of the mark is transmitted to the other information communication terminal. As a result, the mark information is transmitted and received in a state in which the reproduction of the specific moving image data is started at almost the same timing. Therefore, in the information communication terminals on both the transmitting side and the receiving side, There is an effect that it is possible to substantially match the object to be marked.
また、本発明に係る情報通信端末は、以上のように、目印情報、および、上記目印の消去命令を他の情報通信端末に対して送信するようになっている。これにより、送信側の情報通信端末において、目印を消去すべきであると判断された場合に、受信側に対して目印の消去指示が明示的に行われることによって、受信側の情報通信端末において、目印が不必要に残っていることによる上記のような弊害を防止することができるという効果を奏する。 Further, as described above, the information communication terminal according to the present invention transmits the mark information and the mark deletion command to the other information communication terminals. As a result, when it is determined in the information communication terminal on the transmission side that the mark should be deleted, an instruction to delete the mark is explicitly given to the reception side, whereby the information communication terminal on the reception side Thus, it is possible to prevent the above-described adverse effects due to the mark remaining unnecessarily.
〔本発明の前提となる実施形態1〕
本発明の情報通信端末および端末制御方法、端末制御プログラム並びにこれを記録した記録媒体に関して、前提となる一実施形態について、図1〜図14(d)に基づいて説明すれば、以下のとおりである。
[
With reference to FIG. 1 to FIG. 14 (d), an embodiment as a premise regarding the information communication terminal, the terminal control method, the terminal control program, and the recording medium storing the information communication terminal according to the present invention will be described as follows. is there.
本実施形態の携帯型電話機(情報通信端末)10は、図2に示すように、有効表示領域4aを有する表示部4、ダイヤルボタン5aを有する入力部5、受話部6aおよび送話部6bからなる外観を有している。
As shown in FIG. 2, the mobile phone (information communication terminal) 10 of the present embodiment includes a
また、携帯型電話機10は、図1に示すように、内部に、制御部1、ROM(Read Only Memory)2、RAM(Random Access Memory)3、表示部4、入力部(入力受付部)5、音声処理部6および通信部7を備えている。
As shown in FIG. 1, the
制御部1は、マイクロコンピュータを内蔵し、ROM2から読み出したコンピュータプログラムに従って、入力部5からの入力操作、および通信部7からの制御信号により動作し、表示部4、通信部7、音声処理部6を制御する。なお、この制御部1が内部に備えている各機能ブロックについては、後段にて詳述する。
The
ROM2は、例えば、フラッシュROMのような不揮発性メモリで構成されており、制御部1が実行する本発明の端末制御プログラムであるコンピュータプログラムや、制御部1が利用する各種データが記憶される。また、受信側の携帯型電話機10と共有する写真画像データ等の表示コンテンツについても、ROM2に格納されている。
The
なお、ROM2に記憶されるコンピュータプログラムは、予め製造・出荷段階でROM2に記憶されたものに限定されるものではなく、記憶媒体読取部(図示せず)にメモリカード等の記憶媒体を挿入して、記憶媒体内のプログラムをROM2に書き込んでもよいし、記憶媒体自体が読み取り可能なプログラムメディアであってもよい。また、本実施形態の携帯型電話機10は、インターネットを含む通信ネットワークと接続可能な通信部7を備えていることから、通信ネットワークからプログラムをダウンロードして、ROM2に記憶してもよい。
The computer program stored in the
RAM3は、例えば、SRAMやDRAMのような揮発性メモリで構成されており、制御部1がROM2から読み出したコンピュータプログラムを実行する際に、ワークメモリとして使用される。
The
表示部4は、液晶ディスプレイや有機ELディスプレイ等のFPD(フラットパネルディスプレイ)等で構成され、制御部1に表示制御されることにより、利用者に対して文字や画像等の表示情報を提供する。
The
入力部5は、電話番号や文字等を入力するためのダイヤルボタン(キー入力操作子)5aを含む、携帯型電話機を操作するための複数の入力ボタンで構成される。
The
音声処理部6は、受話部6aや送話部6bに接続され、制御部1から入力された音声信号を受話部6aから出力したり、送話部6bから入力された音声信号を制御部1に出力したりする処理を行う。
The
通信部7は、アンテナ7aと接続され、通信回線を介する通信処理を制御部1に制御されることにより行う回路であって、音声信号やデータ、制御信号等を高周波によって変調して、アンテナ7aから送信したり、アンテナ7aから受信した音声信号やデータ、制御信号等を復調して制御部1に出力したりする。
The
また、通信部7は、受信側の携帯型電話機10との間において、後述する目印情報を送受信する際に、目印情報の伝送形態が、文字等のデジタルデータやPB信号(DTMF)である場合には、通話用の音声データと並存可能な方法で送受信する。
In addition, when the
具体的には、通話用の音声データと、デジタルデータまたはPB信号(DTMF)とを多重化して送受信を行う。また、目印情報の伝送形態が、音声データの場合には、通話用の音声データと目印情報の音声データとを合わせて送受信を行う。 Specifically, voice data for a call and digital data or PB signal (DTMF) are multiplexed and transmitted / received. When the transmission mode of the mark information is voice data, the voice data for the call and the voice data of the mark information are transmitted / received together.
このように、目印情報としてデジタルデータを用いた場合には、画像表示が可能な携帯型電話機等を用いて、音声データとともに、目印情報の送受信を行うことができるため、利用者は、通話しながら、表示画面に表示された目印で指し示された対象物について、会話することができる。 In this way, when digital data is used as the landmark information, the landmark information can be transmitted and received together with the voice data using a portable telephone capable of displaying an image. However, it is possible to talk about the object pointed by the mark displayed on the display screen.
また、目印情報としてDTMF信号を用いた場合には、特に、固定電話機等では一般的に搭載されているプッシュボタン信号(PB信号)の出力機能を利用して、送信側は、通話しながらDTMF信号を送信することができる。 In addition, when a DTMF signal is used as the mark information, in particular, the transmission side uses a push button signal (PB signal) output function that is generally installed in a fixed telephone or the like, and the transmitting side makes a DTMF while making a call. A signal can be transmitted.
また、目印情報としてDTMF信号を用いた場合には、通信回線をデータ通信モードではなく、通話モードで利用している場合でも、目印情報の送受信を行うことができる。 Further, when the DTMF signal is used as the mark information, the mark information can be transmitted and received even when the communication line is used in the call mode instead of the data communication mode.
さらに、目印情報として音声からなるデータを用いた場合には、データ通信と、音声通話を同時に利用できない通信回線や情報通信端末や、DTMF信号の送受信ができない情報通信端末間でも、通話しながら、目印情報の送受信を行うことができる。 In addition, when data consisting of voice is used as the landmark information, while communicating between communication lines and information communication terminals that cannot use data communication and voice call at the same time, and information communication terminals that cannot transmit and receive DTMF signals, The landmark information can be transmitted and received.
この場合、送信側の携帯型電話機10は、利用者により入力ボタンが押されたら、音声データ(例えば、1が入力された場合には「いち」、2が入力された場合には「に」等)を合成し、受信側の携帯型電話機10に送信してもよい。あるいは、送信側の携帯型電話機10は、ROM等の記憶部に予め音声データを記憶さえておき、利用者により入力ボタンが押されたら、対応する音声データを読み出し、受信側の携帯型電話機10に送信してもよい。または、利用者「いち」、「に」と言った声をそのまま、音声からなるデータとして受信側の携帯型電話機10に送信してもよい。
In this case, when the input button is pressed by the user, the
なお、ここで通話用の音声データと目印情報とを並存可能としているのは、相手と通話しながら、表示画面にポインティングするためであり、通話の必要が無ければ、当然、目印情報だけを送受信してもよい。 Note that the voice data for the call and the landmark information can co-exist in order to point to the display screen while talking with the other party. Of course, if there is no need for a call, only the landmark information is transmitted and received. May be.
また、携帯型電話機10は、図2に示すように、表示部4と入力部5とが、操作する利用者の側に配置されている外観を有する。
Further, as shown in FIG. 2, the
表示部4の上端側には、電池残量や電波状態を表示する固定の表示領域が表示され、表示部4の下端側には、特定のボタン操作で利用できる機能を示す操作ガイダンスを表示する固定の表示領域が表示されている。なお、これらの固定の表示領域を除いた通常使用される表示領域を、有効表示エリア4aとして定義する。ただし、固定の表示領域を表示せずに、全表示領域を利用する場合には、有効表示エリア4aは、表示部4の全表示領域となる。
A fixed display area for displaying the remaining battery level and the radio wave state is displayed on the upper end side of the
本実施形態の携帯型電話機10においては、有効表示エリア4aは、9個の分割エリア(縦3×横3)として管理され、ダイヤルボタン5aの1から9までの9個のボタン(縦3×横3)の配置と対応している。
In the
これにより、ダイヤルボタン5aの1から9までの何れかのボタンが押下されると、その位置に対応する有効表示エリア4aの9つの分割エリアのうち1つのエリアの中央位置が絶対位置としてポインティングされる。本実施形態では、この絶対位置が含まれる領域を示す情報が、目印を表示する領域を示す領域指定情報である。
Thus, when any one of the
例えば、有効表示エリア4aの分割エリアのうち、左下の領域をポインティングする場合には、ダイヤルボタン5aの1から9までのボタンのうち、同じく左下に配置されている“7”のボタンを入力することで、所望の分割エリアにポインティングすることができる。
For example, when pointing to the lower left area of the divided area of the
また、本実施形態の携帯型電話機10が備えている制御部1は、図1に示すように、図示しないCPUが、ROM2に格納された各種の端末制御プログラム(アプリケーションプログラム)を実行し、表示部4、入力部5、通信部7、音声処理部6等のハードウェアを制御することにより、各種の機能を実現する機能ブロックとして、目印情報作成部(目印情報作成手段)11、表示制御部(表示制御手段)12、通信制御部(通信制御手段)13および目印情報移動制御部(目印情報移動制御手段)14を機能ブロックとして形成している。
Further, as shown in FIG. 1, the
目印情報作成部11は、ダイヤルボタン5aが利用者によって押下されると、ROM2に格納された端末制御プログラムに従って、目印情報を作成する。なお、本実施形態では、目印情報作成部11は、目印情報として、目印の表示態様である目印態様情報と目印を表示する領域を示す領域指定情報を作成するものとするが、これに限定はされず、領域指定情報だけ作成してもよい。
When the
表示制御部12は、上記端末制御プログラムに従って表示部4を制御し、目印情報作成部11で作成された目印情報を、利用者によって押下されたダイヤルボタン5aに対応する表示画面上の分割エリアに表示させる。なお、表示制御部12は、目印情報によらなくても、予め定められた目印を、利用者によって押下されたダイヤルボタン5aに対応する表示画面上の分割エリアに、表示できるようになっていてもかまわない。
The
通信制御部13は、上記端末制御プログラムに従って、通信部7を制御し、上記目印情報、画像情報等を、通信相手である他の情報通信端末に対して送信させる。
The
目印情報移動制御部14は、ダイヤルボタン5aを押下することで、表示画面上に表示した目印の表示位置を移動させて、微調整する。本実施形態では、この目印の表示位置の移動を示す情報が、目印移動情報である。
The mark information
本実施形態の携帯型電話機10では、以上のような構成により、他の携帯型電話機10との間において、目印情報として、領域指定情報である入力操作情報または有効表示エリア上の座標情報と、目印情報を構成する要素である種類・形状・サイズ・線種・色等の目印の表示態様に関する情報である入力操作情報または目印属性情報と、さらに、その他必要なコマンド情報等とを通信することにより、お互いの表示画面に表示された画像上にポインティング、つまり、目印を表示することができる。
In the
また、本実施形態の携帯型電話機10では、有効表示エリア4aの分割エリアの配置とダイヤルボタン5aの配置とが一致しているため、利用者は、所望の分割エリアに目印を容易に表示させることができる。
Further, in the
また、マウス等のポインティングデバイス等を追加することなく、従来の携帯型電話機が備えているダイヤルボタン5aを表示部4の分割エリアに割り当てているため、従来の構成のままで、ほぼ所望の位置に直接的にポインティングを行うことができる。
Further, the
なお、目印を画面に表示する際の表現の書式である目印情報は、例えば、目印位置を点で指定するか領域で指定するか等の位置指定の種類、形状が矢印か+形か等の目印の形状、目印の表示のサイズおよび目印を形成する実線、破線等の線種、色等で示される表示態様で表される。 Note that the landmark information, which is the format for displaying the landmark on the screen, is, for example, the type of position designation, such as whether the landmark position is designated by a point or an area, whether the shape is an arrow or a + shape, etc. The shape of the mark, the display size of the mark, and the display mode indicated by the line type such as the solid line and the broken line forming the mark, the color, and the like.
また、目印情報は、表示画面上の特定部分を指し示すための図形情報であり、1点(ピンポイント)を指し示す“矢印”や“十字”、およびある範囲(エリア)を指し示す“○”や“□”等の形状の図形を、写真画像等の表示コンテンツ上に重畳して表示するものである。 The mark information is graphic information for pointing to a specific part on the display screen. “Arrow” or “cross” indicating one point (pinpoint) and “O” or “pointing” indicating a certain range (area). A figure having a shape such as “□” is superimposed and displayed on a display content such as a photographic image.
次に、本発明を適用した複数の携帯型電話機10が、入力部5への入力操作によって形成された目印情報を、他の携帯型電話機10に送信して、該他の携帯型電話機10の表示画面上に表示するまでの処理の流れについて、図3(a)、図3(b)を用いて説明すれば以下のとおりである。
Next, the plurality of
なお、受信側の携帯型電話機10は、1台だけに限らず、複数台が存在する場合には、送信側の携帯型電話機10は、複数台の受信側の携帯型電話機10に対して同様の処理を行う。
Note that the reception-side
まず、送信側の携帯型電話機10における処理について、図3(a)を用いて説明する。
First, processing in the transmitting-side
S1001では、受信側の携帯型電話機(受信側)10と共有する話題の対象となる写真画像データ等の表示コンテンツ(画像情報)を、表示部4の有効表示エリア4aに表示する。表示コンテンツは、予め受信側に送信、または受信側から受信してあるものを、入力部5からの操作でROM2から読み出して表示してもよいし、ポインティングを開始する時点で、受信側の携帯型電話機10と送受信してもよい。
In step S <b> 1001, display content (image information) such as photographic image data that is a subject of a topic shared with the
また、このステップは、受信側の携帯型電話機10とは無関係に、単独操作で行ってもよいし、通信部7を介して、受信側の携帯型電話機10と通信することにより同調して行ってもよい。
Further, this step may be performed by independent operation irrespective of the
ただし、送信側の携帯型電話機10の有効表示エリア4aに対する目印情報を受信側に送信して、お互いの有効表示エリア4aに表示された表示コンテンツの同一部分をポインティングする必要がある。
However, it is necessary to send the mark information for the
よって、本実施形態の携帯型電話機10では、お互いの有効表示エリア4aの縦横比と、表示コンテンツの表示範囲が同一になるように表示している。また、必要があれば通信部7を介して、受信側と通信することにより、有効表示エリア4aの縦横比と、表示コンテンツの表示範囲とが同一になるように表示制御を行う、あるいは、例えば、「○○の写真全体を、縦向きに画面いっぱいに表示して」等、音声通話等を用いて利用者同士が確認を取り合って適切なポインティングが行えるようにしてもよい。
Therefore, in the
次に、S1002では、入力部5からの操作により、ポインティング開始状態(送信側)に設定する。また、必要に応じて、受信側の携帯型電話機10へ、通信部7を介してポインティング開始を指示する情報を送信してもよいし、音声通話等でポインティング操作を開始する旨を、受信側に伝えてもよい。
Next, in S1002, the pointing start state (transmission side) is set by an operation from the
S1003では、入力部5からの操作により、ポインティング操作を行い、目印情報を受信側の携帯型電話機10に送信する。なお、このS1003の処理内容については、後段にて詳述する。
In S1003, a pointing operation is performed by an operation from the
ポインティングが終了したら本ステップは終了となるが、本ステップを必要に応じて繰り返し実行し、ポインティング操作を連続的に行ってもよい。 This step is finished when the pointing is completed, but this step may be repeatedly executed as necessary to continuously perform the pointing operation.
続いて、受信側の処理について、図3(b)を用いて説明する。 Subsequently, processing on the receiving side will be described with reference to FIG.
S1004では、送信側の携帯型電話機(送信側)10と共有する、話題の対象となる写真画像データ等の表示コンテンツを、表示部4の有効表示エリア4aに表示する。
In S1004, display content such as photographic image data to be talked about which is shared with the
表示コンテンツは、予め送信側と送受信してある共有画像情報を、入力部5からの操作でROM2から読み出して表示してもよいし、ポインティングを開始する時点で、送信側の携帯型電話機10と送受信してもよい。
The display content may be shared image information that has been transmitted and received in advance with the transmission side, read out from the
また、このステップの処理は、送信側とは無関係に、単独操作で行ってもよいし、通信部7を介して、送信側と通信することにより同調して行ってもよい。
The processing in this step may be performed by a single operation regardless of the transmission side, or may be performed in synchronization by communicating with the transmission side via the
ただし、受信側の携帯型電話機10では、送信側の携帯型電話機10の有効表示エリア4aにおいて表示された目印情報を受信して、お互いの有効表示エリア4aに表示された表示コンテンツの同一部分をポインティングする必要がある。
However, the
よって、本実施形態の携帯型電話機10では、お互いの有効表示エリア4aの縦横比と、表示コンテンツの表示範囲が同一になるように表示している。また、必要があれば通信部7を介して、送信側と通信することにより、有効表示エリア4aの縦横比と、表示コンテンツの表示範囲とが同一になるように表示制御を行う、あるいは、例えば、「○○の写真全体を、縦向きに画面いっぱいに表示して」等、音声通話等を用いて利用者同士が確認を取り合って適切なポインティングが行えるようにしてもよい。
Therefore, in the
S1005では、入力部5からの操作、または通信部7を介して、送信側から受信したポインティング開始を指示する情報により、ポインティング開始状態に設定される。
In step S <b> 1005, the pointing start state is set by an operation from the
ここでも、必要に応じて、送信側の携帯型電話機(送信側)10に対して、音声通話等でポインティング動作を開始できる旨を伝えてもよい。 Here, if necessary, the mobile phone (sender) 10 on the transmission side may be informed that the pointing operation can be started by voice call or the like.
S1006では、通信部7を介して、送信側から受信した目印情報に基づいて、ポインティング動作を行う。なお、受信した目印情報に目印態様情報が含まれていなければ、予め定められた形状の目印を、表示画面上に表示させてもかまわない。なお、このステップにおける処理内容については後段にて後述する。
In S1006, a pointing operation is performed based on the landmark information received from the transmission side via the
ポインティングが終了したら本ステップは終了となるが、本ステップを必要に応じて繰り返し実行し、ポインティング動作を連続的に行ってもよい。 This step is completed when the pointing is completed, but this step may be repeatedly executed as necessary to continuously perform the pointing operation.
以上が、本実施形態の携帯型電話機10による全体的な処理の概要である。
The above is the outline of the overall processing by the
次に、携帯型電話機10間で送受信される目印情報として、送信側の入力部5の入力操作情報を利用する場合について、図4および図5に示すフローチャートを用いて説明する。
Next, the case where the input operation information of the
なお、入力操作情報とは、入力されたボタンの種類を示す情報であり、ダイヤルボタン5aのうち、1ボタンが入力されたら“1”、*ボタンが入力されたら“*”等を、文字等で表現されるデジタルデータや、入力されたボタンに対応したPB信号(DTMF)や、音声データ(日本語なら「いち」、「に」、「アステリスク」等)等で生成するものである。
The input operation information is information indicating the type of the input button. Among the
まず、S1では、ポインティング制御を開始するための設定を行う。 First, in S1, a setting for starting pointing control is performed.
具体的には、絶対位置を指定するための、有効表示エリア4aの分割エリアの構成、分割エリアを指定するダイヤルボタン5aの対応、目印情報として送信する入力操作情報の伝送形態や、送信モードの設定等、ポインティング操作に必要な設定を行う。
Specifically, the structure of the divided area of the
なお、本実施形態の携帯型電話機10は、上記送信モードとして、入力操作情報を認識する毎、つまり、ダイヤルボタン5aが押下される度に、入力操作情報を目印情報として送信相手である携帯型電話機10に送信する「逐次送信モード」、目印情報を確定させてから入力操作情報を送信する「確定情報送信モード」を有している。
Note that the
ここで、携帯型電話機10が、「確定情報送信モード」に設定されている場合には、入力操作情報を蓄積するためのRAM3のバッファ領域(図示せず)をすべてクリアする。
Here, when the
なお、「逐次送信モード」は、利用者の好みに応じて任意に設定できるようになっており、ポインティング開始毎にモード設定画面を有効表示エリア4aに表示して、利用者に設定させてもよいし、予めROM2に設定データとして利用者の好みのモードを記憶しておき、これをデフォルトの設定としてもよい。
The “sequential transmission mode” can be arbitrarily set according to the user's preference, and the mode setting screen is displayed in the
本実施形態の携帯型電話機10では、上述したように、図2に示す9個の分割エリア(縦3×横3)から構成される有効表示エリア4aを備え、分割エリアを指定するダイヤルボタン5aの入力に対して、1から9までの9個のボタン(縦3×横3)が対応する。
As described above, the
また、送信側の携帯型電話機10と受信側の携帯型電話機10とが、種類や仕様の異なる情報通信端末である場合等、送信側の携帯型電話機10と受信側の携帯型電話機10との間において、ポインティング操作に必要な情報が明らかでない場合には、通信部7を介して、受信側の携帯型電話機10に、ポインティング操作に必要な情報を送信する。
In addition, when the
なお、送信側の携帯型電話機10および受信側の携帯型電話機10の機種や仕様が同一である場合等、ポインティング操作に必要な情報が明らかである場合には、ポインティング操作に必要な情報を、受信側の携帯型電話機10に送信しなくてもよい。
In addition, when the information required for the pointing operation is clear, such as when the model and specification of the
ここで、ポインティング操作に必要な情報の一例について説明する。 Here, an example of information necessary for the pointing operation will be described.
送信側の携帯型電話機10において設定された有効表示エリア4aの定義情報として、図6(a)に示すように、有効表示エリア4aの縦横の分割数が設定されている。
As definition information of the
ポインティング操作に使用するボタンと、各ボタンに割り当てられた機能の定義は、図6(b)に示すような形式で設定されている。 The button used for pointing operation and the definition of the function assigned to each button are set in a format as shown in FIG.
ポインティング操作によりポインティングされる目印の種類と形状を識別するコード、そのコードに適用される目印、サイズの変化ステップの定義は、図6(c)に示すような形式で設定されている。 The code for identifying the type and shape of the mark pointed by the pointing operation, the mark applied to the code, and the definition of the size change step are set in a format as shown in FIG.
相対位置指定モードでの相対移動量の変化ステップの定義は、図6(d)に示すような形式で設定されている。 The definition of the change step of the relative movement amount in the relative position designation mode is set in a format as shown in FIG.
目印情報として送信する入力操作情報の伝送形態の定義は、図6(e)に示すような形式で設定されており、定義されている伝送形態のうちの何れか1つを選択する。 The definition of the transmission form of the input operation information to be transmitted as the mark information is set in a format as shown in FIG. 6E, and any one of the defined transmission forms is selected.
続いて、S2では、ポインティングモードを絶対位置指定モードに設定し、分割グリッド線と、目印情報作成部11が作成した目印情報をデフォルトの目印として表示する。
Subsequently, in S2, the pointing mode is set to the absolute position designation mode, and the divided grid lines and the mark information created by the mark
なお、分割グリッド線やデフォルト目印情報に基づいて表示された目印は、必ずしも表示する必要があるわけではなく、必要が無ければ表示しなくてもよい。 Note that the mark displayed based on the divided grid lines and the default mark information is not necessarily displayed, and may not be displayed if it is not necessary.
ここで、分割グリッド線、デフォルトの目印情報について説明する。 Here, the divided grid lines and the default mark information will be described.
送信側の携帯型電話機10の表示部4には、図7(a)に示すように、有効表示エリア70aに、有効表示エリア70aの分割エリアを示すための分割グリッド線72aと、デフォルトの目印71aとが表示されている。
As shown in FIG. 7A, the
ここでは、目印情報作成部11で作成されたデフォルトの目印情報は、識別コード“種類=1、形状=1”で定義される矢印を表示する。また、絶対位置指定モードであることを示すために、目印の表示態様は、線種が二重線で、かつ表示濃度が薄く表示されている。
Here, the default mark information created by the mark
このように、グリッド線を用いて分割領域を示すことで、利用者は、ポインティングしたい対象物がどのエリアに含まれているかを容易に認識できる。 Thus, by indicating the divided areas using grid lines, the user can easily recognize in which area the target object to be pointed is included.
なお、絶対位置指定モードであることを示すための表現方法は、その他の方法でもよく、例えば、絶対位置指定モードであることを示すために、目印の表示色を特定の色にしてもよい。 The expression method for indicating the absolute position designation mode may be other methods. For example, the mark display color may be a specific color to indicate the absolute position designation mode.
S3では、ポインティング操作に使用するダイヤルボタン5aの入力を検出し、ボタンの入力を検出したら、S4に進む。
In S3, the input of the
S4では、S3で入力を検出したボタンに基づいて、入力操作情報を生成する。 In S4, input operation information is generated based on the button whose input is detected in S3.
入力操作情報は、入力されたボタンの種類を示すだけでよいので、1ボタンが入力されたら“1”、*ボタンが入力されたら“*”を示す文字等で表現されるデジタルデータを生成する。 Since the input operation information only needs to indicate the type of the input button, digital data represented by a character or the like indicating “1” when one button is input and “*” when the * button is input is generated. .
S5では、S4で生成された入力操作情報が、絶対位置の入力を示すボタン入力であるか否かを判定する。絶対位置の入力を示すボタンは、図6(b)に示すように、1から9までの9個のダイヤルボタンである。
In S5, it is determined whether or not the input operation information generated in S4 is a button input indicating an absolute position input. The buttons indicating the input of the absolute position are nine
ここで、判定がYESの場合にはS6に進み、NOの場合にはS10に進む。 If the determination is YES, the process proceeds to S6, and if the determination is NO, the process proceeds to S10.
S6では、絶対位置の入力を示すボタンが押下されているため、入力操作情報に基づいて、送信側の携帯型電話機10の有効表示エリア4aに目印を表示する。具体的には、利用者に押下されたダイヤルボタン5aに対応する有効表示エリア4aの分割エリアに、絶対位置として目印を表示する。ここでは、現時点で選択されている種類・形状・サイズの表示態様を示す目印情報に基づいて、目印を表示する。
In S6, since the button indicating the input of the absolute position is pressed, a mark is displayed in the
目印の種類が、1点(ピンポイント)を指し示す場合には、“矢印”や“十字”を目印として用いて、指定された分割エリアの中央を指し示すように配置し、目印の種類が、ある範囲(エリア)を指し示したい場合には、“○(丸)”や“□(四角)”等を示す目印情報を用いて、指定された分割エリアの中心を中心位置として、分割エリアの縦または横のどちらか小さい方のサイズを輪郭サイズとして配置する。 When the mark type points to one point (pinpoint), use “arrow” or “cross” as the mark, and place it so as to point to the center of the designated divided area. If you want to indicate a range (area), use mark information such as “○ (circle)” or “□ (square)” to set the center of the specified divided area as the center position or The smaller one of the horizontal sizes is placed as the outline size.
また、絶対位置の指定が終了すると、次に相対位置指定モードに切り換えられたことを示すために、例えば、線種が破線で、かつ表示濃度は通常という状態で目印を表示する。 When the absolute position designation is completed, a mark is displayed in a state where, for example, the line type is a broken line and the display density is normal to indicate that the relative position designation mode has been switched next.
S7では、入力操作情報を認識する毎に、入力操作情報を目印情報として受信側の携帯型電話機10に送信する「逐次送信モード」に設定されているか否かを判定する。
In S7, every time the input operation information is recognized, it is determined whether or not the “sequential transmission mode” in which the input operation information is transmitted as mark information to the
ここで、判定が、YESの場合にはS8に進み、NOの場合にはS9に進む。 If the determination is YES, the process proceeds to S8, and if the determination is NO, the process proceeds to S9.
S8では、逐次送信モードに設定されているため、利用者に入力された領域指定情報である入力操作情報を目印情報として、通信部7から受信側の携帯型電話機10に対して送信する。なお、受信側の携帯型電話機10が複数台存在する場合には、上記と同様に、各携帯型電話機10に対して目印情報が送信される。
In S8, since the sequential transmission mode is set, input operation information, which is area designation information input by the user, is transmitted from the
続いて、目印の表示位置を微調整するための相対位置指定モードに移行するため、図5に示すフローチャートのS20へと進む。 Subsequently, in order to shift to the relative position designation mode for finely adjusting the display position of the mark, the process proceeds to S20 of the flowchart shown in FIG.
一方、S9では、入力操作情報を、RAM3のバッファ領域(図示せず)に記憶し、同じく図5のフローチャートに示すS20へと進む。
On the other hand, in S9, the input operation information is stored in a buffer area (not shown) of the
S10では、S4で生成された入力操作情報が、目印の種類変更を示すボタン入力であるか否かを判定する。ここでは、目印の種類変更を示すボタン入力は、図6(b)に示すように、目印の種類を変更するキー入力操作子として定義された*ボタンである。 In S <b> 10, it is determined whether or not the input operation information generated in S <b> 4 is a button input indicating a change in the mark type. Here, the button input indicating the change in the type of the mark is a * button defined as a key input operator for changing the type of the mark as shown in FIG.
ここで、判定がYESの場合にはS11に進み、NOの場合にはS15に進む。 If the determination is YES, the process proceeds to S11, and if the determination is NO, the process proceeds to S15.
S11では、目印の種類変更が入力されているため、入力操作情報に基づいて、送信側の携帯型電話機10の有効表示エリア4aに表示されている目印の種類を変更する。
In S11, since the type change of the mark is input, the type of the mark displayed in the
具体的には、目印の種類は、図10に示すように、1点(ピンポイント)を指し示す“矢印31”や“十字32”である種類=1のグループから、ある範囲(エリア)を指し示す“○(丸)33”や“□(四角)34”である種類=2のグループへ、あるいは種類=2のグループから種類=1のグループへ変更される。
Specifically, as shown in FIG. 10, the type of the mark indicates a certain range (area) from the type = 1 group such as “
なお、本実施形態では、目印の種類が変更されると、形状も変更後の種類の形状=1に変更される。 In this embodiment, when the type of the mark is changed, the shape is also changed to the changed shape = 1.
S12では、入力操作情報を認識する毎に、入力操作情報を目印情報として受信側の携帯型電話機10に送信する「逐次送信モード」に設定されているか否かを判定する。
In S12, each time the input operation information is recognized, it is determined whether or not the “sequential transmission mode” in which the input operation information is transmitted as mark information to the
ここで、判定がYESの場合にはS13に進み、NOの場合にはS14に進む。 If the determination is YES, the process proceeds to S13, and if the determination is NO, the process proceeds to S14.
S13では、逐次送信モードに設定されているため、目印態様情報である入力操作情報を目印情報として、通信部7から受信側の携帯型電話機10に対して送信する。なお、受信側の携帯型電話機10が複数台存在する場合には、上記と同様に、各携帯型電話機10に対して目印情報が送信される。続いてS3に戻る。
In S13, since the sequential transmission mode is set, the input operation information that is the mark mode information is transmitted from the
S14では、逐次送信モードに設定されていないため、入力操作情報を、RAM3のバッファ領域(図示せず)に記憶した後、S3に戻る。
In S14, since the sequential transmission mode is not set, the input operation information is stored in the buffer area (not shown) of the
S15では、S4で生成された入力操作情報が、目印の形状変更を示すボタン入力であるか否かを判定する。ここでは、目印の形状変更を示すボタン入力は、図6(b)に示すように、0ボタンである。 In S15, it is determined whether or not the input operation information generated in S4 is a button input indicating a mark shape change. Here, the button input indicating the change in the shape of the mark is the 0 button as shown in FIG.
ここで、判定がYESの場合にはS16に進み、NOの場合にはS17に進む。 If the determination is YES, the process proceeds to S16, and if the determination is NO, the process proceeds to S17.
S16では、目印の形状変更が入力されているため、入力操作情報に基づいて、送信側の携帯型電話機10の有効表示エリア4aに表示されている目印の形状を変更する。
In S16, since the mark shape change has been input, the mark shape displayed in the
具体的には、目印の形状は、図10に示すように、それぞれの種類グループ内で形状=1から形状=2へ、あるいは形状=2から形状=1へ変更される。 Specifically, as shown in FIG. 10, the shape of the mark is changed from shape = 1 to shape = 2 or from shape = 2 to shape = 1 in each type group.
S17では、S4で生成された入力操作情報が、目印情報の確定を示すボタン入力であるか否かを判定する。ここでは、目印情報の確定を示すボタン入力は、図6(b)に示すように、#ボタンである。 In S17, it is determined whether or not the input operation information generated in S4 is a button input indicating confirmation of the landmark information. Here, the button input indicating the confirmation of the landmark information is the # button as shown in FIG.
なお、本ステップでは、まだ絶対位置の指定が行われていない場合には、デフォルトの目印情報に基づいて目印が表示されている有効表示エリア4aの、中央の分割エリアの中心位置が、目印のポインティング位置として認識される。
In this step, if the absolute position has not been designated yet, the center position of the central divided area of the
ここで、判定がYESの場合には、図5のフローチャートのS37に進み、NOの場合にはS3に戻る。 If the determination is YES, the process proceeds to S37 in the flowchart of FIG. 5, and if NO, the process returns to S3.
続いて、図5に示すフローチャートに従って、S20では、ポインティングモードを、相対位置指定モードに設定する。 Subsequently, according to the flowchart shown in FIG. 5, in S20, the pointing mode is set to the relative position designation mode.
ここでは、相対移動する際の相対移動量を、デフォルトの“1/2”に設定する。 Here, the relative movement amount at the time of relative movement is set to the default “1/2”.
S21では、ポインティング操作に使用するダイヤルボタン5aの入力操作を検出し、ボタンの入力を検出したら、S22に進む。
In S21, the input operation of the
S22では、S21で入力を検出したボタンに基づいて、入力操作情報を生成する。 In S22, input operation information is generated based on the button whose input is detected in S21.
入力操作情報は、入力されたボタンの種類を示すだけでよいので、1ボタンが入力されたら“1”、*ボタンが入力されたら“*”を示す文字等で表現されるデジタルデータを生成する。 Since the input operation information only needs to indicate the type of the input button, digital data represented by a character or the like indicating “1” when one button is input and “*” when the * button is input is generated. .
続いて、S23では、S22で生成された入力操作情報が、相対位置の入力を示すボタン入力であるか否かを判定する。本実施形態では、相対位置の入力を示すボタン入力は、図6(b)に示すように、5を除く1から9までの8個のダイヤルボタン5aである。
Subsequently, in S23, it is determined whether or not the input operation information generated in S22 is a button input indicating an input of a relative position. In the present embodiment, the button inputs indicating the input of relative positions are eight
ここで、判定がYESの場合には、S24に進み、NOの場合には、S25に進む。 If the determination is YES, the process proceeds to S24, and if the determination is NO, the process proceeds to S25.
S24では、相対位置の入力が行われているため、目印移動情報である入力操作情報に基づいて、送信側の携帯型電話機10の有効表示エリア4aに表示されている目印を、現在設定されている相対移動量に基づいて、入力された方向に相対移動させる。
In S24, since the relative position has been input, the mark displayed in the
S29では、入力操作情報を認識する毎に、入力操作情報を目印情報として、受信側の携帯型電話機10に送信する「逐次送信モード」に設定されているか否かを判定する。
In S29, each time the input operation information is recognized, it is determined whether or not the “sequential transmission mode” in which the input operation information is transmitted to the
ここで、判定がYESの場合にはS30に進み、NOの場合にはS31へ進む。 Here, if the determination is YES, the process proceeds to S30, and if the determination is NO, the process proceeds to S31.
S30では、逐次送信モードに設定されているため、入力操作情報を目印情報として、通信部7から受信側の携帯型電話機10に対して送信する。なお、受信側の携帯型電話機10が複数台存在する場合には、上記と同様に、各携帯型電話機10に対して目印情報が送信される。続いてS21に戻る。
In S30, since the sequential transmission mode is set, the input operation information is transmitted as mark information from the
S31では、逐次送信モードに設定されていないため、入力操作情報を、目印情報が確定するまで、RAM3のバッファ領域(図示せず)に格納し、S21に戻る。
In S31, since the sequential transmission mode is not set, the input operation information is stored in a buffer area (not shown) of the
S25では、S22で生成された入力操作情報が、目印のサイズ変更を示すボタン入力であるか否かを判定する。ここでは、目印のサイズ変更を示すボタン入力は、図6(b)に示すように0ボタンである。 In S25, it is determined whether or not the input operation information generated in S22 is a button input indicating a size change of the mark. Here, the button input indicating the size change of the mark is the 0 button as shown in FIG.
ここで、判定がYESの場合にはS26に進み、NOの場合にはS27に進む。 If the determination is YES, the process proceeds to S26, and if the determination is NO, the process proceeds to S27.
S26では、目印のサイズ変更が入力されているため、目印態様情報である入力操作情報に基づいて、送信側の携帯型電話機10の有効表示エリア4aに表示されている目印のサイズを変更する。
In S26, since the size change of the mark is input, the size of the mark displayed in the
ここでは、目印のサイズは、図6(c)に示すように、各種類・形状の目印とも、デフォルトのサイズを“中”とし、サイズ変更が入力される毎に、“小”、“大”、“中”のステップで順次、繰り返してサイズ変更される。 Here, as shown in FIG. 6C, the size of the mark is set to “medium” as the default size for each kind and shape mark, and “small” and “large” each time a size change is input. The size is changed repeatedly in order in the “medium” step.
続いて、S29に進む。S29以降の処理は上述したとおりである。 Then, it progresses to S29. The processing after S29 is as described above.
S27では、S22で生成された入力操作情報が、相対移動量の変更を示すボタン入力であるか否かを判定する。ここでは、相対移動量の変更を示すボタン入力は、図6(b)に示すように、*ボタンである。 In S27, it is determined whether or not the input operation information generated in S22 is a button input indicating a change in the relative movement amount. Here, the button input indicating the change of the relative movement amount is the * button as shown in FIG.
ここで、判定がYESの場合にはS28に進み、NOの場合にはS32に進む。 If the determination is YES, the process proceeds to S28, and if the determination is NO, the process proceeds to S32.
S28では、相対移動量の変更が入力されているため、入力操作情報に基づいて、相対移動量を変更する。 In S28, since the change of the relative movement amount is input, the relative movement amount is changed based on the input operation information.
ここでは、相対移動量は、図6(d)に示すように、デフォルトの相対移動量を、縦方向・横方向ともに、分割エリアのサイズの“1/2”とし、相対移動量の変更が入力される毎に、“1/4”、“最小”、“1/2”のステップで順次、繰り返して変更される。 Here, as shown in FIG. 6D, the default relative movement amount is set to “1/2” of the size of the divided area in both the vertical direction and the horizontal direction, and the relative movement amount is changed. Each time it is input, it is changed repeatedly in order of "1/4", "minimum", and "1/2" steps.
なお、“最小”については、例えば、縦方向・横方向ともに“1/10”等、有効表示エリア4aの解像度や、分割エリアのサイズに応じて適切な値を適用すればよい。
For “minimum”, an appropriate value may be applied according to the resolution of the
続いて、S29に進み、S29以降の処理は上述した通りである。 Then, it progresses to S29 and the process after S29 is as above-mentioned.
S32では、S22で生成された入力操作情報が、ポインティングを最初から“やり直し”することを指示するボタン入力であるか否かを判定する。本実施形態では、“やり直し”を示すボタン入力は、図6(b)に示すように、5ボタンである。 In S32, it is determined whether or not the input operation information generated in S22 is a button input instructing to “redo” pointing from the beginning. In the present embodiment, the button input indicating “redo” is five buttons as shown in FIG.
ここで、判定がYESの場合にはS33に進み、NOの場合にはS36に進む。 If the determination is YES, the process proceeds to S33, and if the determination is NO, the process proceeds to S36.
S33では、“やり直し”が入力されているため、入力操作情報を認識する毎に、入力操作情報を目印情報として受信側の携帯型電話機10に送信する「逐次送信モード」に設定されているか否かを判定する。
In S33, since “redo” is input, whether or not the “sequential transmission mode” is set in which the input operation information is transmitted to the
ここで、判定がYESの場合にはS34に進み、NOの場合にはS35に進む。 If the determination is YES, the process proceeds to S34, and if the determination is NO, the process proceeds to S35.
S34では、逐次送信モードに設定されているため、入力操作情報を目印情報として、通信部7から受信側の携帯型電話機10に対して送信する。なお、受信側の携帯型電話機10が複数台存在する場合には、上記と同様に、各携帯型電話機10に対して目印情報が送信される。
In S34, since the sequential transmission mode is set, the input operation information is transmitted as mark information from the
S35では、RAM3のバッファ領域(図示せず)に記憶されている入力操作情報を、すべてクリアする。続いて、図4に示すフローチャートのS2に戻る。
In S35, all input operation information stored in the buffer area (not shown) of the
S36では、S22で生成された入力操作情報が、目印情報の確定を示すボタン入力であるか否かを判定する。本実施形態では、目印情報の確定を示すボタン入力は、図6(b)に示すように、#ボタンである。 In S36, it is determined whether or not the input operation information generated in S22 is a button input indicating confirmation of the landmark information. In the present embodiment, the button input indicating the confirmation of the landmark information is the # button as shown in FIG.
ここで、判定がYESの場合にはS37に進み、NOの場合にはS21に戻る。 If the determination is YES, the process proceeds to S37, and if the determination is NO, the process returns to S21.
S37では、目印情報の確定が入力されているため、入力操作情報に基づいて、送信側の携帯型電話機10の有効表示エリア4aに表示されている目印情報を現在の状態で確定する。
In S37, since the confirmation of the landmark information is input, the landmark information displayed in the
また、目印情報が確定したことを示すために、目印の表示態様を、例えば、線種を破線から実線に変更して表示する。 Further, in order to indicate that the mark information has been determined, the display mode of the mark is displayed by changing the line type from a broken line to a solid line, for example.
さらに、有効表示エリア4aに表示していた分割グリッド線も消去する。なお、分割グリッド線の消去は、ここでは確定時点で実施しているが、例えば、絶対位置が指定された時点で消去してもよい。
Further, the divided grid lines displayed in the
S38では、RAM3のバッファ領域(図示せず)に、入力操作情報が記憶されておらず、バッファが空の状態であるか否かを判定する。
In S38, it is determined whether or not input operation information is stored in a buffer area (not shown) of the
ここで、判定がYESの場合にはS41に進み、NOの場合にはS39に進む。 If the determination is YES, the process proceeds to S41, and if the determination is NO, the process proceeds to S39.
S39では、入力操作情報がRAM3に格納されているため、格納されている入力操作情報を、記憶した順番に1つずつ読み出し、読み出した入力操作情報を目印情報として、通信部7から受信側の携帯型電話機10に対して順次送信する。なお、受信側の携帯型電話機10が複数台存在する場合には、上記と同様に、各携帯型電話機10に対して目印情報が送信される。このステップは、RAM3のバッファ領域(図示せず)に記憶されている入力操作情報をすべて送信するまで繰り返し行われる。
In S39, since the input operation information is stored in the
S40では、受信側の携帯型電話機10に全ての目印情報を送信したため、RAM3のバッファ領域に格納されている入力操作情報を、すべてクリアする。
In S40, since all mark information has been transmitted to the
S41では、S22で生成された確定を示す入力操作情報を目印情報として、通信部7から受信側の携帯型電話機10に対して送信する。なお、受信側の携帯型電話機10が複数台存在する場合には、上記と同様に、各携帯型電話機10に対して目印情報が送信される。
In S41, the input operation information indicating the confirmation generated in S22 is transmitted as mark information from the
以上で、送信側のポインティング処理を終了する。 This completes the pointing process on the transmission side.
本実施形態の携帯型電話機10では、以上のように、表示制御部12が表示部4を制御して、表示画面に表示された画像に対して、携帯型電話機10が有するダイヤルボタン5aを押下することで、目印情報作成部11が作成した目印情報に基づいて、容易に所望の位置に目印を表示することができる。
In the
また、表示画面にポインティングされた目印について、同じくダイヤルボタン5aを押下することで、目印情報移動制御部14が容易に目印の表示位置を微調整して、表示制御部12によって表示部4を制御することで、利用者所望に位置に目印を表示させることができる。
Similarly, by pressing the
さらに、ダイヤルボタン5aの特定のボタンを押下することで、目印情報作成部11が目印の表示態様を変更したり、目印情報を確定させたりすることができる。
Further, by pressing a specific button of the
続いて、本実施形態の携帯型電話機10における、受信側の処理について、図11および図12に示すフローチャートを用いて説明すれば、以下のとおりである。なお、受信側の携帯型電話機10における処理についての基本的な条件については、送信側の携帯型電話機10における処理と同様である。
Next, processing on the receiving side in the
まず、受信側の携帯型電話機10では、図11に示すフローチャートに従って、ポインティング処理が行なわれる。
First, in the
まず、S50では、ポインティング制御を開始するための設定を行う。 First, in S50, a setting for starting pointing control is performed.
具体的には、絶対位置を指定するための有効表示エリア4aの分割エリアの構成、分割エリアを指定するための入力操作情報で示されるダイヤルボタン5aの対応、目印情報として受信する入力操作情報の伝送形態等の、ポインティング操作に必要な設定を行う。
Specifically, the configuration of the divided area of the
ポインティング操作に必要な情報については、上述した図6(a)〜図6(e)に示した例と同様である。 Information necessary for the pointing operation is the same as the example shown in FIGS. 6A to 6E described above.
S51では、ポインティングモードを、絶対位置指定モードに設定し、デフォルトの目印を表示する。なお、デフォルト目印情報は必ず表示する必要があるわけではなく、表示しなくてもよい。 In S51, the pointing mode is set to the absolute position designation mode, and a default mark is displayed. Note that the default mark information is not necessarily displayed, and may not be displayed.
図7(a)に示す表示画面において、受信側の有効表示エリア70bに、デフォルトの目印情報に基づいて矢印71bが表示されている。ここでは、デフォルトの目印情報は、識別コード“種類=1、形状=1”で定義される矢印である。また、絶対位置指定モードであることを示すために、目印の表示態様は、線種が二重線でかつ表示濃度が薄く表示されている。
On the display screen shown in FIG. 7A, an
S52では、通信部7により、送信側で入力されたボタンの種類を示す入力操作情報の受信待ちを行う。入力操作情報は、入力操作情報の伝送形態で選択されている形態で受信する。
In S52, the
ここで、入力操作情報を受信したら、S53に進む。 Here, if input operation information is received, it will progress to S53.
S53では、S52で受信した入力操作情報が、目印の種類変更を示すボタン入力であるか否かを判定する。 In S53, it is determined whether or not the input operation information received in S52 is a button input indicating a change in the mark type.
ここで、判定がYESの場合には、S58に進み、NOの場合には、S54に進む。 If the determination is YES, the process proceeds to S58, and if the determination is NO, the process proceeds to S54.
S58では、目印の種類変更が入力されているため、入力操作情報に基づいて、有効表示エリア4aに表示されている目印の種類を変更する。この目印の種類が変更されると、種類=1のグループから種類=2のグループへ、または、種類=2のグループから種類=1のグループへ変更する。
In S58, since the type change of the mark is input, the type of the mark displayed in the
なお、本実施形態では、種類が変更されると形状も変更後の種類グループの形状=1に変更されるようになっている。続いて、S52に戻る。 In the present embodiment, when the type is changed, the shape is also changed to the changed type group shape = 1. Subsequently, the process returns to S52.
S54では、S52で受信した入力操作情報が、目印の形状変更を示すボタン入力であるか否かを判定する。 In S54, it is determined whether or not the input operation information received in S52 is a button input indicating a change in the shape of the mark.
ここで、判定がYESの場合にはS59に進み、NOの場合にはS55に進む。 If the determination is YES, the process proceeds to S59, and if the determination is NO, the process proceeds to S55.
S59では、目印の形状変更が入力されているため、入力操作情報に基づいて、有効表示エリア4aに表示されている目印の形状を変更する。この目印の形状が変更されると、それぞれの種類のグループ内で、形状=1から形状=2へ、または、形状=2から形状=1へ変更する。続いて、S52に戻る。
In S59, since the mark shape change has been input, the mark shape displayed in the
S55では、S52で受信した入力操作情報が、目印情報の確定を示すボタン入力であるか否かを判定する。 In S55, it is determined whether or not the input operation information received in S52 is a button input indicating confirmation of the landmark information.
なお、本ステップでは、まだ絶対位置の指定が行われていないが、デフォルトの目印情報に基づいてポインティングされている有効表示エリア4aの中央の分割エリアの中心位置が、ポインティング位置として認識される。
In this step, although the absolute position is not yet designated, the center position of the divided area at the center of the
ここで、判定がYESの場合には、図12に示すフローチャートのS67に進み、NOの場合にはS56に進む。 If the determination is YES, the process proceeds to S67 in the flowchart shown in FIG. 12, and if the determination is NO, the process proceeds to S56.
S56では、S52で受信した入力操作情報が、絶対位置の入力を示すボタン入力であるか否かを判定する。 In S56, it is determined whether or not the input operation information received in S52 is a button input indicating an absolute position input.
ここで、判定がYESの場合にはS57に進み、NOの場合にはS52に戻る。 If the determination is YES, the process proceeds to S57, and if the determination is NO, the process returns to S52.
S57では、絶対位置の入力が行なわれているため、入力操作情報に基づいて、有効表示エリア4aに、現時点で選択されている種類・形状・サイズの表示態様を示す目印情報にて、目印を表示する。
In S57, since the absolute position is input, the mark is displayed in the
目印の種類が、1点(ピンポイント)を指し示す“矢印”や“十字”の場合には、指定された分割エリアの中央を指し示すように目印を表示する。一方、目印の種類が、ある範囲(エリア)を指し示す“○”や“□”の場合には、指定された分割エリアの中心を中心位置として、分割エリアの縦または横のどちらか小さい方のサイズを輪郭サイズとして目印を表示する。 When the type of the mark is “arrow” or “cross” indicating one point (pinpoint), the mark is displayed so as to indicate the center of the designated divided area. On the other hand, when the mark type is “○” or “□” indicating a certain range (area), the center of the specified divided area is set as the center position, whichever is smaller, vertical or horizontal. The mark is displayed with the size as the outline size.
また、絶対位置の指定が終了し、次に相対位置指定モードであることを示すために、目印の表示態様は、例えば、線種が破線で、かつ表示濃度は通常である。 In addition, in order to indicate that the absolute position designation is completed and the relative position designation mode is set next, the display mode of the mark is, for example, the line type is a broken line and the display density is normal.
続いて、目印の表示位置を微調整するための相対位置指定モードに移行するため、図12に示すフローチャートのS60に進む。 Subsequently, in order to shift to a relative position designation mode for finely adjusting the display position of the mark, the process proceeds to S60 of the flowchart shown in FIG.
S60では、ポインティングモードを、相対位置指定モードに設定するとともに、相対移動する際の相対移動量を、デフォルトの“1/2”に設定する。 In S60, the pointing mode is set to the relative position designation mode, and the relative movement amount at the time of relative movement is set to the default “1/2”.
S61では、通信部7において、送信側の携帯型電話機10で入力されたボタンの種類を示す入力操作情報の受信待ちを行う。入力操作情報は、入力操作情報の伝送形態で選択されている形態で受信する。入力操作情報を受信すると、S62に進む。
In S <b> 61, the
S62では、S61で受信した入力操作情報が、目印のサイズ変更を示すボタン入力であるか否かを判定する。 In S62, it is determined whether or not the input operation information received in S61 is a button input indicating a size change of the mark.
ここで、判定がYESの場合にはS68に進み、NOの場合にはS63に進む。 If the determination is YES, the process proceeds to S68, and if the determination is NO, the process proceeds to S63.
S68では、目印のサイズ変更が入力されているため、入力操作情報に基づいて、有効表示エリア4aに表示されている目印のサイズを変更する。続いて、S61に戻る。
In S68, since the mark size change has been input, the size of the mark displayed in the
S63では、S61で受信した入力操作情報が、目印の相対移動量の変更を示すボタン入力であるか否かを判定する。 In S63, it is determined whether or not the input operation information received in S61 is a button input indicating a change in the relative movement amount of the mark.
ここで、判定がYESの場合にはS69に進み、NOの場合にはS64に進む。 If the determination is YES, the process proceeds to S69, and if the determination is NO, the process proceeds to S64.
S69では、目印の相対移動量の変更が入力されているため、入力操作情報に基づいて、相対移動量を変更する。続いて、S61に戻る。 In S69, since the change of the relative movement amount of the mark is input, the relative movement amount is changed based on the input operation information. Subsequently, the process returns to S61.
S64では、S61で受信した入力操作情報が、ポインティングを最初から“やり直し”することを指示するボタン入力であるか否かを判定する。 In S64, it is determined whether or not the input operation information received in S61 is a button input instructing to “redo” pointing from the beginning.
ここで、判定がYESの場合にはS51に戻り、NOの場合にはS65に進む。 Here, if the determination is YES, the process returns to S51, and if the determination is NO, the process proceeds to S65.
S65では、S61で受信した入力操作情報が、相対位置の入力を示すボタン入力であるか否かを判定する。 In S65, it is determined whether or not the input operation information received in S61 is a button input indicating input of a relative position.
ここで、判定がYESの場合にはS70に進み、NOの場合にはS66に進む。 If the determination is YES, the process proceeds to S70, and if the determination is NO, the process proceeds to S66.
S70では、入力操作情報に基づいて、受信側の携帯型電話機10の有効表示エリア4aに表示されている目印を指定された方向に、現在設定されている相対移動量に基づいて相対移動する。続いて、S61に戻る。
In S70, based on the input operation information, the mark displayed in the
S66では、S61で受信した入力操作情報が、目印情報の確定を示すボタン入力であるか否かを判定する。 In S66, it is determined whether or not the input operation information received in S61 is a button input indicating confirmation of the landmark information.
ここで、判定がYESの場合には、S67に進み、NOの場合には、S61に戻る。 If the determination is YES, the process proceeds to S67, and if the determination is NO, the process returns to S61.
S67では、入力操作情報に基づいて、受信側の携帯型電話機10の有効表示エリア4aに表示されている目印情報を現在の状態で確定する。
In S67, the mark information displayed in the
また、目印情報が確定したことを示すために、目印の表示態様を、例えば、線種を実線に変更して表示する。 Further, in order to indicate that the mark information has been confirmed, the display mode of the mark is displayed by changing the line type to a solid line, for example.
以上で、受信側のポインティング処理を終了する。 This completes the pointing-side pointing process.
本実施形態の携帯型電話機10では、以上のように、受信側の携帯型電話機10としても、送信側から受信した目印情報に基づいて、表示制御部12が、表示部4を制御することで、送信側の携帯型電話機10において表示された状態と同様の表示を行うことができる。
In the
これにより、送受信を行う複数の携帯型電話機10において、互いに共通する画像に目印を付加した状態で、表示画面上に表示することができる。よって、利用者は、その目印で指し示された対象物についての情報交換を、通話あるいは文字情報を用いて行うことができる。
Thereby, it is possible to display on the display screen in a state where a mark is added to a common image in a plurality of
さらに、本実施形態の携帯型電話機10において、逐次送信モードに設定されている場合の、送信側および受信側の携帯型電話機10における具体的な表示状態について説明する。
Furthermore, in the
図7(a)〜図7(d)および図8(a)〜図8(d)は、2台の携帯型電話機10が、「デスクトップパソコンを示す画像」を共有してお互いの画面に表示し、1台の携帯型電話機10からのポインティング操作により、お互いの画面に目印を重畳表示している表示例である。
7 (a) to 7 (d) and FIGS. 8 (a) to 8 (d), two
通信開始時点では、図7(a)に示すように、送信側の携帯型電話機10の有効表示エリア70a、および受信側の携帯型電話機10の有効表示エリア70bには、共有している「デスクトップパソコンを示す画像」が表示されている。
At the time of starting communication, as shown in FIG. 7A, the
また、送信側の携帯型電話機10の有効表示エリア70aには、図7(a)に示すように、有効表示エリア70aの分割エリアを示すための分割グリッド線72aと、デフォルトの目印情報に基づく目印71aとが表示されている。ここでは、デフォルトの目印71aは、識別コード“種類=1、形状=1”で定義される矢印であり、絶対位置指定モードであることを示すために、目印71aの表示態様は、二重線でかつ表示濃度が薄く表示されている(以下、絶対位置指定モードでは同様に表示されるものとする)。
Further, as shown in FIG. 7A, the
また、受信側の携帯型電話機10の有効表示エリア70bには、デフォルトの目印71bが、送信側の携帯型電話機10と同じ表示態様で表示されている。
Further, in the
次に、絶対位置指定モードで、目印の形状が変更された場合には、図7(b)に示すように、目印情報が十字に変化する。 Next, when the shape of the mark is changed in the absolute position designation mode, the mark information changes to a cross as shown in FIG.
すなわち、送信側の携帯型電話機10において、図7(b)に示すように、ダイヤルボタン5aの0ボタンを押下することにより、送信側の携帯型電話機10に表示されている目印71aの形状を、“形状=1”で定義される矢印から、“形状=2”で定義される十字に変更する。
That is, in the
さらに、送信側の携帯型電話機10は、目印情報として、入力されたボタンの種類を示す入力操作情報“0”を受信側の携帯型電話機10へ送信する。受信側の携帯型電話機10は、受信した入力操作情報に基づいて、受信側の有効表示エリア70bに表示されている目印71bの形状を、“形状=1”で定義される矢印から、“形状=2”で定義される十字に変更する。
Further, the transmitting-side
次に、絶対位置が指定された場合には、図7(c)に示すように、ダイヤルボタン5aに対応する表示画面の分割エリアに、目印が表示される。
Next, when an absolute position is designated, as shown in FIG. 7C, a mark is displayed in the divided area of the display screen corresponding to the
すなわち、送信側の携帯型電話機10において、ダイヤルボタン5aの1ボタンが入力されると、図7(c)に示すように、送信側の携帯型電話機10の有効表示エリア70aに示された9つの分割エリアのうち、1ボタンに対応する絶対位置である左上の分割エリアに、現時点で選択されている種類・形状・サイズの目印71aが表示される。なお、目印71aの表示態様は、目印の絶対位置が設定された後、相対位置指定モードに切り換わったことを示すため、破線で、かつ表示濃度が通常で表示されている(以下、相対位置指定モードでは同様に表示されるものとする)。
That is, when one button of the
さらに、送信側の携帯型電話機10は、目印情報として、入力されたボタンの種類を示す入力操作情報“1”を受信側の携帯型電話機10に送信する。受信側の携帯型電話機10は、受信した入力操作情報に基づいて、受信側の携帯型電話機10に示される9つの分割エリアのうち、1ボタンに対応する絶対位置である左上の分割エリアに、現時点で選択されている種類・形状・サイズの目印71bを表示する。
Furthermore, the
次に、目印のサイズが変更された場合には、図7(d)に示すように、目印の大きさが変更される。 Next, when the size of the mark is changed, the size of the mark is changed as shown in FIG.
すなわち、送信側の携帯型電話機10において、ダイヤルボタン5aの0ボタンが入力された場合には、図7(d)に示すように、送信側の携帯型電話機10に表示されている目印71aのサイズが、デフォルトの“中”から“小”に変更される。
That is, when the 0 button of the
さらに、送信側の携帯型電話機10は、目印情報として、入力されたボタンの種類を示す入力操作情報“0”を受信側の携帯型電話機10へ送信する。受信側の携帯型電話機10は、受信した入力操作情報に基づいて、受信側の有効表示エリア70bに表示されている目印71bのサイズを、デフォルトの“中”から“小”に変更する。
Further, the transmitting-side
次に、相対位置指定モードで相対位置が指定された場合には、図8(a)に示すように、目印の位置が変更される。 Next, when the relative position is designated in the relative position designation mode, the position of the mark is changed as shown in FIG.
すなわち、送信側の携帯型電話機10において、ダイヤルボタン5aの6ボタンが入力された場合には、図8(a)に示すように、送信側の携帯型電話機10に表示されている目印71aが、6ボタンに対応する相対方向である右方向に、現時点で選択されている相対移動量分だけ相対移動する。なお、この場合の相対移動量は、デフォルトの“1/2”であるため、分割エリアの横方向のサイズの1/2となっている。
That is, when 6 buttons of the
さらに、送信側の携帯型電話機10は、目印情報として、入力されたボタンの種類を示す入力操作情報“6”を受信側の携帯型電話機10へ送信する。受信側の携帯型電話機10は、受信した入力操作情報に基づいて、受信側の有効表示エリア70bに表示されている目印71bを、6ボタンに対応する相対方向である右方向に、現時点で選択されている相対移動量分だけ相対移動させる。相対移動量については、上記と同様である。
Furthermore, the
次に、相対位置指定における相対移動量が変更する場合には、図8(b)に示すように、*ボタンが押下される。 Next, when the relative movement amount in the relative position designation is changed, the * button is pressed as shown in FIG.
すなわち、送信側の携帯型電話機10において、ダイヤルボタン5aの*ボタンが押下された場合には、図8(b)に示すように、送信側の目印71aを相対移動するときの相対移動量が、デフォルトの“1/2”から、“1/4”に変更される。
That is, in the
さらに、送信側の携帯型電話機10は、目印情報として、入力されたボタンの種類を示す入力操作情報“*”を受信側の携帯型電話機10へ送信する。受信側の携帯型電話機10は、受信した入力操作情報に基づいて、受信側の目印71bを相対移動するときの相対移動量を、デフォルトの“1/2”から、“1/4”に変更する。
Further, the transmitting-side
次に、相対位置指定モードで、さらに相対位置が変更された場合には、図8(c)示すように、目印が移動する。 Next, when the relative position is further changed in the relative position designation mode, the mark moves as shown in FIG.
すなわち、送信側の携帯型電話機10において、ダイヤルボタン5aの2ボタンが入力された場合には、図8(c)に示すように、送信側の携帯型電話機10に表示されている目印71aが、2ボタンに対応する相対方向である上方向に、現時点で選択されている相対移動量分だけ相対移動する。なお、相対移動量は“1/4”であるため、分割エリアの縦方向のサイズの1/4となっている。
That is, when two buttons of the
さらに、送信側の携帯型電話機10は、目印情報として、入力されたボタンの種類を示す入力操作情報“2”を受信側の携帯型電話機10へ送信する。受信側の携帯型電話機10は、受信した入力操作情報に基づいて、受信側の有効表示エリア70bに表示されている目印71bを、2ボタンに対応する相対方向である上方向に、現時点で選択されている相対移動量分だけ相対移動させる。なお、相対移動量については、上記と同様である。
Furthermore, the
次に、目印情報が確定されると、図8(d)に示すように、目印の表示態様が変わる。 Next, when the landmark information is confirmed, the display mode of the landmark changes as shown in FIG.
すなわち、送信側の携帯型電話機10において、ダイヤルボタン5aの#ボタンが入力された場合には、図8(d)に示すように、送信側の携帯型電話機10に表示されている目印71aが、現在の状態で確定され、目印71aの表示態様が確定されたことを示すため、実線で、かつ表示濃度が通常という状態で表示される。
That is, when the # button of the
さらに、送信側の携帯型電話機10は、目印情報として、入力されたボタンの種類を示す入力操作情報“#”を受信側の携帯型電話機10へ送信する。受信側の携帯型電話機10は、受信した入力操作情報に基づいて、受信側の携帯型電話機10の有効表示エリア70bに表示されている、目印71bを、現在の状態で確定し、目印71bの表示態様を、確定されたことを示すため、実線で、かつ表示濃度が通常という状態で表示する。
Further, the transmitting-side
本実施形態の携帯型電話機10が、逐次送信モードに設定されている場合には、以上のように、送信側でダイヤルボタン5aを介して入力すると、通信制御部13が通信部7を制御して、その入力毎にその入力情報を受信側の携帯型電話機10へ送信する。
When the
一方、受信側の携帯型電話機10では、表示制御部12が表示部4を制御して、受信した目印情報に基づいて、表示画面に目印を表示することで、送信側の携帯型電話機10と同様の画面を表示することができる。
On the other hand, in the
また、逐次送信モードでは、送信側の携帯型電話機10の入力操作毎に、入力操作情報を送信し、受信側の携帯型電話機10は、入力操作情報を受信してポインティング処理を行う。このため、送信側の携帯型電話機10で目印情報を確定するまでの操作内容を、受信側の携帯型電話機10でも画面上で確認できる。よって、表示画面上の何処かに一瞬で目印が表示される場合と比較して、目印のポインティング位置への受信側の利用者の追従性をよくすることができる。さらに、送信側の携帯型電話機10の利用者と一緒にポインティングしているような感覚が得られることも期待できる。
In the sequential transmission mode, the input operation information is transmitted for each input operation of the transmitting-side
一方、本実施形態の携帯型電話機10において、逐次送信モードではなく、確定情報送信モードに設定されている場合の具体的な表示例について、図13(a)〜図13(d)および図14(a)〜図14(d)を用いて説明すれば、以下のとおりである。
On the other hand, in the
ここでは、2台の携帯型電話機10において、上記と同様に、“デスクトップパソコンの画像”を共有してお互いの画面に表示し、1台の携帯型電話機10からのポインティング操作により、お互いの画面に目印を重畳表示する動作について説明する。
Here, in the same manner as described above, the two
なお、図7(a)〜図7(d)および図8(a)〜図8(d)を用いた説明と、同様の条件については、ここでは省略する。 Note that the same conditions as those described with reference to FIGS. 7A to 7D and FIGS. 8A to 8D are omitted here.
通信開始した時点では、図13(a)に示すように、送信側の携帯型電話機10の有効表示エリア80a、および受信側の携帯型電話機10の有効表示エリア80bには、共有している“デスクトップパソコンの画像”が表示されている。
At the start of communication, as shown in FIG. 13A, the
次に、目印の種類が変更された場合には、図13(b)に示すように、目印の表示態様が矢印から○へ変化する。 Next, when the type of the mark is changed, as shown in FIG. 13B, the display mode of the mark changes from an arrow to a circle.
すなわち、送信側の携帯型電話機10において、ダイヤルボタン5aの*ボタンが入力されると、図13(b)に示すように、送信側の携帯型電話機10の有効表示エリア80aに表示されている目印81aの種類を、1点(ピンポイント)を指し示す“種類=1”のグループから、ある範囲(エリア)を指し示す“種類=2”のグループの“形状=1”で定義される○に変更する。
That is, when the * button of the
さらに、送信側の携帯型電話機10は、目印情報として、入力されたボタンの種類を示す入力操作情報“*”を、RAM3のバッファ領域に記憶する。
Further, the transmitting-side
次に、絶対位置が指定された場合には、図13(c)に示すように、目印が利用者指定の領域に表示される。 Next, when the absolute position is designated, a mark is displayed in the user designated area as shown in FIG.
すなわち、送信側の携帯型電話機10において、ダイヤルボタン5aの6ボタンが入力されると、図13(c)に示すように、送信側の携帯型電話機10の有効表示エリア80aにおいて9つの分割エリアのうち、6ボタンに対応する絶対位置である右中央の分割エリアに、現時点で選択されている種類・形状・サイズの目印81aが表示される。
That is, when 6 buttons of the
さらに、送信側の携帯型電話機10では、目印情報として、入力されたボタンの種類を示す入力操作情報“6”を、RAM3のバッファ領域に記憶させる。
Further, in the
次に、目印のポインティングを、最初から“やり直し”することを指示されると、図13(d)に示すように、図13(a)に示す状態に戻る。 Next, when it is instructed to “redo” the pointing of the mark from the beginning, as shown in FIG. 13D, the state returns to the state shown in FIG.
すなわち、送信側の携帯型電話機10において、ダイヤルボタン5aの5ボタンが入力されると、図13(d)に示すように、送信側の携帯型電話機10は、RAM3のバッファ領域に記憶していた入力操作情報をすべてクリアして、絶対位置指定モードの開始状態に戻す。
That is, when 5 buttons of the
次に、再度、目印の種類が変更された場合には、図14(a)に示すように、目印の表示態様が矢印から○へ変化する。 Next, when the type of the mark is changed again, as shown in FIG. 14A, the display mode of the mark changes from an arrow to a circle.
すなわち、送信側の携帯型電話機10において、ダイヤルボタン5aの*ボタンが入力されると、図14(a)に示すように、送信側の携帯型電話機10の有効表示エリア80aに表示される目印81aの種類を、1点(ピンポイント)を指し示す“種類=1”のグループから、ある範囲(エリア)を指し示す“種類=2”のグループの“形状=1”で定義される○に変更する。
That is, when the * button of the
さらに、送信側の携帯型電話機10は、目印情報として、入力されたボタンの種類を示す入力操作情報“*”を、RAM3のバッファ領域に記憶させる。
Further, the transmitting-side
次に、再度、絶対位置が指定された場合には、図14(b)に示すように、目印が利用者指定の領域に表示される。 Next, when the absolute position is designated again, the mark is displayed in the user designated area as shown in FIG.
すなわち、送信側の携帯型電話機10において、ダイヤルボタン5aの9ボタンが入力されると、図14(b)に示すように、送信側の携帯型電話機10の有効表示エリア80aにおける9つの分割エリアのうち、9ボタンに対応する絶対位置である右下の分割エリアに、現時点で選択されている種類・形状・サイズの目印81aが表示される。
That is, when 9 buttons of the
さらに、送信側の携帯型電話機10は、目印情報として、入力されたボタンの種類を示す入力操作情報“9”を、RAM3のバッファ領域に記憶する。
Further, the transmitting-side
次に、目印の絶対位置が確定後、相対位置指定モードへ移行し、相対位置が指定された場合には、図14(c)に示すように、目印の表示位置が移動する。 Next, after the absolute position of the mark is determined, the process proceeds to the relative position designation mode. When the relative position is designated, the mark display position is moved as shown in FIG.
すなわち、送信側の携帯型電話機10において、ダイヤルボタン5aの「1」ボタンが入力されると、図14(c)に示すように、送信側の携帯型電話機10の有効表示エリア80aに表示される目印81aが、「1」ボタンに対応する相対方向である左上方向に、現時点で選択されている相対移動量分だけ相対移動される。なお、相対移動量は、デフォルトの“1/2”であるため、分割エリアの縦方向と横方向のサイズの各1/2となっている。
In other words, when the “1” button of the
さらに、送信側は目印情報として、入力されたボタンの種類を示す入力操作情報“1”を、RAM3のバッファ領域に記憶させる。
Further, the transmission side stores input operation information “1” indicating the type of the input button as mark information in the buffer area of the
次に、目印情報が確定された場合には、図14(d)に示すように、目印の表示態様が変化する。 Next, when the landmark information is confirmed, the display mode of the landmark changes as shown in FIG.
すなわち、送信側の携帯型電話機10において、ダイヤルボタン5aの#ボタンが入力されたことにより、図14(d)に示すように、送信側の携帯型電話機10の有効表示エリア80aに表示されている目印81aが、現在の状態で確定され、目印81aの表示態様が、確定されたことを示すため、実線で、かつ表示濃度が通常で表示される。
That is, when the # button of the
さらに、送信側の携帯型電話機10は、目印情報として、RAM3のバッファ領域に記憶している入力操作情報“*”、“9”、“1”を、順次送信し、最後に、確定を示す入力操作情報“#”を送信する。
Further, the
受信側の携帯型電話機10では、受信した入力操作情報に基づいて、順次、受信側の有効表示エリア80bに表示されている目印81bのポインティング処理を行う。
The
すなわち、受信側の携帯型電話機10は、入力操作情報として“*”、“9”、“1”、“#”を受信することにより、目印81bの種類を、1点(ピンポイント)を指し示す“種類=1”のグループから、ある範囲(エリア)を指し示す“種類=2”のグループの、“形状=1”で定義される○に変更して、目印81bの表示態様を、絶対位置指定モードであることを示すため、二重線で、かつ表示濃度を薄く表示する。
In other words, the
次に、受信側の携帯型電話機10は、有効表示エリア80bにおける9つの分割エリアのうち、9ボタンに対応する絶対位置である右下の分割エリアに、現時点で選択されている種類・形状・サイズの目印81bを表示する。なお、目印81bの表示態様は、次の相対位置指定モードであることを示すため、破線で、かつ表示濃度が通常という状態で表示される。
Next, of the nine divided areas in the
次に、受信側の携帯型電話機10では、有効表示エリア80bに表示されている目印81bを、1ボタンに対応する相対方向である左上方向に、現時点で選択されている相対移動量分だけ相対移動させる。なお、相対移動量については、上記と同様に、デフォルトの“1/2”であるため、分割エリアの縦方向と横方向のサイズの各1/2となっている。
Next, in the
次に、受信側の携帯型電話機10では、有効表示エリア80bに表示されている、目印81bを現在の状態で確定し、目印81bの表示態様を、確定されたことを示すため、実線で、かつ表示濃度が通常で表示する。
Next, in the
本実施形態の携帯型電話機10が、逐次送信モードではなく、確定情報送信モードに設定されている場合には、以上のように、目印情報の設定入力が確定された後、通信制御部13が通信部7を制御して、順次受信側の携帯型電話機10へ確定した目印情報を送信することで、受信側の携帯型電話機10において、送信側の携帯型電話機10と同様の位置に表示された目印を表示することができる。
When the
また、確定した状態を示すために、必要最小限の情報を送信するだけで済むので、逐次送信モードに設定されている場合と比較して、データ通信量の削減を図ることができる。 Further, since it is only necessary to transmit a minimum amount of information to indicate the determined state, it is possible to reduce the amount of data communication as compared with the case where the sequential transmission mode is set.
さらに、表示制御部12によって表示部4を制御し、1つの入力操作情報に対する受信側の携帯型電話機10における処理を、人間の目で確認できる数百ms程度の時間で処理して表示してもよい。これにより、目印情報を確定するまでの操作ステップを、受信側の携帯型電話機10でも確認することが可能になり、逐次送信モードと同様の効果が得られる。勿論、1つの入力操作情報に対する受信側の処理時間を極力早くして、すばやくポインティングすることを重視してもよい。
Further, the
なお、受信側の携帯型電話機10は、確定を示す入力操作情報を受信するまでは、受信した入力操作情報を受信側のRAM3のバッファに蓄積し、確定を示す入力操作情報を受信した時点で、RAM3のバッファ内の入力操作情報によるポインティング処理を、表示画面には表示せずに順次処理し、確定までの処理が済んでから、表示画面に目印を表示するようにしてもよい。
The receiving-side
これにより、受信側の携帯型電話機10は、確定するまでの余計な操作ステップを見たくない場合には、この表示を削除することもできる。
Thereby, the
ここでさらに、本実施形態の携帯型電話機10において、通信を行う携帯型電話機10同士の表示条件が異なる場合の処理について説明すれば以下のとおりである。
Here, the processing when the display conditions of the
すなわち、送信側および受信側の携帯型電話機10において、表示画面の解像度が異なる場合には、以下のような処理が行われる。
In other words, when the display screen resolution differs between the
例えば、送信側の携帯型電話機10の表示部20aの有効表示エリア21aは、図9に示すように、縦128×横120ピクセルであり、9個のエリア(縦3×横3)に分割されており、受信側の携帯型電話機10の表示部20bの有効表示エリア21bは、縦256×横240ピクセルであり、送信側の携帯型電話機10と同様に、9個のエリア(縦3×横3)に分割されているものとする。
For example, as shown in FIG. 9, the
画面に表示されている画像は、元の画像が縦128×横120ピクセルであれば、送信側の携帯型電話機10は、有効表示エリア21aのピクセル数と同じであるため、そのままのサイズで表示する。
If the original image is 128 pixels long by 120 pixels wide, the
一方、受信側の携帯型電話機10は、有効表示エリア21bのピクセル数と、縦方向および横方向とも2倍の差があるので、画像を縦方向および横方向とも2倍のサイズで表示する。
On the other hand, since the
このため、送信側および受信側の携帯型電話機10の表示画面の解像度が異なる場合でも、同じエリアを示すボタンの入力操作情報だけでポインティングできる。
For this reason, even when the display screens of the
すなわち、送信側の携帯型電話機10のダイヤルボタン22の3ボタンが入力されたら、送信側および受信側の携帯型電話機10においては、ともに右上のエリアに目印23a,23bがポインティングされる。
That is, when the three buttons of the
また、相対位置の指定も、分割エリアのサイズの“1/n”を基準にしていることから、同様に、方向ボタンの入力操作情報だけでポインティングできる。 Also, since the relative position is specified based on “1 / n” of the size of the divided area, similarly, pointing can be performed only with the input operation information of the direction button.
以上のように、本実施形態の携帯型電話機10では、送信側および受信側の携帯型電話機10の表示画面の解像度が異なる場合でも、表示制御部12が表示部4を制御し、受信した入力操作情報に基づいて表示することで、お互いの表示画面上における同じ位置へポインティングできる。
As described above, in the
なお、本実施形態では、入力部5は、電話機としての入力機能を前提としているが、例えば、本発明を通信機能を搭載したテレビに適用する場合には、1〜0(または12等)までの数字が記されたチャンネルボタン等の複数の入力ボタンを備えたリモコンを、入力部5として利用してもよい。
In the present embodiment, the
また、本実施形態では、通信部7は、携帯型電話機としての無線通信機能を備えていることを前提としているが、本発明はこれに限定されるものではない。例えば、有線式のアナログ電話回線やデジタル電話回線の通信機能や、有線または無線LAN、Bluetooth(登録商標)、UWB(Ultra Wide Band)等、音声やデータの通信が可能なものであれば、適用可能である。
In the present embodiment, it is assumed that the
また、本実施形態では、表示部4を9個の分割エリア(縦3×横3)としているが、例えば、12個の分割エリア(縦4×横3)としたり、4個の分割エリア(縦2×横2)としたりする等、有効表示エリアのサイズや、ボタンの配置とボタン数に応じて、適切な分割数を設定すればよい。
In the present embodiment, the
なお、本実施形態では、目印のサイズ変更および相対移動量の変更は、3ステップとして説明したが、本発明はこれに限定されるものではなく、2ステップ以上であれば何ステップでもよく、また、サイズ変更、相対移動量の変更が不要であれば変更できなくてもよい。 In the present embodiment, the mark size change and the relative movement amount change are described as three steps. However, the present invention is not limited to this, and any number of steps may be used as long as the number of steps is two or more. If there is no need to change the size or change the relative movement amount, the change may not be necessary.
また、本実施形態では、絶対位置指定モードであることを示すための表現方法として、線種を二重線でかつ表示濃度を薄く表示する例、相対位置指定モードであることを示すための表現方法として、線種を破線でかつ表示濃度を通常で表示する例、目印が確定されたことを示すための表現方法として、線種を実線でかつ表示濃度が通常で表示する例を挙げて説明したが、本発明はこれに限定されるものではない。例えば、目印の表示色を特定の色に変える等の方法を採用した場合でも、上記と同様の効果を得ることができる。 In this embodiment, as an expression method for indicating the absolute position designation mode, an example of displaying the line type as a double line and a light display density, an expression for indicating the relative position designation mode. An example of displaying the line type as a broken line and the display density as a normal method, and an example of displaying the line type as a solid line and a normal display density as an expression method for indicating that the mark has been confirmed However, the present invention is not limited to this. For example, even when a method of changing the display color of the mark to a specific color is adopted, the same effect as described above can be obtained.
本実施形態では、入力操作情報としてデジタルデータを生成した例を挙げて説明したが、本発明はこれに限定されるものではなく、PB信号(DTMF)や、音声データとして生成してもよい。 In the present embodiment, an example in which digital data is generated as input operation information has been described. However, the present invention is not limited to this, and may be generated as a PB signal (DTMF) or audio data.
さらに、この音声データは、音声合成により生成してもよいし、予め、各ボタンに対応した音声データをROM2に記憶しておき、これを読み出して利用してもよい。
Further, the voice data may be generated by voice synthesis, or voice data corresponding to each button may be stored in advance in the
〔本発明の前提となる実施形態2〕
本発明の情報通信端末および端末制御方法、端末制御プログラム並びにこれを記録した記録媒体に関して、前提となる他の実施形態について、図15〜図23に基づいて説明すれば、以下のとおりである。
[
With respect to the information communication terminal, the terminal control method, the terminal control program, and the recording medium on which the information communication terminal according to the present invention is described, another embodiment as a premise will be described with reference to FIGS.
なお、説明の便宜上、上記実施形態1にて説明した構成と同じ機能を有する構成については、同じ符号を付記し、その説明を省略する。さらに、本実施形態におけるフローチャートに基づく説明についても、実施形態1で説明した処理内容と基本的に同様であるため、実施形態1と重複する条件については、その説明を省略する。 For convenience of explanation, components having the same functions as those described in the first embodiment are denoted by the same reference numerals and description thereof is omitted. Further, the description based on the flowchart in the present embodiment is basically the same as the processing content described in the first embodiment, and therefore, the description of the conditions overlapping with those in the first embodiment is omitted.
本実施形態では、目印情報として、有効表示エリア上の座標情報、目印の状態(種類、形状、サイズ、線種、色等)を示す目印属性情報等を利用する。 In the present embodiment, coordinate information on the effective display area, mark attribute information indicating a mark state (type, shape, size, line type, color, etc.), and the like are used as the mark information.
つまり、本実施形態の携帯型電話機10では、図1に示す目印情報作成部11が、利用者からの入力に応じて、目印情報に関する座標情報と目印属性情報とを作成する点で、実施形態1とは異なっている。
That is, in the
また、表示制御部12は表示部4を制御して、該座標情報および目印属性情報に基づいて、表示部4の所望の位置に、利用者指定の表示態様で示される目印を表示させる。
Further, the
さらに、通信制御部13は、該座標情報と目印属性情報とを、受信側の携帯型電話機10へ送信することで、受信側の携帯型電話機10では、受信した座標情報と目印属性情報とに基づいて、送信側の携帯型電話機10の表示と同様の表示を行うことができる。
Furthermore, the
本実施形態において、送信側の携帯型電話機10による処理は、図15および図16に示すフローチャートに従って行われる。
In the present embodiment, the processing by the
すなわち、図15に示すように、S80では、ポインティング制御を開始するための設定を行う。 That is, as shown in FIG. 15, in S80, a setting for starting pointing control is performed.
具体的には、設定内容については、上記実施形態1で説明した図4に示すフローチャートにおけるものと同様である。 Specifically, the setting contents are the same as those in the flowchart shown in FIG. 4 described in the first embodiment.
本実施形態でも、実施形態1で説明した図2に示す携帯型電話機10と同様に、有効表示エリア4aは、9個の分割エリア(縦3×横3)とし構成し、分割エリアを指定するダイヤルボタン5aの対応は、1から9までの9個のボタン(縦3×横3)で対応し、目印情報の伝送形態は、デジタルデータ(文字等)とする。
Also in this embodiment, as in the
ポインティング操作に必要な情報については、図17(a)〜図17(d)に示す4つが、受信側の携帯型電話機10も認識しておく必要がある情報であり、必要に応じて受信側の携帯型電話機10に送信する。
Regarding the information necessary for the pointing operation, four pieces of information shown in FIGS. 17 (a) to 17 (d) are information that needs to be recognized by the
送信側の携帯型電話機10の有効表示エリア4aは、図17(a)に示すように、有効表示エリア4aの縦横のピクセル数(解像度)で定義される。
As shown in FIG. 17A, the
有効表示エリア4a上の座標情報のコマンドは、図17(b)に示すように、“コマンドコード=01”で識別され、X座標、Y座標で定義される。
The command of the coordinate information on the
目印属性情報のコマンドは、図17(c)に示すように、“コマンドコード=02”で識別され、種類と形状を識別するコード、目印情報のピクセルサイズで定義される。 The command of the mark attribute information is identified by “command code = 02” as shown in FIG. 17C, and is defined by a code for identifying the type and shape, and the pixel size of the mark information.
その他のコマンドは、図17(d)に示すように、“コマンドコード=03”で識別される“やり直し”と、“コマンドコード=04”で識別される“確定”とで定義される。 As shown in FIG. 17D, other commands are defined by “redo” identified by “command code = 03” and “confirmed” identified by “command code = 04”.
さらに、使用ボタンの機能は、図17(e)に示すように、ポインティング操作に使用するボタンと、各ボタンに割り当てられた機能とで定義される。 Further, the function of the use button is defined by a button used for pointing operation and a function assigned to each button, as shown in FIG.
目印情報は、図17(f)に示すように、ポインティング操作によりポインティングされる目印の種類と形状を識別するコード、そのコードに適用される目印、サイズの変化ステップで定義される。 As shown in FIG. 17F, the mark information is defined by a code for identifying the type and shape of the mark pointed by the pointing operation, a mark applied to the code, and a size change step.
相対移動量は、図17(g)に示すように、相対位置指定モードでの相対移動量の変化ステップで定義される。 As shown in FIG. 17G, the relative movement amount is defined by a change step of the relative movement amount in the relative position designation mode.
続いて、S81〜S84では、実施形態1のS2〜S5と同様の処理が行われる。 Subsequently, in S81 to S84, processing similar to S2 to S5 of the first embodiment is performed.
s84において、判定がYESの場合にはS85に進み、NOの場合にはS89に進む。 In s84, if the determination is YES, the process proceeds to S85, and if the determination is NO, the process proceeds to S89.
S85では、入力操作情報に基づいて、送信側の携帯型電話機10の有効表示エリア4aにおける座標情報を生成する。
In S85, coordinate information in the
具体的には、ダイヤルボタン5aに対応した有効表示エリア4aの絶対位置を示す座標を算出して、算出した座標を有効表示エリア4a上の座標情報とする。
Specifically, coordinates indicating the absolute position of the
本実施形態では、実施形態1と同様に、ダイヤルボタン5aの1から9までの9個のダイヤルボタンへの入力により、それぞれのダイヤルボタンに対応する有効表示エリア4aの絶対位置が指定される。よって、本実施形態では、指定された分割エリアの中心位置を示す座標を、座標情報としている。
In the present embodiment, as in the first embodiment, the absolute position of the
続いて、S86では、S85で生成された有効表示エリア4aにおける座標情報に基づいて、送信側の携帯型電話機10の有効表示エリア4aに目印を表示する。
Subsequently, in S86, a mark is displayed in the
具体的には、有効表示エリア4a上の座標情報で示される位置を中心として、現時点で選択されている種類・形状・サイズの表示態様を示す目印情報に基づいて、目印を表示する。
Specifically, the mark is displayed based on the mark information indicating the display mode of the currently selected type, shape, and size with the position indicated by the coordinate information on the
また、目印を表示する絶対位置の指定が終了し、次に相対位置指定モードであることを示すために、目印の表示態様は、線種が破線で、かつ表示濃度は通常という状態で表示される。 In addition, in order to indicate that the absolute position display for displaying the mark is completed and the relative position specifying mode is set next, the display mode of the mark is displayed in a state where the line type is a broken line and the display density is normal. The
S87では、入力操作情報を認識する毎に、入力操作情報を目印情報として受信側の携帯型電話機10に送信する「逐次送信モード」に設定されているか否かを判定する。
In S87, every time the input operation information is recognized, it is determined whether or not the “sequential transmission mode” in which the input operation information is transmitted as mark information to the
ここで、判定がYESの場合にはS88に進み、NOの場合には相対位置指定モードに移行するため、図16に示すフローチャートのS100に進む。 If the determination is YES, the process proceeds to S88. If the determination is NO, the process proceeds to S100 of the flowchart shown in FIG. 16 in order to shift to the relative position designation mode.
S88では、逐次送信モードに設定されているため、領域指定情報である目印情報として、有効表示エリア4a上の座標情報を、図17(b)で定義される有効表示エリア上の座標情報コマンドの形式で、通信部7により、受信側の携帯型電話機10に送信する。
In S88, since the sequential transmission mode is set, the coordinate information on the
続いて、相対位置指定モードに移行するため、図16に示すフローチャートのS100に進む。 Subsequently, in order to shift to the relative position designation mode, the process proceeds to S100 of the flowchart shown in FIG.
S89では、S83で生成された入力操作情報が、目印の種類変更を示すボタン入力であるか否かを判定する。 In S89, it is determined whether or not the input operation information generated in S83 is a button input indicating a change in the mark type.
ここで、判定がYESの場合にはS90に進み、NOの場合にはS93に進む。 If the determination is YES, the process proceeds to S90, and if the determination is NO, the process proceeds to S93.
S90では、目印の種類変更が入力されているため、入力操作情報に基づいて、送信側の携帯型電話機10の有効表示エリア4aに表示されている目印の種類を変更する。
In S90, since the change of the mark type is input, the type of the mark displayed in the
S91では、入力操作情報を認識する毎に、入力操作情報を目印情報として受信側の携帯型電話機10に送信する「逐次送信モード」に設定されているか否かを判定する。
In S91, each time the input operation information is recognized, it is determined whether or not the “sequential transmission mode” in which the input operation information is transmitted as mark information to the
ここで、判定がYESの場合にはS92に進み、NOの場合にはS82に戻る。 If the determination is YES, the process proceeds to S92. If the determination is NO, the process returns to S82.
S92では、逐次送信モードに設定されているため、目印態様情報である目印情報として、目印の種類・形状・サイズを示す情報を、図17(c)で定義される目印属性情報コマンドの形式で、通信部7により、受信側の携帯型電話機10に送信する。続いてS82に戻る。
In S92, since the sequential transmission mode is set, information indicating the type, shape, and size of the mark is used as the mark information that is the mark mode information in the mark attribute information command format defined in FIG. Then, the
S93では、S83で生成された入力操作情報が、目印の形状変更を示すボタン入力であるか否かを判定する。 In S93, it is determined whether or not the input operation information generated in S83 is a button input indicating a change in the shape of the mark.
ここで、判定がYESの場合にはS94に進み、NOの場合にはS95に進む。 If the determination is YES, the process proceeds to S94, and if the determination is NO, the process proceeds to S95.
S94では、目印の形状変更が入力されているため、入力操作情報に基づいて、送信側の携帯型電話機10の有効表示エリア4aに表示されている目印の形状を変更する。
In S94, since the mark shape change has been input, the mark shape displayed in the
続いて、S91に進む。S91以降の処理は前述のとおりである。 Then, it progresses to S91. The processing after S91 is as described above.
S95では、S83で生成された入力操作情報が、目印情報の確定を示すボタン入力であるか否かを判定する。 In S95, it is determined whether or not the input operation information generated in S83 is a button input indicating confirmation of landmark information.
ここで、判定がYESの場合には図16に示すフローチャートのS118に進み、NOの場合にはS82に戻る。 Here, if the determination is YES, the process proceeds to S118 of the flowchart shown in FIG. 16, and if the determination is NO, the process returns to S82.
S100〜S103における処理は、実施形態1の図5に示すフローチャートのS20〜S23と同様である。 The processing in S100 to S103 is the same as S20 to S23 in the flowchart shown in FIG.
S104では、入力操作情報に基づいて、送信側の携帯型電話機10の有効表示エリア4a上の座標情報を生成する。
In S104, coordinate information on the
具体的には、送信側の携帯型電話機10の有効表示エリア4aに表示されている目印を、指定された方向に、相対移動量に基づいて相対移動した位置を示す座標を算出して、算出した座標を有効表示エリア4a上の座標情報とする。
Specifically, a coordinate indicating a position where the mark displayed in the
S105では、S104で生成された有効表示エリア4a上の座標情報に基づいて、送信側の携帯型電話機10の有効表示エリア4aに表示されている目印を相対移動させる。
In S105, the mark displayed in the
S106では、「逐次送信モード」に設定されているか否かを判定する。 In S106, it is determined whether or not the “sequential transmission mode” is set.
ここで、判定がYESの場合にはS107に進み、NOの場合にはS101に戻る。 If the determination is YES, the process proceeds to S107, and if the determination is NO, the process returns to S101.
S107では、逐次送信モードに設定されているため、目印移動情報である目印情報として、有効表示エリア4a上の座標情報を、図17(b)で定義される有効表示エリア上の座標情報コマンドの形式で、通信部7により、受信側の携帯型電話機10に送信する。続いて、S101に戻る。
In S107, since the sequential transmission mode is set, the coordinate information on the
S108では、S102で生成された入力操作情報が、目印のサイズ変更を示すボタン入力であるか否かを判定する。 In S108, it is determined whether or not the input operation information generated in S102 is a button input indicating the size change of the mark.
ここで、判定がYESの場合にはS109に進み、NOの場合にはS112に進む。 If the determination is YES, the process proceeds to S109, and if the determination is NO, the process proceeds to S112.
S109では、目印のサイズ変更が入力されているため、入力操作情報に基づいて、送信側の携帯型電話機10の有効表示エリア4aに表示されている目印のサイズを変更する。
In S109, since the mark size change has been input, the size of the mark displayed in the
S110では、「逐次送信モード」に設定されているか否かを判定する。 In S110, it is determined whether or not the “sequential transmission mode” is set.
ここで、判定がYESの場合にはS111に進み、NOの場合にはS101に戻る。 If the determination is YES, the process proceeds to S111. If the determination is NO, the process returns to S101.
S111では、逐次送信モードに設定されているため、目印態様情報である目印情報として、目印の種類・形状・サイズを示す情報を、図17(c)で定義される目印属性情報コマンドの形式で、通信部7により、受信側の携帯型電話機10に送信する。続いて、S101に戻る。
In S111, since the sequential transmission mode is set, information indicating the type, shape, and size of the mark is used as the mark information that is the mark mode information in the mark attribute information command format defined in FIG. Then, the
S112では、S102で生成された入力操作情報が、相対移動量の変更を示すボタン入力であるか否かを判定する。 In S112, it is determined whether or not the input operation information generated in S102 is a button input indicating a change in the relative movement amount.
ここで、判定がYESの場合にはS113に進み、NOの場合にはS114に進む。 If the determination is YES, the process proceeds to S113, and if the determination is NO, the process proceeds to S114.
S113では、相対移動量の変更が入力されているため、入力操作情報に基づいて、相対移動量を変更する。続いて、S101に戻る。 In S113, since the change of the relative movement amount is input, the relative movement amount is changed based on the input operation information. Subsequently, the process returns to S101.
S114では、S102で生成された入力操作情報が、目印のポインティングを、最初から“やり直し”することを指示するボタン入力であるか否かを判定する。 In S <b> 114, it is determined whether or not the input operation information generated in S <b> 102 is a button input instructing to “redo” the mark pointing from the beginning.
ここで、判定がYESの場合にはS115に進み、NOの場合にはS117に進む。 If the determination is YES, the process proceeds to S115, and if the determination is NO, the process proceeds to S117.
S115では、やり直し指示が入力されているため、「逐次送信モード」に設定されているか否かを判定する。 In S115, since a redo instruction has been input, it is determined whether or not the “sequential transmission mode” is set.
ここで、判定がYESの場合にはS116に進み、NOの場合にはS81に戻る。 If the determination is YES, the process proceeds to S116, and if the determination is NO, the process returns to S81.
S116では、逐次送信モードに設定されているため、図17(d)で定義されるやり直しコマンドを、目印情報として、通信部7から受信側の携帯型電話機10に送信する。続いて、図15のS81に戻る。
In S116, since the sequential transmission mode is set, the redo command defined in FIG. 17D is transmitted from the
S117では、S102で生成された入力操作情報が、目印情報の確定を示すボタン入力であるか否かを判定する。 In S117, it is determined whether or not the input operation information generated in S102 is a button input indicating confirmation of landmark information.
ここで、判定がYESの場合にはS118に進み、NOの場合にはS101に戻る。 If the determination is YES, the process proceeds to S118. If the determination is NO, the process returns to S101.
S118では、目印情報の確定が入力されているため、入力操作情報に基づいて、送信側の携帯型電話機10の有効表示エリア4aに表示されている目印情報を現在の状態で確定する。
In S118, since the confirmation of the landmark information is input, the landmark information displayed in the
また、目印情報が確定したことを示すために、目印の表示態様を、例えば、線種を実線に変更して表示する。 Further, in order to indicate that the mark information has been confirmed, the display mode of the mark is displayed by changing the line type to a solid line, for example.
さらに、有効表示エリア4aに表示していた分割グリッド線も消去する。
Further, the divided grid lines displayed in the
S119では、「逐次送信モード」に設定されているか否かを判定する。 In S119, it is determined whether or not the “sequential transmission mode” is set.
ここで、判定がYESの場合にはS122に進み、NOの場合にはS120に進む。 If the determination is YES, the process proceeds to S122, and if the determination is NO, the process proceeds to S120.
S120では、逐次送信モードに設定されていないため、目印情報として、確定した有効表示エリア4a上の座標情報を、図17(b)で定義される有効表示エリア上の座標情報コマンドの形式で、通信部7から受信側の携帯型電話機10に送信する。続いて、S121に進む。
In S120, since the sequential transmission mode is not set, the coordinate information on the
S121では、目印情報として、確定した目印の種類・形状・サイズを示す情報を、図17(c)で定義される目印属性情報コマンドの形式で、通信部7により、受信側の携帯型電話機10に送信する。 In S121, as the mark information, information indicating the type, shape, and size of the determined mark is set in the mark attribute information command format defined in FIG. Send to.
S122では、目印情報として、図17(d)で定義される確定コマンドを、通信部7から受信側の携帯型電話機10に送信する。
In S122, a confirmation command defined in FIG. 17D is transmitted as mark information from the
以上で、送信側のポインティング処理を終了する。 This completes the pointing process on the transmission side.
本実施形態の携帯型電話機10では、以上のように、表示制御部12が表示部4を制御して、表示画面に表示された画像に対して、携帯型電話機10が有するダイヤルボタン5aを押下して入力された目印属性情報および座標情報に基づいて、容易に所望の位置に目印を表示することができる。
In the
また、表示画面にポインティングされた目印について、目印情報移動制御部14により、ダイヤルボタン5aを押下することで、目印属性情報および座標情報を変更して、容易に目印の表示態様および表示位置を変更することができる。
In addition, with respect to the mark pointed to the display screen, the mark information
一方、受信側の携帯型電話機10における処理は、図20に示すフローチャートに従って行われる。
On the other hand, processing in the
まず、S130では、ポインティング制御を開始するための設定を行う。 First, in S130, a setting for starting pointing control is performed.
具体的には、送信側の携帯型電話機10の有効表示エリア4aの解像度と自端末の有効表示エリア4aの解像度との差を吸収するための乗数の算出や、受信する目印情報のコマンド定義、目印情報として受信する各コマンドの伝送形態等、ポインティング操作に必要な設定を行う。
Specifically, calculation of a multiplier for absorbing the difference between the resolution of the
解像度の差を吸収するための乗数は、縦方向と横方向のそれぞれについて、以下の関係式(1)から算出して、受信した座標や目印情報との乗算を行う際に利用する。 The multiplier for absorbing the difference in resolution is calculated from the following relational expression (1) for each of the vertical direction and the horizontal direction, and used when multiplying the received coordinates and landmark information.
送信側ピクセル数/受信側ピクセル数=乗数・・・・・・(1)
なお、目印情報の伝送形態は、送信側の携帯型電話機10と同じく、デジタルデータ(文字等)とする。
Number of pixels on the transmitting side / number of pixels on the receiving side = multiplier (1)
Note that the transmission mode of the mark information is digital data (characters, etc.), similar to the
ポインティング操作に必要な情報は、上述した図17(a)〜図17(g)に示す各情報と同様である。 Information necessary for the pointing operation is the same as the information shown in FIGS. 17 (a) to 17 (g).
続いて、S131では、デフォルトの目印を表示する。 Subsequently, in S131, a default mark is displayed.
なお、デフォルトの目印情報に基づく目印は、図18(a)に示すように、矢印として示される表示態様であってもよい。 Note that the mark based on the default mark information may have a display form indicated by an arrow as shown in FIG.
S132では、通信部7により、目印情報の受信待ちを行い、目印情報を受信したら、S133に進む。
In S132, the
S133では、S132で受信した目印情報が、有効表示エリア上の座標情報コマンドであるか否かを判定する。 In S133, it is determined whether or not the landmark information received in S132 is a coordinate information command on the effective display area.
ここで、判定がYESの場合にはS138に進み、NOの場合にはS134に進む。 If the determination is YES, the process proceeds to S138, and if the determination is NO, the process proceeds to S134.
S138では、受信した目印情報が有効表示エリアにおける座標情報コマンドであるため、受信した座標情報コマンドに基づいて、受信側の携帯型電話機10の有効表示エリア4aに目印を表示する。
In S138, since the received mark information is a coordinate information command in the effective display area, the mark is displayed in the
具体的には、受信した有効表示エリア上の座標情報コマンドで示される送信側の携帯型電話機10のX座標であるPx、およびY座標であるPyのそれぞれに、上記S130において式(1)で算出した乗数を乗算して、受信側の携帯型電話機10の有効表示エリア4a上の座標を算出し、算出した位置を中心として、現時点で選択されている種類・形状・サイズの目印を表示する。
Specifically, each of Px, which is the X coordinate and Py, which is the Y coordinate of the
目印の種類が、1点(ピンポイント)を指し示す“矢印”や“十字”の場合には、指定された有効表示エリア4a上の座標を指し示すように目印を表示し、目印の種類が、ある範囲(エリア)を指し示す“○”や“□”の場合には、指定された有効表示エリア4a上の座標を中心位置として、分割エリアの縦または横のどちらか小さい方のサイズを輪郭サイズとして目印を表示する。
When the type of the mark is “arrow” or “cross” indicating one point (pinpoint), the mark is displayed so as to indicate the coordinates on the designated
また、座標指定中であることを示すために、目印の表示態様は、例えば、線種が破線で、かつ表示濃度は通常で表示する。なお、座標指定中であることを示すための表現方法は、その他の方法を用いてもよく、例えば、座標指定中であることを示すために、目印の表示色を特定の色にしてもよい。 In order to indicate that coordinates are being specified, the display mode of the mark is displayed, for example, with the line type being a broken line and the display density being normal. Note that other methods may be used as an expression method for indicating that coordinates are being specified. For example, a display color of a mark may be a specific color to indicate that coordinates are being specified. .
S134では、S132で受信した目印情報が、目印属性情報コマンドであるか否かを判定する。 In S134, it is determined whether or not the landmark information received in S132 is a landmark attribute information command.
ここで、判定がYESの場合にはS139に進み、NOの場合にはS135に進む。 If the determination is YES, the process proceeds to S139, and if the determination is NO, the process proceeds to S135.
S139では、受信した目印情報が目印属性情報コマンドであるため、目印属性情報に基づいて、有効表示エリア4aに表示されている目印の種類・形状・サイズを変更する。
In S139, since the received landmark information is a landmark attribute information command, the type, shape, and size of the landmark displayed in the
例えば、サイズについては、受信した目印属性情報コマンドで示される送信側のX方向サイズであるMx、及びY方向サイズであるMyのそれぞれに、上記S130において式(1)で算出した乗数を乗算して、受信側の携帯型電話機10におけるサイズを算出して、算出したサイズで目印を表示した後、S132に戻る。
For example, regarding the size, each of Mx which is the X-direction size on the transmission side and My which is the Y-direction size indicated by the received landmark attribute information command is multiplied by the multiplier calculated by Expression (1) in S130. After calculating the size of the
S135では、S132で受信した目印情報が、やり直しコマンドであるか否かを判定する。 In S135, it is determined whether or not the landmark information received in S132 is a redo command.
ここで、判定がYESの場合にはS131に戻り、NOの場合にはS136に進む。 Here, if the determination is YES, the process returns to S131, and if the determination is NO, the process proceeds to S136.
S136では、やり直しコマンドではないため、S132で受信した目印情報が、確定コマンドであるか否かを判定する。 In S136, since it is not a redo command, it is determined whether or not the landmark information received in S132 is a confirmation command.
ここで、判定がYESの場合にはS137に進み、NOの場合にはS132に戻る。 If the determination is YES, the process proceeds to S137, and if the determination is NO, the process returns to S132.
S137では、確定コマンドを受信しているため、確定コマンドに基づいて、受信側の携帯型電話機10の有効表示エリア4aに表示されている目印情報を現在の状態で確定する。
In S137, since the confirmation command is received, the mark information displayed in the
また、目印情報が確定したことを示すために、目印の表示態様を、例えば、線種を実線に変更して表示する。なお、確定したことを示すための表現方法は、その他の方法でもよく、例えば、確定したことを示すために、目印の表示色を特定の色にしてもよい。 Further, in order to indicate that the mark information has been confirmed, the display mode of the mark is displayed by changing the line type to a solid line, for example. It should be noted that the expression method for indicating that the mark has been confirmed may be other methods. For example, the mark may be displayed in a specific color in order to indicate that the mark has been confirmed.
以上で、受信側の携帯型電話機10におけるポインティング処理を終了する。
This completes the pointing process in the
本実施形態の携帯型電話機10では、以上のように、受信側の携帯型電話機10においても、表示制御部12が表示部4を制御して、受信した目印属性情報と座標情報に基づいて、送信側の携帯型電話機10において表示された状態と同様の表示を行うことができる。
In the
これにより、送受信を行う複数の携帯型電話機10において、互いに共通する画像に目印を付加した状態で表示画面上に表示することができるため、利用者は、その目印で指し示された対象物についての情報交換を、通話あるいは文字情報を通じて、行うことができる。
As a result, in the plurality of
次に、本実施形態の携帯型電話機10において、逐次送信モードに設定された場合の表示例について説明する。
Next, a display example when the
通信開始時点では、図18(a)に示すように、送信側の携帯型電話機10、および受信側の携帯型電話機10には、共有している画像情報に基づいて、“カメラの画像”が表示されている。
At the start of communication, as shown in FIG. 18 (a), the transmitting-side
ここで、送信側の携帯型電話機10には、有効表示エリア120aの分割エリアを示すための分割グリッド線122aと、デフォルトの目印121aが表示されている。
Here, the
なお、デフォルトの目印121aは、識別コード“種類=1、形状=1”で定義される矢印であり、絶対位置指定モードであることを示すために、目印121aの表示態様は、二重線で、かつ表示濃度が薄く表示されている。また、受信側の携帯型電話機10の有効表示エリア120bには、デフォルトの目印121bが、座標指定前状態を示すため、送信側の携帯型電話機10と同じ表示態様で表示されている。
The
次に、絶対位置指定モードで、目印の形状が変更された場合には、図18(b)に示すように、十字の目印に変更される。 Next, when the shape of the mark is changed in the absolute position designation mode, the mark is changed to a cross mark as shown in FIG.
すなわち、送信側の携帯型電話機10において、ダイヤルボタン5aの0ボタンが入力されると、図18(b)に示すように、送信側の携帯型電話機10の有効表示エリア120aに表示されている目印121aの形状が、“形状=1”で定義される矢印から、“形状=2”で定義される十字に変更される。さらに、送信側の携帯型電話機10は、目印情報として、目印属性情報コマンドを送信する。
That is, when the 0 button of the
受信側の携帯型電話機10は、受信した目印属性情報コマンドに基づいて、受信側の有効表示エリア120bに表示されている目印121bの形状を、“形状=1”で定義される矢印から“形状=2”で定義される十字に変更する。
Based on the received mark attribute information command, the
なお、目印121bの表示態様は、座標指定前であることを示すため、二重線で、かつ表示濃度が薄く表示されている。
Note that the display mode of the
次に、絶対位置指定モードで、絶対位置が指定された場合には、図18(c)に示すように、目印が利用者指定の領域に表示される。 Next, when the absolute position is designated in the absolute position designation mode, a mark is displayed in the user designated area as shown in FIG.
すなわち、送信側の携帯型電話機10において、ダイヤルボタン5aの1ボタンが入力されると、図18(c)に示すように、送信側の携帯型電話機10の有効表示エリア120aにおける9つの分割エリアのうち、1ボタンに対応する絶対位置である左上の分割エリアに、現時点で選択されている種類・形状・サイズの目印121aが表示される。さらに、送信側の携帯型電話機10は、目印情報として、有効表示エリア上の座標情報コマンドを送信する。
That is, when one button of the
受信側の携帯型電話機10は、受信した有効表示エリア上の座標情報コマンドに基づいて、受信側の携帯型電話機10の有効表示エリア120bにおける現時点で選択されている種類・形状・サイズの目印121bを表示する。なお、目印121bの表示態様は、座標指定中あることを示すため、破線で、かつ表示濃度が通常という状態で表示されている。
Based on the received coordinate information command on the effective display area, the
次に、目印のポインティングを、最初から“やり直し”することを指示された場合には、図18(d)に示すように、目印が矢印に戻る。 Next, when it is instructed to “redo” the pointing of the mark from the beginning, the mark returns to the arrow as shown in FIG.
すなわち、送信側の携帯型電話機10において、ダイヤルボタン5aの5ボタンが入力されると、図18(d)において、送信側の携帯型電話機10は、絶対位置指定モードの開始状態に戻る。さらに、送信側は目印情報として、やり直しコマンドを送信する。
That is, when 5 buttons of the
受信側の携帯型電話機10は、受信したやり直しコマンドに基づいて、座標指定前状態に戻る。
The
次に、再度、絶対位置指定モードで、絶対位置が指定された場合には、図19(a)に示すように、目印が利用者指定の領域に表示される。 Next, when an absolute position is designated again in the absolute position designation mode, a mark is displayed in the user designated area as shown in FIG.
すなわち、送信側の携帯型電話機10において、ダイヤルボタン5aの1ボタンが入力されると、図19(a)に示すように、送信側の携帯型電話機10の有効表示エリア120aにおける9つの分割エリアのうち、1ボタンに対応する絶対位置である左上の分割エリアに、現時点で選択されている種類・形状・サイズの目印121aが表示される。さらに、送信側の携帯型電話機10は、目印情報として、有効表示エリア上の座標情報コマンドを送信する。
That is, when one button of the
受信側の携帯型電話機10は、受信した有効表示エリア上の座標情報コマンドに基づいて、受信側の携帯型電話機10の有効表示エリア120b上に、現時点で選択されている種類・形状・サイズの目印121bを表示する。
Based on the received coordinate information command on the effective display area, the
次に、相対位置指定モードで、目印のサイズが変更された場合には、図19(b)に示すように、目印の大きさが変更される。 Next, when the size of the mark is changed in the relative position designation mode, the size of the mark is changed as shown in FIG.
すなわち、送信側の携帯型電話機10において、ダイヤルボタン5aの0ボタンが入力されると、図19(b)に示すように、送信側の携帯型電話機10の有効表示エリア120aに表示されている目印121aのサイズが、デフォルトの“中”から“小”に変更される。さらに、送信側の携帯型電話機10は、目印情報として、目印属性情報コマンドを送信する。
That is, when the 0 button of the
受信側の携帯型電話機10は、受信した目印属性情報コマンドに基づいて、受信側の有効表示エリア120bに表示されている目印121bのサイズを変更する。
The
次に、相対位置指定モードへ以降した後、相対位置が指定された場合には、図19(c)に示すように、目印の表示位置が微調整される。 Next, if the relative position is designated after the relative position designation mode, the mark display position is finely adjusted as shown in FIG.
すなわち、送信側の携帯型電話機10において、ダイヤルボタン5aの8ボタンが入力されると、図19(c)に示すように、送信側の携帯型電話機10の有効表示エリア120aに表示されている目印121aは、8ボタンに対応する相対方向である下方向に、現時点で選択されている相対移動量分だけ相対移動される。なお、相対移動量は、デフォルトの“1/2”であるため、分割エリアの縦方向のサイズの1/2となっている。さらに、送信側の携帯型電話機10は、目印情報として、有効表示エリア上の座標情報コマンドを送信する。
That is, when 8 buttons of the
受信側の携帯型電話機10は、受信した有効表示エリア上の座標情報コマンドに基づいて、受信側の携帯型電話機10の有効表示エリア120bにおいて、現時点で選択されている種類・形状・サイズの目印121bを表示する。
Based on the received coordinate information command on the effective display area, the
次に、目印情報が確定された場合には、図19(d)に示すように、グリッド線が消去されて、目印情報が確定される。 Next, when the landmark information is confirmed, the grid lines are erased and the landmark information is confirmed as shown in FIG.
すなわち、送信側の携帯型電話機10において、ダイヤルボタン5aの#ボタンが入力されると、図19(d)に示すように、送信側の携帯型電話機10の有効表示エリア120aに表示されている目印121aが、現在の状態で確定される。なお、ここでは、目印121aの表示態様が、確定されたことを示すため、実線で、かつ表示濃度が通常で表示される。さらに、送信側の携帯型電話機10は、目印情報として、確定コマンドを送信する。
That is, when the # button of the
受信側の携帯型電話機10は、受信した確定コマンドに基づいて、受信側の有効表示エリア120bに表示されている目印121bを現在の状態で確定する。
The
このように、本実施形態において逐次送信モードに設定した場合でも、目印情報として、目印属性情報と座標情報とに基づいて、表示制御部12が表示部4を制御することで、上述した実施形態1と同様の効果を得ることができる。
As described above, even when the sequential transmission mode is set in the present embodiment, the
一方、本実施形態の携帯型電話機10において、逐次送信モードではなく、確定情報送信モードに設定されている場合の表示例について説明する。
On the other hand, a display example when the
2台の携帯型電話機10が、“カメラの画像”を共有してお互いの画面に表示し、1台の携帯型電話機10からのポインティング操作により、お互いの画面に目印を重畳表示した場合には、図21(a)〜図21(d)および図22(a)〜図22(c)に示すような表示がなされる。
When two
すなわち、絶対位置指定モードを開始した時点では、図21(a)に示すように、送信側の携帯型電話機10の有効表示エリア130a、および受信側の携帯型電話機10の有効表示エリア130bには、共有している“カメラの画像”が表示されている。
That is, when the absolute position designation mode is started, as shown in FIG. 21A, the
ここで、送信側の携帯型電話機10の有効表示エリア130aには、有効表示エリア130aの分割エリアを示すための、分割グリッド線132aと、デフォルトの目印131aとが表示されている。
Here, in the
また、受信側の携帯型電話機10の有効表示エリア130bには、デフォルトの目印131bが、送信側の携帯型電話機10と同じ表示態様で表示されている。
Further, in the
次に、目印の種類が変更された場合には、図21(b)に示すように、目印の表示態様が矢印から○へ変更する。 Next, when the type of the mark is changed, the mark display mode is changed from an arrow to a circle as shown in FIG.
すなわち、送信側の携帯型電話機10において、ダイヤルボタン5aの*ボタンが入力されると、図21(b)に示すように、送信側の携帯型電話機10の有効表示エリア130aに表示されている目印131aの種類が、1点(ピンポイント)を指し示す“種類=1”のグループから、ある範囲(エリア)を指し示す“種類=2”のグループの“形状=1”で定義される○に変更される。
That is, when the * button of the
次に、絶対位置指定モードで、目印の形状が変更された場合には、図21(c)に示すように、目印が○から□に変更される。 Next, when the shape of the mark is changed in the absolute position designation mode, the mark is changed from ○ to □ as shown in FIG.
すなわち、送信側の携帯型電話機10において、ダイヤルボタン5aの0ボタンが入力されると、図21(c)に示すように、送信側の携帯型電話機10の有効表示エリア130aに表示されている目印131aの形状が、“形状=1”で定義される○から、“形状=2”で定義される□に変更される。なお、目印131aの表示態様は、絶対位置指定モードであることを示すため、二重線で、かつ表示濃度が薄く表示されている。
That is, when the 0 button of the
次に、目印を表示する絶対位置が指定された場合には、図21(d)に示すように、目印が利用者指定の領域に表示される。 Next, when the absolute position for displaying the mark is designated, the mark is displayed in the user designated area as shown in FIG.
すなわち、送信側の携帯型電話機10において、ダイヤルボタン5aの1ボタンが入力されると、図21(d)に示すように、送信側の携帯型電話機10の有効表示エリア130aにおける9つの分割エリアのうち、1ボタンに対応する絶対位置である左上の分割エリアに、現時点で選択されている種類・形状・サイズの目印131aが表示される。
That is, when one button of the
次に、目印の相対位置が指定された場合には、図22(a)に示すように、目印の表示位置が微調整される。 Next, when the relative position of the mark is designated, the display position of the mark is finely adjusted as shown in FIG.
すなわち、送信側の携帯型電話機10において、ダイヤルボタン5aの8ボタンが入力されると、図22(a)に示すように、送信側の携帯型電話機10の有効表示エリア130aに表示されている目印131aは、8ボタンに対応する相対方向である下方向に、現時点で選択されている相対移動量分だけ相対移動する。
That is, when 8 buttons of the
次に、相対位置指定モードで、目印のサイズが変更された場合には、図22(b)に示すように、目印の大きさが変更される。 Next, when the size of the mark is changed in the relative position designation mode, the size of the mark is changed as shown in FIG.
すなわち、送信側の携帯型電話機10において、ダイヤルボタン5aの0ボタンが入力されると、図22(b)に示すように、送信側の携帯型電話機10の有効表示エリア130aに表示されている目印131aのサイズが、デフォルトの“中”から“小”に変更される。
That is, when the 0 button of the
次に、目印情報が確定された場合には、図22(c)に示すように、グリッド線が消去されて、目印情報が確定される。 Next, when the landmark information is confirmed, the grid lines are deleted and the landmark information is confirmed as shown in FIG.
すなわち、送信側の携帯型電話機10において、ダイヤルボタン5aの#ボタンが入力されると、図22(c)に示すように、送信側の携帯型電話機10の有効表示エリア130aに表示されている目印131aが、現在の状態で確定される。なお、ここでは、目印131aの表示態様が確定されたことを示すため、実線で、かつ表示濃度が通常で表示される。
That is, when the # button of the
ここで、目印情報が確定したため、送信側の携帯型電話機10は、目印情報として、有効表示エリア上の座標情報コマンド、目印属性情報コマンド、確定コマンドを順次送信する。
Here, since the mark information has been confirmed, the
受信側の携帯型電話機10は、受信した目印情報に基づいてポインティング処理を行う。
The
具体的には、受信側の携帯型電話機10は、有効表示エリア上の座標情報コマンドに基づいた有効表示エリア120b上の位置に、目印属性情報コマンドに基づいた種類・形状・サイズの目印121bを、確定コマンドに基づいて、実線で、かつ表示濃度が通常という表示態様で表示する。
Specifically, the
このように、本実施形態において確定情報送信モードに設定した場合でも、目印情報として、目印属性情報と座標情報とに基づいて、表示制御部12が表示部4を制御することで、上述した実施形態1と同様の効果を得ることができる。
As described above, even when the fixed information transmission mode is set in the present embodiment, the
さらに、図23に示すように、送信側の携帯型電話機10と受信側の携帯型電話機10とで解像度が異なる場合の処理について説明する。
Furthermore, as shown in FIG. 23, processing when the resolution is different between the
この場合、必要であれば、予め送信側の有効表示エリアの解像度を示す情報である縦方向と横方向とのそれぞれのピクセル数(120×128)を、受信側の携帯型電話機10に送信する。
In this case, if necessary, the number of pixels (120 × 128) in the vertical and horizontal directions, which is information indicating the resolution of the effective display area on the transmission side, is transmitted to the
一方、受信側の携帯型電話機10では、上述した図20のフローチャートに示すS130の関係式(1)に基づいて、解像度の差を吸収するための乗数を算出し、目印情報として受信する有効表示エリア上の座標や、目印のサイズに、算出した乗数を乗算して、解像度の差を吸収すればよい。
On the other hand, the
このため、送信側の携帯型電話機10と受信側の携帯型電話機10とで、表示画面の解像度が異なる場合でも、送信側の携帯型電話機10の有効表示エリアにおける座標や、目印のサイズを利用して、受信側の携帯型電話機10の画像の同じ位置をポインティングできる。
Therefore, even when the display-side
すなわち、送信側の携帯型電話機10のダイヤルボタン22の3ボタンが入力されると、送信側および受信側の携帯型電話機10では、ともに右上のエリアに目印23a,23bがポインティングされる。
That is, when three buttons of the
また、相対位置の指定も、送信側の携帯型電話機10の有効表示エリアにおける座標を基準に、受信側の携帯型電話機10で解像度の差を吸収するための乗数を乗算して、解像度の差を吸収するので、やはり、送信側の携帯型電話機10の有効表示エリアにおける相対位置指定後の座標情報でポインティングできる。
The relative position is also specified by multiplying a multiplier for absorbing the difference in resolution by the
以上のように、本実施形態の携帯型電話機10では、送信側と受信側とで表示画面の解像度が異なる場合でも、送信側の携帯型電話機10における解像度での有効表示エリアにおける座標情報を受信することで、受信側の携帯型電話機10においても、表示制御部12が表示部4を制御して、画面上の同じ位置へポインティングできる。
As described above, in the
なお、以上の例では、情報通信端末として携帯電話機10を用いているが、これに限定されるものではない。すなわち、送信側と受信側とで表示画面の解像度が異なる場合に画面上の同じ位置にポインティングする技術は、情報通信端末が携帯電話機10でない場合にも有効である。例えば、情報通信端末として、通信機能を搭載したテレビジョン受像機(以降、単にテレビと称する)であってもよい。
In the above example, the
テレビは、その表示画面の形状に応じて、画面の横方向と縦方向の比率が4:3となるスタンダードテレビと、比率が16:9となるワイドテレビとに分類される。すなわち、送信側のテレビと受信側のテレビとで、表示画面の縦横比率が異なっている場合も考えられる。 Televisions are classified according to the shape of the display screen into standard televisions with a ratio of 4: 3 in the horizontal and vertical directions of the screen and wide televisions with a ratio of 16: 9. In other words, there may be a case where the aspect ratio of the display screen is different between the transmission-side television and the reception-side television.
これに対して、上記実施形態2で示した技術を適用することにより、スタンダードテレビでの表示画面とワイドテレビでの表示画面とで画面上の同じ位置にポインティングすることが可能となる。また、通信機能を搭載したテレビと携帯電話機10とが通信するような場合でも、上記した実施形態2で示した技術を適用することにより、テレビの大きな表示画面と携帯電話機10の小さな表示画面とで画面上の同じ位置にポインティングすることができる。
On the other hand, by applying the technique shown in the second embodiment, the display screen on the standard television and the display screen on the wide television can be pointed at the same position on the screen. In addition, even when a TV equipped with a communication function and the
また、受信側の携帯型電話機10で解像度の差を吸収するための乗数を乗算して、解像度の差を吸収しているため、例えば通信機能を搭載したテレビの親画面で表示していた情報を子画面で表示し直したような場合にも、親画面で表示していた目印と同じ位置に、子画面でも目印を表示することができる。
In addition, since the
〔実施形態3〕
本発明の情報通信端末および端末制御方法、端末制御プログラム並びにこれを記録した記録媒体に関する実施形態について、以下に説明する。
[Embodiment 3]
Embodiments relating to an information communication terminal, a terminal control method, a terminal control program, and a recording medium recording the same according to the present invention will be described below.
なお、説明の便宜上、上記実施形態1・2にて説明した構成と同じ機能を有する構成については、同じ符号を付記し、その説明を省略する。さらに、本実施形態におけるフローチャートに基づく説明についても、実施形態1で説明した処理内容と基本的に同様であるため、実施形態1・2と重複する条件については、その説明を省略する。 For convenience of explanation, components having the same functions as those described in the first and second embodiments are denoted by the same reference numerals and description thereof is omitted. Furthermore, the description based on the flowchart in the present embodiment is basically the same as the processing content described in the first embodiment, and therefore, the description of the conditions overlapping those in the first and second embodiments is omitted.
本実施形態では、情報通信端末として通信機能を搭載した多機能テレビ10Tを想定する。図24は、本実施形態に係る多機能テレビ10Tの概略構成を示すブロック図である。同図に示すように、多機能テレビ10Tは、制御部1、ROM2、RAM3、表示部4、入力部5、音声処理部6、通信部7、テレビ放送受信部201、およびカメラ202を備えている。なお、制御部1、ROM2、RAM3、表示部4、入力部5、音声処理部6、および通信部7には、実施形態1において説明したものと同様であるので、ここではその説明を省略する。
In the present embodiment, a
テレビ放送受信部201は、図示しないテレビアンテナによって受信されたテレビ放送信号としてのRF信号を受信するチューナである。テレビ放送としては、地上波アナログ放送、地上波デジタル放送、アナログ衛星放送、デジタル衛星放送などが挙げられる。また、ケーブルテレビから放送信号を受信する形態であってもよい。
The TV
カメラ202は、当該多機能テレビ10Tをテレビ電話として用いる際に、多機能テレビ10Tの利用者側を撮影するための撮影手段である。このカメラ202は、例えばCCDカメラなどによって実現される。
The
なお、通信部7は、実施形態1においては、アンテナ7aを介して通信を行うようになっているが、本実施形態においては、有線接続により通信を行うようになっていてもよい。有線接続としては、例えばISDN(integrated services digital network)通信網、ADSL(asymmetric digital subscriber line)通信網、光ファイバー通信網などが挙げられる。また、入力部5は、本実施形態においては、赤外線などの無線で指示入力が行われるリモコンとして実装されている。
In the first embodiment, the
また、制御部1は、目印情報作成部11、表示制御部12、通信制御部13、目印情報移動制御部14、チャンネル設定部(チャンネル設定手段)203、ネットワークコンテンツ受信部(ネットワークコンテンツ受信手段)204、画像情報保持部205、および画像情報蓄積部206を機能ブロックとして形成している。なお、目印情報作成部11、表示制御部12、通信制御部13、および目印情報移動制御部14実施形態1において説明したものと同様であるので、ここではその説明を省略する。
In addition, the
チャンネル設定部203は、テレビ放送受信部201において受信すべきテレビ放送のチャンネルを設定するものである。ネットワークコンテンツ受信部204は、ネットワークから通信部7を介して、ネットワーク上のコンテンツを取得する処理を行うものである。ネットワーク上のコンテンツとしては、例えば画像データなどを含むWebページのデータ、動画データ、音声データなどが挙げられるが、特に限定されるものではない。
The
画像情報保持部205は、例えば通信先の多機能テレビ10Tから、共有すべきコンテンツ、例えば動画データなどのネットワークアドレスについての情報を受信した際に、その情報を記憶するものである。画像情報蓄積部206は、共有すべきコンテンツ、例えば動画データ自体を蓄積、記憶するものである。なお、画像情報保持部205は、例えばRAMなどの一時記憶手段によって構成され、画像情報蓄積部206は、例えばハードディスクドライブなどの不揮発性記憶手段によって構成されるようになっていてもよいが、特にこれらに限定されるものではない。
The image
図25(a)は、多機能テレビ10Tの外観を示している。同図に示すように、多機能テレビ10Tは、基本的には通常のテレビと同様の外観となっており、テレビ画面表示手段としての表示部4が前面に設けられている。そして、テレビ電話機能を利用する際に用いられる送話部6bは、マイクとして多機能テレビ10Tの上部に設けられている。
FIG. 25A shows the appearance of the
また、テレビ電話機能を利用する際に用いられる受話部6aは、スピーカとして多機能テレビ10Tの前面に設けられている。なお、受話部6aとしてのスピーカは、多機能テレビ10Tから出力される種々の音声、例えば、テレビ放送を受信している際のテレビ音声などが出力されるようになっている。
The
また、テレビ電話機能を利用する際に用いられるカメラ202は、多機能テレビ10Tの上部に設けられている。なお、図25(a)に示す構成は、あくまで一例であり、送話部6b、受話部6a、およびカメラ202などの配置位置はこれに限定されるものではない。
The
図25(b)は、多機能テレビ10Tのリモコンとしての入力部5の外観を示している。同図に示すように、入力部5には、表示内容切り替えボタン211、コンテンツ共有ボタン212、目印移動ボタン213、発話ボタン214、終話ボタン215、キャンセルボタン216、数字入力ボタン217、動画再生制御ボタン218、および目印決定ボタン219が設けられている。
FIG. 25B shows the appearance of the
表示内容切り替えボタン211は、表示部4に表示させる信号の入力を切り替えるボタンである。例えば、表示内容切り替えボタン211が押される毎に、表示部4に表示させる信号が、テレビ放送信号、テレビ電話信号、ビデオ信号などに切り替えられることになる。
The display
コンテンツ共有ボタン212は、テレビ電話機能を利用している際に、通話先の端末装置との間で、何らかの情報(コンテンツ)を共有を開始する、あるいは共有を終了することを指示する際に用いられるボタンである。コンテンツとしては、例えば、テレビ番組、Webページ、ネットワーク上の動画データ、送信側あるいは受信側の情報通信端末に記憶されている動画データなどが挙げられる。
The
発話ボタン214は、テレビ電話機能が利用されている際に、通話開始の指示入力を行うためのボタンである。また、終話ボタン215は、テレビ電話機能が利用されている際に、通話終了の指示入力を行うためのボタンである。また、キャンセルボタン216は、何らかの操作に対するキャンセル指示を行うためのボタンである。
The
数字入力ボタン217は、何らかの数字入力が行われる際に用いられるボタンである。例えば、テレビの視聴が行われている際には、数字入力ボタン217はチャンネル選択ボタンとして用いられる一方、テレビ電話機能が利用されている際には、数字入力ボタン217は電話番号入力ボタンとして用いられる。
The
動画再生制御ボタン218は、動画データの再生を行う際に、動画データの再生・一時停止、停止、巻き戻し、早送りなどの再生制御を行うためのボタンである。この動画再生制御ボタン218によって制御される動画データとしては、例えば画像情報蓄積部206に記憶されている動画データなどが挙げられる。
The moving image
目印移動ボタン213は、表示部4に表示される目印を移動させる際に用いられるボタンであり、図25(b)ではドーナツ形状のボタンとして表現している。この目印移動ボタン213は、上下左右斜めなどの全方向に対して傾けることが可能となっており、目印移動ボタン213が傾いた方向に目印が移動するようになっている。また、目印決定ボタン219は目印の位置を決めるために用いられる。
The
なお、前記した実施形態におけるダイヤルボタン5aと同様に、目印の移動は、数字入力ボタン217における1〜9のボタンを用いて行うことが可能であるが、目印移動ボタン213によっても目印を移動させることが可能となっている。なお、目印移動ボタン213によって目印を移動させることのメリットとしては、詳細は後述するが、動画を表示している際に、ポインティングしたい対象物の移動に伴って目印を徐々に移動させる、というようなポインティング動作に好適である点である。
As with the
なお、本実施形態では、上記のように、情報通信端末として多機能テレビ10Tを用いる例を挙げているが、情報通信端末としてはこれに限定されるものではなく、例えば同等の機能を有する携帯型通信端末(携帯電話機などを含む)などであっても構わない。
In the present embodiment, as described above, an example in which the
(ポインティング操作例)
前記した実施形態1および2では、携帯電話機10の比較的小さい表示画面におけるポインティングを想定していた。これに対して、本実施形態のように、比較的大きい表示画面を有する多機能テレビ10Tを用いる場合、ポインティング処理をより工夫する必要が生じる。すなわち、絶対位置モードを用いて目印を指定する場合に、図2に示したような9個の分割エリアのうち、1つの分割エリアを指定するだけでは、分割エリアの領域が大きいため、対象物を的確に指し示すことはできない。また、対象物をより的確に指し示すために、相対位置モードを用いて目印を移動させる場合においても、表示画面が大きいため、目印の移動のためにダイヤルボタン5aの操作を何度もしなければならない。
(Pointing operation example)
In the first and second embodiments described above, pointing on a relatively small display screen of the
このような問題を解決するために、本実施形態では、以下に示すように、2段階に分けて絶対位置指定を行うようになっている。図26(a)〜図26(c)は、本実施形態におけるポインティング処理を説明する表示画面図である。 In order to solve such a problem, in the present embodiment, as shown below, absolute position designation is performed in two stages. FIG. 26A to FIG. 26C are display screen diagrams for explaining the pointing processing in the present embodiment.
まず、通信開始時点では、図26(a)に示すように、送信側の多機能テレビ10Tの有効表示エリア4Taには、受信側の情報通信端末と共有している画像情報が表示されている。また、有効表示エリア4Taには、該有効表示エリア4Taを9個の分割エリア(縦3×横3)に分割する分割グリッド線が表示されている。
First, at the start of communication, as shown in FIG. 26 (a), image information shared with the information communication terminal on the reception side is displayed in the effective display area 4Ta of the
絶対位置モードにおいて絶対位置が指定されると、図26(b)に示すように、入力された数字入力ボタン217に対応する表示画面の分割エリアに目印221aが表示される。すなわち、多機能テレビ10Tにおいて、数字入力ボタン217の“1”のボタンが入力されると、図26(b)に示すように、有効表示エリア4Taに示された9つの分割エリアのうち、“1”のボタンに対応する絶対位置である左上の分割エリアに目印221aが表示される。この目印221aの形状としては、例えば選択された分割エリアに内接する円形状とすればよいが、形状は特に限定されるものではない。
When the absolute position is designated in the absolute position mode, a
その後さらに、1回目に絶対位置指定された分割エリアが、さらに複数の小分割エリアに分割される。すなわち、1回目に絶対位置指定された分割エリアには、該分割エリアを9個の小分割エリア(縦3×横3)に分割する分割グリッド線が表示される。 Thereafter, the divided area whose absolute position is designated for the first time is further divided into a plurality of small divided areas. That is, in the divided area designated for the absolute position for the first time, a divided grid line for dividing the divided area into nine small divided areas (vertical 3 × horizontal 3) is displayed.
図26(b)の状態で、さらに、多機能テレビ10Tにおいて、数字入力ボタン217の“9”のボタンが入力されると、図26(c)に示すように、左上の分割エリアに示された9つの小分割エリアのうち、“9”のボタンに対応する絶対位置である右下の小分割エリアに目印221bが表示される。この目印221bの形状としては、例えば選択された小分割エリアに内接する円形状とすればよいが、形状は特に限定されるものではない。
In the state of FIG. 26B, when the “9” button of the
これにより、ダイヤルボタン5aに対して2回入力動作が行われることによって、表示画面を81個に分割した小分割エリアの1つを特定することが可能となる。
As a result, when the input operation is performed twice on the
なお、図26(c)に示す状態から、小分割エリアをさらに9つに分割して、そのうちの1つが絶対位置で指定・選択できるようにしてもよい。すなわち、絶対位置指定を複数回繰り返すことによって、表示画面上の比較的小さい位置に対しても的確にポインティング処理をすることが可能となる。以上のようにして設定された目印情報は、前記した逐次送信モードまたは確定情報送信モードにて、受信側の多機能テレビ10Tに送信される。
Note that, from the state shown in FIG. 26C, the subdivision area may be further divided into nine so that one of them can be designated and selected at an absolute position. That is, by repeating the absolute position specification a plurality of times, it is possible to accurately perform pointing processing even for a relatively small position on the display screen. The mark information set as described above is transmitted to the
なお、分割エリア、および、小分割エリアのうちの1つを選択する処理に関しては、数字入力ボタン217における1〜9のボタンを使用する方法に限定されるものではなく、種々の方法が考えられる。例えば、入力部5に選択切り替えボタンを設けておき、この選択切り替えボタンを押す毎に目印221aまたは目印221bが順次分割エリア(小分割エリア)を移動するようにしておき、所望の分割エリア(小分割エリア)に移動した後に目印決定ボタン219が押されることによって位置が決定されるようにしてもよい。また、入力部5に4方向移動ボタンを設けておき、この4方向移動ボタンを用いることによって所望の分割エリア(小分割エリア)に目印221aまたは目印221bを移動させ、目印決定ボタン219が押されることによって位置が決定されるようにしてもよい。
The process for selecting one of the divided area and the small divided area is not limited to the method using the
また、目印移動ボタン213を用いて所望の分割エリア(小分割エリア)に目印221aまたは目印221bを移動させ、目印決定ボタン219が押されることによって位置が決定されるようにしてもよい。また、キャンセルボタン216を用いることによって、一旦決定した分割エリア(小分割エリア)をキャンセルし、指定をし直すことが可能となっていてもよい。すなわち、分割エリア内の小分割エリアの1つを指定し直したり、小分割エリアの指定を中止し、指定対象を親にあたる分割エリアにしたり、分割エリアおよび小分割エリアの指定を中止する、などの処理が可能となっていてもよい。
Further, the position may be determined by moving the
(テレビ番組の共有)
次に、本実施形態において、送信側および受信側の両方の情報通信端末が多機能テレビ10Tであり、送信側および受信側で共有される画像が、テレビ放送の画像である実施例を示す。この実施例では、送信側と受信側とで同じテレビ番組を表示した状態で、ポインティング動作を行いながらテレビ電話によって会話をするというような利用形態が想定される。このような利用形態によれば、例えば、図27に示すように、あるテレビ番組に出演している歌手グループのうち、あるメンバーに対して目印221をつけて相手に指し示し、「このメンバーが一番好き」といった会話を楽しむことができる。
(Sharing TV programs)
Next, in this embodiment, an information communication terminal on both the transmission side and the reception side is the
このとき問題になるのは、送信側の多機能テレビ10Tにおいて選択されているチャンネルと、受信側の多機能テレビ10Tにおいて選択されているチャンネルとが異なる場合である。この場合には、目印情報の送受信が行われたとしても、送信側と受信側とで目印によって指し示されているものが異なることになるので、目印情報の送受信は無意味なものとなる。
At this time, a problem arises when the channel selected on the
このような状況を防ぐために、送信側の多機能テレビ10Tは、目印情報の送信に先立って、現在選択されているチャンネル情報を受信側の多機能テレビ10Tに送信する。受信側の多機能テレビ10Tでは、目印情報の受信に先立って送信側の多機能テレビ10Tからチャンネル情報を受信し、受信したチャンネル情報に応じてチャンネルを設定する。
In order to prevent such a situation, the
ここで、送信側の多機能テレビ10Tおよび受信側の多機能テレビ10Tにおける処理の流れについて、図28(a)および図28(b)を参照しながら以下に説明する。同図(a)は、送信側の多機能テレビ10Tにおける処理の流れ、同図(b)は、受信側の多機能テレビ10Tにおける処理の流れを示している。
Here, the flow of processing in the
まず、送信側の多機能テレビ10Tにおける処理について、図28(a)を参照しながら説明する。なお、以下の処理に先立って、送信側の多機能テレビ10Tと受信側の多機能テレビ10Tとの間で、テレビ電話機能または音声電話機能によって通信が確立している状態であるものとする。
First, processing in the
S2001では、利用者によって入力部5におけるコンテンツ共有ボタン212が押されることにより、コンテンツ共有の開始指示が受信側の多機能テレビ10Tに送信される。詳しく説明すると、コンテンツ共有ボタン212が押されると、コンテンツ共有指示信号が制御部1における通信制御部13に伝送され、通信制御部13の制御に基づいて通信部7からコンテンツ共有指示信号が受信側の多機能テレビ10Tに送信される。これにより、受信側の多機能テレビ10Tは、コンテンツ共有の待機状態に移行する。
In step S2001, when the user presses the
次にS2002において、自装置において、現時点でテレビ放送を受信しているテレビ番組のチャンネル設定がチャンネル設定部203によって取得される。なお、ここでは、テレビ電話機能を利用しながら、同時にテレビの視聴を行っていることを想定している。この場合、テレビ電話による映像とテレビの映像とを、マルチ画面形式で表示部4に表示してもよいし、表示内容切り替えボタン211によって切り替えながら表示してもよい。
Next, in S2002, the
次にS2003において、チャンネル設定部203によって取得されたチャンネル情報が通信制御部13に伝送され、通信制御部13の制御に基づいて通信部7からチャンネル情報信号が受信側の多機能テレビ10Tに送信される。これにより、受信側の多機能テレビ10Tは、どのチャンネルのテレビ番組を表示すべきかを認識することが可能となる。
In step S2003, the channel information acquired by the
その後、表示部4に目印が表示され、入力部4からの入力動作に応じて、目印情報移動制御部14によって、前記したような目印の位置指定動作、種類指定動作、形状指定動作などが行われる。そして、これらの動作に基づいて、目印情報作成部11によって目印情報が生成される(S2004)。なお、目印情報の生成の方法は、前記した実施の形態で示した方法と同様であるので、ここではその説明を省略する。
After that, a mark is displayed on the
なお、テレビ電話による映像とテレビの映像とを、マルチ画面形式で表示部4に表示している場合には、目印の位置情報は、テレビの映像が表示される領域内での相対位置情報として、受信側の多機能テレビ10Tに送信されることになる。
In addition, when the video by the videophone and the video of the TV are displayed on the
次にS2005において、目印情報作成部11によって作成された目印情報が、通信制御部13の制御に基づいて通信部7から受信側の多機能テレビ10Tに送信される。これにより、受信側の多機能テレビ10Tは、受信した目印情報に基づいてポインティング動作を行うことが可能となる。
In step S2005, the landmark information created by the landmark
次にS2006において、コンテンツの共有を終了するか否かが確認される。具体的には、入力部5におけるコンテンツ共有ボタン212が押されたことを検出したか否かが判断され、コンテンツ共有ボタン212が押されていない限りは(S2006においてNO)、S2004およびS2005の処理が繰り返されることになる。
Next, in S2006, it is confirmed whether or not the content sharing is to be terminated. Specifically, it is determined whether or not it has been detected that the
一方、S2006においてYES、すなわち、コンテンツ共有ボタン212が押されたことが検出されると、通信制御部13の制御に基づいて通信部7からコンテンツ共有終了信号が受信側の多機能テレビ10Tに送信される(S2007)。これにより、受信側の多機能テレビ10Tは、コンテンツ共有の終了を認識することが可能となる。
On the other hand, if YES in S2006, that is, if it is detected that the
次に、受信側の多機能テレビ10Tにおける処理について、図28(b)を参照しながら説明する。なお、上記した送信側の処理と同様に、以下の処理に先立って、送信側の多機能テレビ10Tと受信側の多機能テレビ10Tとの間で、テレビ電話機能または音声電話機能によって通信が確立している状態であるものとする。
Next, processing in the
S2008では、送信側の多機能テレビ10Tから送信されたコンテンツ共有指示信号が通信部7を介して受信される。コンテンツ共有指示信号が受信されたことが通信制御部13に伝えられることによって、通信制御部13は、コンテンツ共有の待機状態に移行する。
In S2008, the content sharing instruction signal transmitted from the transmission-
次にS2009において、送信側の多機能テレビ10Tから送信されたチャンネル情報信号が通信部7を介して受信される。受信したチャンネル情報信号は、通信制御部13からチャンネル設定部203に伝送される。そして、チャンネル設定部203は、受信したチャンネル情報信号に対応するチャンネルのテレビ番組の受信を開始するとともに、表示制御部12に対して、該当チャンネルのテレビ番組を表示させるように指示を行う(S2010)。なお、ここでは、テレビ電話機能を利用しながら、同時にテレビの視聴を行っていることを想定している。この場合、テレビ電話による映像とテレビの映像とを、マルチ画面形式で表示部4に表示してもよいし、表示内容切り替えボタン211によって切り替えながら表示してもよい。
Next, in S2009, the channel information signal transmitted from the transmission-
次にS2011において、送信側の多機能テレビ10Tから送信された目印情報が通信部7を介して受信されると、この目印情報が通信制御部13から目印情報移動制御部14に伝送される。そして、目印情報移動制御部14は、受信した目印情報に基づいて、表示制御部12に対して目印の表示指示を行い、これによって表示部4に目印が表示される(S2012)。
In step S <b> 2011, when the mark information transmitted from the transmission-
なお、テレビ電話による映像とテレビの映像とを、マルチ画面形式で表示部4に表示している場合には、受信した目印情報に含まれる目印の位置情報は、テレビの映像が表示される領域内での相対位置として表示部4に表示されることになる。
In addition, when the video by the videophone and the video of the TV are displayed on the
次にS2013において、コンテンツ共有の終了指示を示すコンテンツ共有終了信号を送信側の多機能テレビ10Tから受信したか否かが通信制御部13によって確認される。S2013においてNO、すなわち、コンテンツ共有終了信号を受信していない限りは、S2011およびS2012の処理が繰り返されることになる。
Next, in S2013, the
一方、S2013においてYES、すなわち、コンテンツ共有終了信号を受信した場合には、コンテンツの共有が終了することになる。 On the other hand, if YES in S2013, that is, if a content sharing end signal is received, content sharing ends.
なお、受信側の多機能テレビ10Tにおいて、送信側の多機能テレビ10Tからチャンネル情報を受信した際に、現在視聴しているチャンネルがいきなり変更されるのではなく、相手からチャンネル情報を受信したことが表示されるとともに、利用者によってチャンネル変更が承認される、といった確認処理が行われるようになっていてもよい。
In addition, when receiving the channel information from the
(Webページの共有)
次に、本実施形態において、送信側および受信側の両方の多機能テレビ10Tが、インターネット接続が可能となっているとともに、Web(World Wide Web)ブラウザの機能を有しており、送信側および受信側で共有される画像が、Webページの画像である実施例を示す。この実施例では、送信側と受信側とで同じWebページを表示した状態で、ポインティング動作を行いながらテレビ電話によって会話をするというような利用形態が想定される。このような利用形態によれば、例えば、図29に示すように、ネットワーク上にあるおもちゃ屋さんのサイトのWebページを表示し、表示されているおもちゃの画像のうちあるおもちゃに対して目印221をつけて相手に指し示し、「このぬいぐるみが欲しい」といった会話を楽しむことができる。
(Sharing web pages)
Next, in this embodiment, the
このとき問題になるのは、送信側の多機能テレビ10Tにおいて表示されているWebページと、受信側の多機能テレビ10Tにおいて選択されている表示されているWebページとが異なる場合である。この場合には、目印情報の送受信が行われたとしても、送信側と受信側とで目印によって指し示されているものが異なることになるので、目印情報の送受信は無意味なものとなる。
At this time, a problem arises when the Web page displayed on the transmission-
このような状況を防ぐために、送信側の多機能テレビ10Tは、目印情報の送信に先立って、現在表示しているWebページを指定するアドレス情報を受信側の多機能テレビ10Tに送信する。受信側の多機能テレビ10Tでは、目印情報の受信に先立って送信側の多機能テレビ10Tからアドレス情報を受信し、受信したアドレスによってネットワークにアクセスし、取得したWebページを表示する。
In order to prevent such a situation, the
ここで、送信側の多機能テレビ10Tおよび受信側の多機能テレビ10Tにおける処理の流れについて、図30(a)および図30(b)を参照しながら以下に説明する。同図(a)は、送信側の多機能テレビ10Tにおける処理の流れ、同図(b)は、受信側の多機能テレビ10Tにおける処理の流れを示している。
Here, the flow of processing in the
まず、送信側の多機能テレビ10Tにおける処理について、図30(a)を参照しながら説明する。なお、以下の処理に先立って、送信側の多機能テレビ10Tと受信側の多機能テレビ10Tとの間で、テレビ電話機能または音声電話機能によって通信が確立している状態であるものとする。
First, processing in the
S2021では、利用者によって入力部5におけるコンテンツ共有ボタン212が押されることにより、コンテンツ共有の開始指示が受信側の多機能テレビ10Tに送信される。これにより、受信側の多機能テレビ10Tは、コンテンツ共有の待機状態に移行する。
In S2021, when the user presses the
次にS2022において、自装置において、現時点でネットワークコンテンツ受信部204のWebブラウジング機能によって表示しているWebページのアドレス(URL(Uniform Resource Locator))がネットワークコンテンツ受信部204によって取得される。なお、ここでは、テレビ電話機能を利用しながら、同時にWebページの閲覧を行っていることを想定している。この場合、テレビ電話による映像とWebページの映像とを、マルチ画面形式で表示部4に表示してもよいし、表示内容切り替えボタン211によって切り替えながら表示してもよい。
Next, in S2022, the network
次にS2023において、ネットワークコンテンツ受信部204によって取得されたURL情報が通信制御部13に伝送され、通信制御部13の制御に基づいて通信部7からURL情報が受信側の多機能テレビ10Tに送信される。これにより、受信側の多機能テレビ10Tは、表示すべきWebページのアドレスを認識することが可能となる。
Next, in S2023, the URL information acquired by the network
その後、表示部4に目印が表示され、入力部4からの入力動作に応じて、目印情報移動制御部14によって、前記したような目印の位置指定動作、種類指定動作、形状指定動作などが行われる。そして、これらの動作に基づいて、目印情報作成部11によって目印情報が生成される(S2024)。なお、目印情報の生成の方法は、前記した実施の形態で示した方法と同様であるので、ここではその説明を省略する。
After that, a mark is displayed on the
なお、テレビ電話による映像とWebページの映像とを、マルチ画面形式で表示部4に表示している場合には、目印の位置情報は、Webページの映像が表示される領域内での相対位置情報として、受信側の多機能テレビ10Tに送信されることになる。
When the video by the videophone and the video of the Web page are displayed on the
次にS2025において、目印情報作成部11によって作成された目印情報が、通信制御部13の制御に基づいて通信部7から受信側の多機能テレビ10Tに送信される。これにより、受信側の多機能テレビ10Tは、受信した目印情報に基づいてポインティング動作を行うことが可能となる。
In step S <b> 2025, the landmark information created by the landmark
また、Webページを表示している際に、利用者によってスクロール動作が行われた場合に、そのスクロール量を示す操作情報が受信側の多機能テレビ10Tに送信されるようになっていてもよい。このようにすれば、送信側および受信側の双方の多機能テレビ10TにおけるWebページの表示領域のサイズ(画素数)が同じであれば、スクロールの状態も同期させることが可能となり、ポインティング対象を完全に一致させることが可能となる。
Further, when a scroll operation is performed by a user while a Web page is displayed, operation information indicating the scroll amount may be transmitted to the
さらに、送信側の多機能テレビ10Tにおける、Webページの表示領域のサイズ(画素数)に関する表示サイズ情報が受信側の多機能テレビ10Tに送信されるようになっていてもよい。このようにすれば、受信側の多機能テレビ10Tにおいて、送信側におけるWebページの表示領域のサイズと同じサイズにWebページの表示領域を設定することによって、Webページの表示状態を送信側と受信側とで完全に一致させることが可能となる。
Further, display size information regarding the size (number of pixels) of the display area of the Web page in the transmission-
あるいは、送信側と受信側とで、Webページの表示領域のサイズが異なっていても、受信側において、送信側のWebページの表示領域のサイズおよび目印の位置情報を解析することによって、受信側のWebページの表示領域のうち、どの位置に目印を表示させたらよいかを算出することも可能である。これにより、送信側と受信側とでWebページの表示状態(文字や画像の配置位置)が異なっていたとしても、ポインティング対象を送信側と受信側とで一致させることが可能となる。 Alternatively, even if the size of the display area of the Web page is different between the transmission side and the reception side, the reception side analyzes the size of the display area of the Web page on the transmission side and the position information of the mark on the reception side. It is also possible to calculate at which position in the display area of the Web page the mark should be displayed. As a result, even if the display state (arrangement positions of characters and images) of the Web page is different between the transmission side and the reception side, the pointing object can be matched between the transmission side and the reception side.
次にS2026において、コンテンツの共有を終了するか否かが確認される。具体的には、入力部5におけるコンテンツ共有ボタン212が押されたことを検出したか否かが判断され、コンテンツ共有ボタン212が押されていない限りは(S2026においてNO)、S2024およびS2025の処理が繰り返されることになる。
Next, in S2026, it is confirmed whether or not the content sharing is to be terminated. Specifically, it is determined whether or not it has been detected that the
一方、S2026においてYES、すなわち、コンテンツ共有ボタン212が押されたことが検出されると、通信制御部13の制御に基づいて通信部7からコンテンツ共有終了信号が受信側の多機能テレビ10Tに送信される(S2027)。これにより、受信側の多機能テレビ10Tは、コンテンツ共有の終了を認識することが可能となる。
On the other hand, if YES in S2026, that is, it is detected that the
次に、受信側の多機能テレビ10Tにおける処理について、図30(b)を参照しながら説明する。なお、上記した送信側の処理と同様に、以下の処理に先立って、送信側の多機能テレビ10Tと受信側の多機能テレビ10Tとの間で、テレビ電話機能または音声電話機能によって通信が確立している状態であるものとする。
Next, processing in the
S2028では、送信側の多機能テレビ10Tから送信されたコンテンツ共有指示信号が通信部7を介して受信される。コンテンツ共有指示信号が受信されたことが通信制御部13に伝えられることによって、通信制御部13は、コンテンツ共有の待機状態に移行する。
In step S2028, the content sharing instruction signal transmitted from the transmission-
次にS2029において、送信側の多機能テレビ10Tから送信されたURL情報が通信部7を介して受信される。受信したURL情報は、通信制御部13からネットワークコンテンツ受信部204に伝送される。そして、ネットワークコンテンツ受信部204は、受信したURL情報に対応するアドレスのWebページをネットワークから取得し、表示制御部12に対して、該当Webページを表示させるように指示を行う(S2030)。なお、ここでは、テレビ電話機能を利用しながら、同時にWebページの閲覧を行っていることを想定している。この場合、テレビ電話による映像とWebページの映像とを、マルチ画面形式で表示部4に表示してもよいし、表示内容切り替えボタン211によって切り替えながら表示してもよい。
In step S2029, the URL information transmitted from the transmission-
次にS2031において、送信側の多機能テレビ10Tから送信された目印情報が通信部7を介して受信されると、この目印情報が通信制御部13から目印情報移動制御部14に伝送される。そして、目印情報移動制御部14は、受信した目印情報に基づいて、表示制御部12に対して目印の表示指示を行い、これによって表示部4に目印が表示される(S2032)。
Next, in S2031, when the mark information transmitted from the
なお、テレビ電話による映像とWebページの映像とを、マルチ画面形式で表示部4に表示している場合には、受信した目印情報に含まれる目印の位置情報は、Webページの映像が表示される領域内での相対位置として表示部4に表示されることになる。
In addition, when the video by the videophone and the video of the Web page are displayed on the
次にS2033において、コンテンツ共有の終了指示を示すコンテンツ共有終了信号を送信側の多機能テレビ10Tから受信したか否かが通信制御部13によって確認される。S2033においてNO、すなわち、コンテンツ共有終了信号を受信していない限りは、S2031およびS2032の処理が繰り返されることになる。
Next, in S2033, the
一方、S2033においてYES、すなわち、コンテンツ共有終了信号を受信した場合には、コンテンツの共有が終了することになる。 On the other hand, if YES in S2033, that is, if a content sharing end signal is received, content sharing ends.
なお、受信側の多機能テレビ10Tにおいて、送信側の多機能テレビ10TからURL情報を受信した際に、現在閲覧しているWebページがいきなり変更されるのではなく、相手からURL情報を受信したことが表示されるとともに、利用者によってWebページの変更が承認される、といった確認処理が行われるようになっていてもよい。
When receiving the URL information from the transmitting
(動画の共有)
次に、本実施形態において、送信側および受信側で共有される画像が、ネットワーク上にある動画データ、あるいは送信側の情報通信端末に蓄積されている動画データである実施例を示す。この実施例では、送信側と受信側とで同じ動画を表示した状態で、ポインティング動作を行いながらテレビ電話によって会話をするというような利用形態が想定される。このような利用形態によれば、例えば、図31に示すように、運動会の様子を撮影した動画を、送信側および受信側の双方の多機能テレビ10Tにおいて再生し、その動画に映っている人物に対して目印をつけて相手に指し示し、「これが私の子供よ」といった会話を楽しむことができる。
(Video sharing)
Next, in the present embodiment, an example in which the image shared between the transmission side and the reception side is moving image data on the network or moving image data stored in the information communication terminal on the transmission side will be described. In this embodiment, it is assumed that the transmitting side and the receiving side display the same moving image and have a conversation through a videophone while performing a pointing operation. According to such a form of use, for example, as shown in FIG. 31, a motion picture of an athletic meet is played on the
このとき問題になるのは、送信側の多機能テレビ10Tにおける動画再生のタイミングと、受信側の多機能テレビ10Tにおける動画再生のタイミングとがずれてしまうことである。表示されているタイミングが異なっていると、送信側で指し示している対象物と、受信側で指し示されている対象物が異なるものとなってしまい、目印情報の送受信は無意味なものとなる。
The problem at this time is that the timing of moving image playback on the transmission-
このような状況を防ぐために、送信側の多機能テレビ10Tは、目印情報の送信に先立って、動画の再生開始命令を受信側の多機能テレビ10Tに送信するとともに、表示画面において当該動画の再生を開始する。受信側の多機能テレビ10Tでは、目印情報の受信に先立って送信側の多機能テレビ10Tから動画再生命令を受信し、動画の再生を開始する。すなわち、動画の再生開始タイミングを、送信側と受信側とで一致させた状態で、目印情報の送受信を行うことにより、上記のような問題を解消することが可能となる。
In order to prevent such a situation, the transmission-side
以下に、送信側の多機能テレビ10Tと受信側の多機能テレビ10Tとで同じ動画を再生する方法として2つの動画共有方法を述べる。
In the following, two video sharing methods will be described as methods for reproducing the same video on the
第1の動画共有方法は、図30(a)および図30(b)を用いて説明したような、ネットワーク上の動画データを使用する方法である。この場合、送信側の多機能テレビ10Tでは、動画の再生開始命令を受信側の多機能テレビ10Tに送信した後、ネットワークアドレスを用いてWeb上の動画データにアクセスし、動画データの再生を行う。受信側の多機能テレビ10Tでは、動画の再生開始命令を受信後、指定されたネットワークアドレスを用いてWeb上の動画データにアクセスし、動画データの再生を行う。
The first moving image sharing method is a method of using moving image data on the network as described with reference to FIGS. 30 (a) and 30 (b). In this case, in the
第2の動画共有方法は、送信側の多機能テレビ10Tが有している動画データを受信側の多機能テレビ10Tが受信して再生する方法である。この場合、送信側の多機能テレビ10Tから受信側の多機能テレビ10Tへ、まず共有すべき動画データ送信された後、送信側の多機能テレビ10Tから再生開始命令が受信側の多機能テレビ10Tへ送信されることによって、送信側および受信側の多機能テレビ10Tが同時に動画データを再生することになる。
The second moving image sharing method is a method in which the receiving
まず、上記第1の動画共有方法における、送信側の多機能テレビ10Tおよび受信側の多機能テレビ10Tにおける処理の流れについて、図32(a)および図32(b)を参照しながら以下に説明する。同図(a)は、送信側の多機能テレビ10Tにおける処理の流れ、同図(b)は、受信側の多機能テレビ10Tにおける処理の流れを示している。
First, the flow of processing in the transmission-
まず、送信側の多機能テレビ10Tにおける処理について、図32(a)を参照しながら説明する。なお、以下の処理に先立って、送信側の多機能テレビ10Tと受信側の多機能テレビ10Tとの間で、テレビ電話機能または音声電話機能によって通信が確立している状態であるものとする。
First, processing in the transmission-
S2041では、ネットワークコンテンツ受信部204が、共有しようとする動画データが置かれているインターネット上のアドレス(URL情報)を取得する。ここでは、例えば利用者が、Webブラウザにおいて、該当動画データを示すハイパーリンクを選択するとともに、選択したハイパーリンクを共有する動画データとして設定する指示入力を行うことになる。この場合、入力部5から利用者によって入力された指示入力が、ネットワークコンテンツ受信部204に認識されることによって、ネットワークコンテンツ受信部204が、該当動画データのURL情報を取得することになる。
In step S2041, the network
次にS2042において、ネットワークコンテンツ受信部204によって取得されたURL情報が通信制御部13に伝送され、通信制御部13の制御に基づいて通信部7からURL情報が受信側の多機能テレビ10Tに送信される。これにより、受信側の多機能テレビ10Tは、表示すべき動画データのインターネット上のアドレスを認識することが可能となる。
In step S <b> 2042, the URL information acquired by the network
次にS2043において、利用者によって入力部5におけるコンテンツ共有ボタン212が押されることにより、通信制御部13の制御に基づいて、通信部7からコンテンツ共有の開始指示が受信側の多機能テレビ10Tに送信される。また、このコンテンツ共有の開始指示を送信する際に、S2042で送信したURL情報に対応する動画データの再生命令も同時に送信される。この処理は、例えばコンテンツ共有ボタン212が押された際に、選択肢として動画再生開始指示という項目を表示させ、これが利用者によって選択されることによって実現することができる。これにより、受信側の多機能テレビ10Tは、コンテンツ共有の待機状態に移行するとともに、既に通知されているURL情報に対応する動画データの再生を開始することになる。
In step S <b> 2043, when the user presses the
S2043において共有する動画データの再生命令が送信されると同時に、S2044において、ネットワークコンテンツ受信部204によって、該当URL情報に対応する動画データにアクセスし、取得した動画データの再生が行われる。ネットワークコンテンツ受信部204によって再生された動画映像は、表示制御部13の制御に基づいて表示部4に表示される。なお、ここでは、テレビ電話機能を利用しながら、同時に動画の表示を行っていることを想定している。この場合、テレビ電話による映像と動画の映像とを、マルチ画面形式で表示部4に表示してもよいし、表示内容切り替えボタン211によって切り替えながら表示してもよい。
At the same time as the reproduction instruction of the moving image data shared in S2043 is transmitted, in S2044, the network
その後、表示部4に目印が表示され、入力部4からの入力動作に応じて、目印情報移動制御部14によって、前記したような目印の位置指定動作、種類指定動作、形状指定動作などが行われる。そして、これらの動作に基づいて、目印情報作成部11によって目印情報が生成される(S2045)。なお、目印情報の生成の方法は、前記した実施の形態で示した方法と同様であるので、ここではその説明を省略する。
After that, a mark is displayed on the
なお、テレビ電話による映像と動画の映像とを、マルチ画面形式で表示部4に表示している場合には、目印の位置情報は、動画の映像が表示される領域内での相対位置情報として、受信側の多機能テレビ10Tに送信されることになる。
When the videophone video and the video image are displayed on the
次にS2046において、目印情報作成部11によって作成された目印情報が、通信制御部13の制御に基づいて通信部7から受信側の多機能テレビ10Tに送信される。これにより、受信側の多機能テレビ10Tは、受信した目印情報に基づいてポインティング動作を行うことが可能となる。
In step S <b> 2046, the landmark information created by the landmark
次にS2047において、コンテンツの共有を終了するか否かが確認される。具体的には、入力部5におけるコンテンツ共有ボタン212が押されたことを検出したか否かが判断され、コンテンツ共有ボタン212が押されていない限りは(S2047においてNO)、S2045およびS2046の処理が繰り返されることになる。
Next, in S2047, it is confirmed whether or not to end the content sharing. Specifically, it is determined whether or not it has been detected that the
一方、S2047においてYES、すなわち、コンテンツ共有ボタン212が押されたことが検出されると、通信制御部13の制御に基づいて通信部7からコンテンツ共有終了信号が受信側の多機能テレビ10Tに送信される(S2048)。これにより、受信側の多機能テレビ10Tは、コンテンツ共有の終了を認識することが可能となる。
On the other hand, if YES in S2047, that is, it is detected that the
次に、受信側の多機能テレビ10Tにおける処理について、図32(b)を参照しながら説明する。なお、上記した送信側の処理と同様に、以下の処理に先立って、送信側の多機能テレビ10Tと受信側の多機能テレビ10Tとの間で、テレビ電話機能または音声電話機能によって通信が確立している状態であるものとする。
Next, processing in the
S2049では、送信側の多機能テレビ10Tから送信されたURL情報が通信部7を介して受信される。この受信したURL情報は、後に再生指示が行われた際に呼び出すことができるように、画像情報保持部205に一時記憶される。
In S2049, the URL information transmitted from the transmission-
次にS2050において、コンテンツ共有の開始指示および動画データの再生命令が通信部7を介して受信される。コンテンツ共有指示信号が受信されたことが通信制御部13に伝えられることによって、通信制御部13は、コンテンツ共有の待機状態に移行する。また、動画データの再生命令が通信制御部13に伝えられることによって、これがネットワークコンテンツ受信部204に伝えられる。そして、ネットワークコンテンツ受信部204は、画像情報保持部205に一時記憶されているURL情報を読み出し、該当URL情報に対応する動画データにアクセスし、取得した動画データの再生が行われる(S2051)。
In step S2050, a content sharing start instruction and a moving image data reproduction command are received via the
なお、ここでは、テレビ電話機能を利用しながら、同時に動画データの再生を行っていることを想定している。この場合、テレビ電話による映像と動画データの映像とを、マルチ画面形式で表示部4に表示してもよいし、表示内容切り替えボタン211によって切り替えながら表示してもよい。
Here, it is assumed that the video data is being played back simultaneously while using the videophone function. In this case, a videophone video and video data may be displayed on the
次にS2052において、送信側の多機能テレビ10Tから送信された目印情報が通信部7を介して受信されると、この目印情報が通信制御部13から目印情報移動制御部14に伝送される。そして、目印情報移動制御部14は、受信した目印情報に基づいて、表示制御部12に対して目印の表示指示を行い、これによって表示部4に目印が表示される(S2053)。
In step S <b> 2052, when the mark information transmitted from the transmission-
なお、テレビ電話による映像と動画データの映像とを、マルチ画面形式で表示部4に表示している場合には、受信した目印情報に含まれる目印の位置情報は、動画データの映像が表示される領域内での相対位置として表示部4に表示されることになる。
Note that when the videophone video and the video data are displayed on the
次にS2054において、コンテンツ共有の終了指示を示すコンテンツ共有終了信号を送信側の多機能テレビ10Tから受信したか否かが通信制御部13によって確認される。S2054においてNO、すなわち、コンテンツ共有終了信号を受信していない限りは、S2052およびS2053の処理が繰り返されることになる。
Next, in S2054, the
一方、S2054においてYES、すなわち、コンテンツ共有終了信号を受信した場合には、コンテンツの共有が終了することになる。 On the other hand, if YES in S2054, that is, if a content sharing end signal is received, content sharing ends.
なお、受信側の多機能テレビ10Tにおいて、送信側の多機能テレビ10Tから動画データの再生命令を受信した際に、いきなり動画データの再生が行われるのではなく、相手から動画データの再生命令を受信したことが表示されるとともに、利用者によって動画データの再生が承認される、といった確認処理が行われるようになっていてもよい。
Note that when the
次に、上記第2の動画共有方法における、送信側の多機能テレビ10Tおよび受信側の多機能テレビ10Tにおける処理の流れについて、図33(a)および図33(b)を参照しながら以下に説明する。同図(a)は、送信側の多機能テレビ10Tにおける処理の流れ、同図(b)は、受信側の多機能テレビ10Tにおける処理の流れを示している。
Next, the flow of processing in the transmission-
まず、送信側の多機能テレビ10Tにおける処理について、図33(a)を参照しながら説明する。なお、以下の処理に先立って、送信側の多機能テレビ10Tと受信側の多機能テレビ10Tとの間で、テレビ電話機能または音声電話機能によって通信が確立している状態であるものとする。
First, processing in the
S2061では、通信制御部13が、共有しようとする動画データを画像情報蓄積部206から読み出して、受信側の多機能テレビ10Tに向けて通信部7を介して送信する。ここでは、例えば利用者が、画像情報蓄積部206に蓄積されている動画データを通信先に送信する指示入力を行うことになる。動画データの送信が完了したらS2062に進む。なお、受信側の多機能テレビ10Tが動画データ受信完了通知を送信するような実装である場合には、動画データ受信完了通知を受信した後にS2062に進む。
In S2061, the
次にS2062において、利用者によって入力部5におけるコンテンツ共有ボタン212が押されることにより、通信制御部13の制御に基づいて、通信部7からコンテンツ共有の開始指示が受信側の多機能テレビ10Tに送信される。また、このコンテンツ共有の開始指示を送信する際に、S2061で送信した動画データの再生命令も同時に送信される。この処理は、例えばコンテンツ共有ボタン212が押された際に、選択肢として動画再生開始指示という項目を表示させ、これが利用者によって選択されることによって実現することができる。これにより、受信側の多機能テレビ10Tは、コンテンツ共有の待機状態に移行するとともに、既に受信している動画データの再生を開始することになる。
Next, in step S2062, when the user presses the
S2062において共有する動画データの再生命令が送信されると同時に、S2063において、画像情報蓄積部206に記憶されている該当動画データの再生が行われる。この動画データの映像は、表示制御部13の制御に基づいて表示部4に表示される。なお、ここでは、テレビ電話機能を利用しながら、同時に動画の表示を行っていることを想定している。この場合、テレビ電話による映像と動画の映像とを、マルチ画面形式で表示部4に表示してもよいし、表示内容切り替えボタン211によって切り替えながら表示してもよい。
At the same time as the reproduction command of the moving image data to be shared in S2062, the corresponding moving image data stored in the image
その後、表示部4に目印が表示され、入力部4からの入力動作に応じて、目印情報移動制御部14によって、前記したような目印の位置指定動作、種類指定動作、形状指定動作などが行われる。そして、これらの動作に基づいて、目印情報作成部11によって目印情報が生成される(S2064)。なお、目印情報の生成の方法は、前記した実施の形態で示した方法と同様であるので、ここではその説明を省略する。
After that, a mark is displayed on the
なお、テレビ電話による映像と動画の映像とを、マルチ画面形式で表示部4に表示している場合には、目印の位置情報は、動画の映像が表示される領域内での相対位置情報として、受信側の多機能テレビ10Tに送信されることになる。
When the videophone video and the video image are displayed on the
次にS2065において、目印情報作成部11によって作成された目印情報が、通信制御部13の制御に基づいて通信部7から受信側の多機能テレビ10Tに送信される。これにより、受信側の多機能テレビ10Tは、受信した目印情報に基づいてポインティング動作を行うことが可能となる。
In step S <b> 2065, the landmark information created by the landmark
次にS2066において、コンテンツの共有を終了するか否かが確認される。具体的には、入力部5におけるコンテンツ共有ボタン212が押されたことを検出したか否かが判断され、コンテンツ共有ボタン212が押されていない限りは(S2066においてNO)、S2064およびS2065の処理が繰り返されることになる。
Next, in S2066, it is confirmed whether or not to end the content sharing. Specifically, it is determined whether or not it has been detected that the
一方、S2066においてYES、すなわち、コンテンツ共有ボタン212が押されたことが検出されると、通信制御部13の制御に基づいて通信部7からコンテンツ共有終了信号が受信側の多機能テレビ10Tに送信される(S2067)。これにより、受信側の多機能テレビ10Tは、コンテンツ共有の終了を認識することが可能となる。
On the other hand, if YES in S2066, that is, it is detected that the
次に、受信側の多機能テレビ10Tにおける処理について、図33(b)を参照しながら説明する。なお、上記した送信側の処理と同様に、以下の処理に先立って、送信側の多機能テレビ10Tと受信側の多機能テレビ10Tとの間で、テレビ電話機能または音声電話機能によって通信が確立している状態であるものとする。
Next, processing in the
S2068では、送信側の多機能テレビ10Tから送信された動画データが通信部7を介して受信される。この受信した動画データは、後に再生指示が行われた際に呼び出すことができるように、画像情報蓄積部206に記憶される(S2069)。動画データの受信が完了したらS2070に進む。なお、送信側の多機能テレビ10Tに対して動画データ受信完了通知を送信するように実装してもよい。送信側の多機能テレビ10Tが動画データ受信完了通知を受信した後にコンテンツ共有の開始指示および動画データの再生命令を送信するような実装であれば、動画データの再生命令は動画データの受信が完了した後にしか受信することはない。
In step S <b> 2068, the moving image data transmitted from the transmission-
次にS2070において、コンテンツ共有の開始指示および動画データの再生命令が通信部7を介して受信される。コンテンツ共有指示信号が受信されたことが通信制御部13に伝えられることによって、通信制御部13は、コンテンツ共有の待機状態に移行する。また、動画データの再生命令が通信制御部13に伝えられることによって、画像情報蓄積部206に記憶されている該当動画データの再生が行われる。この動画データの映像は、表示制御部13の制御に基づいて表示部4に表示される。(S2071)。
Next, in S 2070, a content sharing start instruction and a moving image data playback command are received via the
なお、ここでは、テレビ電話機能を利用しながら、同時に動画データの再生を行っていることを想定している。この場合、テレビ電話による映像と動画データの映像とを、マルチ画面形式で表示部4に表示してもよいし、表示内容切り替えボタン211によって切り替えながら表示してもよい。
Here, it is assumed that the video data is being played back simultaneously while using the videophone function. In this case, a videophone video and video data may be displayed on the
次にS2072において、送信側の多機能テレビ10Tから送信された目印情報が通信部7を介して受信されると、この目印情報が通信制御部13から目印情報移動制御部14に伝送される。そして、目印情報移動制御部14は、受信した目印情報に基づいて、表示制御部12に対して目印の表示指示を行い、これによって表示部4に目印が表示される(S2073)。
In step S <b> 2072, when the mark information transmitted from the transmission-
なお、テレビ電話による映像と動画データの映像とを、マルチ画面形式で表示部4に表示している場合には、受信した目印情報に含まれる目印の位置情報は、動画データの映像が表示される領域内での相対位置として表示部4に表示されることになる。
Note that when the videophone video and the video data are displayed on the
次にS2074において、コンテンツ共有の終了指示を示すコンテンツ共有終了信号を送信側の多機能テレビ10Tから受信したか否かが通信制御部13によって確認される。S2074においてNO、すなわち、コンテンツ共有終了信号を受信していない限りは、S2072およびS2073の処理が繰り返されることになる。
Next, in S2074, the
一方、S2074においてYES、すなわち、コンテンツ共有終了信号を受信した場合には、コンテンツの共有が終了することになる。 On the other hand, if YES in S2074, that is, if a content sharing end signal is received, content sharing ends.
なお、受信側の多機能テレビ10Tにおいて、送信側の多機能テレビ10Tから動画データの再生命令を受信した際に、いきなり動画データの再生が行われるのではなく、相手から動画データの再生命令を受信したことが表示されるとともに、利用者によって動画データの再生が承認される、といった確認処理が行われるようになっていてもよい。
Note that when the
なお、上記第2の動画共有方法では、受信側の多機能テレビ10Tが、送信側の多機能テレビ10Tから動画データをすべて受信し、これを画像情報蓄積部206に記憶した後に再生が開始されるようになっているが、この場合、動画データの受信が完了しない間は、動画データの再生ができないことになる。これに対して、動画データの再生を送信側の多機能テレビ10Tで行うとともに、再生された動画情報をストリームデータとして受信側の多機能テレビ10Tに送信する方法としてもよい。このような方法によれば、動画データの送受信に必要とされる時間を待機する必要をなくすことができる。
In the second moving image sharing method, the receiving
また、このような方法によれば、送信側の多機能テレビ10Tにおける再生タイミングと受信側の多機能テレビ10Tにおける再生タイミングとがほとんど同じになるので、送信側と受信側とにおける動画再生タイミングと目印情報との表示タイミングのずれはそれほど大きな問題にはならない。
Also, according to such a method, the playback timing on the transmission-
しかしながら、ネットワークの混雑などによって、受信側の多機能テレビ10Tにおける動画データの再生品位が低下することも考えられる。このような問題に対しては、上記した第2の動画共有方法のように、送信側の多機能テレビ10Tが有している動画データを前もって受信側の多機能テレビ10Tに送信しておく方法が好ましいことになる。
However, it is also conceivable that the reproduction quality of moving image data in the
また、上記のストリーミング再生を行う方法において、ネットワークの混雑などによって、受信側の多機能テレビ10Tにおいてストリーミング再生を行う際のバッファ量が多くなっている場合には、送信側と受信側とにおける動画再生タイミングと目印情報との表示タイミングのずれが大きくなることが考えられる。これに対応するためには、次のような目印送信方法を行ってもよい。
Also, in the streaming playback method described above, if the buffer size when streaming playback is performed in the
第1の目印送信方法としては、目印情報を逐次送信モードによって送信する方法において、送信側の多機能テレビ10Tが、送信する動画データの各パケットのヘッダに、目印情報を含めて送信する方法が挙げられる。この方法によれば、受信側の多機能テレビ10Tにおいて、受信したストリーミング動画データのパケットのヘッダに含まれる目印情報を、該パケットに含まれるデータの表示タイミングに同期して表示することによって、動画再生タイミングと目印情報との表示タイミングのずれをなくすことができる。例えば、映像や音声の伝送プロトコルであるRTP(Real-time Transport Protocol)では、RTPパケットのヘッダの先頭から4バイト目は拡張ビット(extension bit)になっており、拡張ビットを立てることにより、ヘッダを拡張することができる。この拡張したヘッダ領域を利用して、目印の座標位置を送信することができる。
As a first mark transmission method, in the method of transmitting the mark information in the sequential transmission mode, the
第2の目印送信方法としては、送信側の多機能テレビ10Tから送信される目印情報に、対応する動画データのどのタイミングで、該目印情報に含まれる各目印を表示すべきかの情報を含める方法が挙げられる。なお、この方法は、上記第1の動画共有方法に対しても適用可能である。上記第1の動画共有方法では、送信側と受信側とで、ネットワーク上の動画データを取得して再生するようになっているが、ここでもストリーミング再生が行われることが考えられる。この場合にも、送信側の多機能テレビ10Tから送信される目印情報に、対応する動画データのどのタイミングで、該目印情報に含まれる各目印を表示すべきかの情報を含めることによって、動画再生タイミングと目印情報との表示タイミングのずれをなくすことができる。
As a second mark transmission method, a method of including information indicating at which timing of corresponding moving image data each mark included in the mark information is displayed in the mark information transmitted from the
第3の方法としては、受信側の多機能テレビ10Tにおいて、送信側から最初に指示された目印情報で示されている対象物を画像認識し、その後は、画像認識結果に基づいて目印を追従させる、という方法が挙げられる。この受信側の多機能テレビ10Tの処理を、図41を用いて説明する。なお、以下の処理に先立って、送信側の多機能テレビ10Tと受信側の多機能テレビ10Tとの間で、テレビ電話機能または音声電話機能によって通信が確立している状態であるものとする。また、送信側および受信側の多機能テレビ10Tにおいて、動画データなどのコンテンツの共有がなされているものとする。
As a third method, in the
S2121では、共有がなされているコンテンツが表示部4の画面に表示される。そして、S2122において、送信側の多機能テレビ10Tから送信された目印情報が通信部7を介して受信されると、この目印情報が通信制御部13から目印情報移動制御部14に伝送される。そして、目印情報移動制御部14は、受信した目印情報に基づいて、表示制御部12に対して目印の表示指示を行い、これによって表示部4に目印が表示される(S2123)。そして、目印情報の表示位置と表示位置近辺のパターンとを一時的に記憶する。記憶するパターンは、画像認識によって人や自動車などを識別してもよいし、単なるカラーパターンの記憶であってもよい。
In S <b> 2121, the shared content is displayed on the screen of the
S2125で一定時間(例えば1秒間)経過した後、S2124で記憶した表示位置近辺で、同じくS2124で記憶したパターンと類似のパターンが見つかるかを調べる(S2126)。すなわち、S2124で記憶した表示位置から一定距離内で、S2124で記憶したパターンを同一、または一定範囲での大きさの変化、あるいは、一定範囲での回転や変形が施されたとみなしうるパターンが見つかるかどうかを調べる。 After a predetermined time (for example, 1 second) has elapsed in S2125, it is checked whether a pattern similar to the pattern stored in S2124 is found near the display position stored in S2124 (S2126). That is, within a certain distance from the display position stored in S2124, a pattern that can be regarded as having the same pattern as S2124, a change in size within a certain range, or rotation or deformation within a certain range is found. Check to see if.
類似のパターンが見つかればS2127に進み、見つかった類似のパターンの位置に目印を移動して表示し、さらにS2124の処理に戻る。類似のパターンが見つからなければS2128に進み、目印を消去して処理を終了する。 If a similar pattern is found, the process proceeds to step S2127, the mark is moved to the position of the found similar pattern, and the process returns to step S2124. If a similar pattern is not found, the process proceeds to S2128, the mark is deleted, and the process ends.
(目印移動制御例)
上記のように、共有コンテンツとして動画データを用いる場合、動画に追随して目印情報を移動させることが重要になる。例えば、図34(a)〜図34(e)、または、図43(a)〜図43(e)に示すように、運動会の動画を送信側および受信側の多機能テレビ10Tにおいて再生し、その動画に映っている人物に対して目印をつけて相手に指し示す場合、動画の再生に合わせて人物が動くため、人物の動きに合わせて目印も移動させなければならない。このような目印移動の技術として、既に説明した逐次送信モードが利用できる。なお、図34(a)〜図34(e)では目印情報の態様として○印を使用しており、図43(a)〜図43(e)では目印情報の態様として吹き出しを使用し、補足情報として「花子ちゃん」という文字が吹き出しの中に表示されている。
(Example of mark movement control)
As described above, when moving image data is used as shared content, it is important to move mark information following the moving image. For example, as shown in FIG. 34 (a) to FIG. 34 (e), or FIG. 43 (a) to FIG. 43 (e), the athletic meet video is played on the transmission-side and reception-
すなわち、図32(a)または図33(a)にて説明したように、送信側の多機能テレビ10Tで動画データの再生を開始した後、動画に映っている人物に対して目印をつけ、目印情報を受信側の多機能テレビ10Tに送信する。表示画面上の人物が移動した場合には、送信側の多機能テレビ10Tで動画に映っている人物に対する目印をつけ直し、目印の移動に関する情報を受信側の多機能テレビ10Tに送信する。
That is, as described in FIG. 32 (a) or 33 (a), after reproduction of moving image data is started on the transmission-
一方、図32(b)または図33(b)にて説明したように、受信側の多機能テレビ10Tでは動画の再生を開始した後、目印情報を受信するたびに、表示画面上の目印を移動させて表示する。送信側の多機能テレビ10Tでの動画情報の再生開始のタイミングと受信側の多機能テレビ10Tでの動画情報の再生開始のタイミングとが一致しているため、受信側の多機能テレビ10Tで対象となる人物と目印がずれることはない。
On the other hand, as described with reference to FIG. 32B or FIG. 33B, the
(目印消去制御例)
上記のように、共有コンテンツとして動画データを用いる場合、目印情報を消すということが重要になる。例えば、運動会の動画を送信側および受信側の多機能テレビ10Tにおいて再生し、その動画に映っている人物に対して目印をつけて相手に指し示す場合、対象となる人物が表示画面上から消えてしまった後に目印の表示が残ると、対象となる人物を相手が知る際に混乱してしまうことが考えられる。このような事態にならないためには、必要でなくなった目印は消去するべきである。
(Example of mark deletion control)
As described above, when moving image data is used as shared content, it is important to delete the landmark information. For example, when an athletic meet video is played on the
送信側の多機能テレビ10Tにて表示画面から目印を消去するには2つの方法が考えられる。1つの目印消去方法は、特定のキー入力操作子に目印の消去を対応づける方法である。利用者が当該キー入力操作子を操作すると、送信側の多機能テレビ10Tにて表示画面から目印が消える。もう1つの目印消去方法は、目印の表示に関連するキー入力操作子の操作が一定時間なされない場合に目印の消去を行う方法である。利用者が一定時間目印の表示に関係する操作を行わないと、送信側の多機能テレビ10Tにて表示画面から目印が消える。なお、消去の指示を可能とする方法として、入力部5に消去指示に対応するキーを設けてもよいし、何らかのキーを押すことによってメニューが表示され、このメニューの中に含まれる消去指示が選択されるようになっていてもよい。
Two methods are conceivable for deleting the mark from the display screen in the
いずれの場合にも、送信側の多機能テレビ10Tにて表示画面から目印が消えると、送信側の多機能テレビ10Tから目印の消去命令が受信側の多機能テレビ10Tに対して送られる。受信側の多機能テレビ10Tでは、目印の消去命令を受信すると、表示画面から目印を消去する。
In any case, when the mark disappears from the display screen on the
ここで、上記の目印消去方法における、送信側の多機能テレビ10Tおよび受信側の多機能テレビ10Tにおける処理の流れについて、図35(a)および図35(b)を参照しながら以下に説明する。同図(a)は、送信側の多機能テレビ10Tにおける処理の流れ、同図(b)は、受信側の多機能テレビ10Tにおける処理の流れを示している。
Here, with reference to FIG. 35 (a) and FIG. 35 (b), the flow of processing in the
まず、送信側の多機能テレビ10Tにおける処理について、図35(a)を参照しながら説明する。なお、以下の処理に先立って、送信側の多機能テレビ10Tと受信側の多機能テレビ10Tとの間で、テレビ電話機能または音声電話機能によって通信が確立している状態であるものとする。また、送信側および受信側の多機能テレビ10Tにおいて、動画データなどのコンテンツの共有がなされているものとする。
First, the processing in the
S2081では、共有がなされているコンテンツが表示部4の画面に表示される。その後、表示部4に目印が表示され、入力部4からの入力動作に応じて、目印情報移動制御部14によって、前記したような目印の位置指定動作、種類指定動作、形状指定動作などが行われる。そして、これらの動作に基づいて、目印情報作成部11によって目印情報が生成される(S2082)。なお、目印情報の生成の方法は、前記した実施の形態で示した方法と同様であるので、ここではその説明を省略する。
In S2081, the shared content is displayed on the screen of the
次にS2083において、目印情報作成部11によって作成された目印情報が、通信制御部13の制御に基づいて通信部7から受信側の多機能テレビ10Tに送信される。これにより、受信側の多機能テレビ10Tは、受信した目印情報に基づいてポインティング動作を行うことが可能となる。
In step S <b> 2083, the landmark information created by the landmark
次にS2084において、目印情報移動制御部204が、入力部5によるキー入力によって目印の消去が指示されたか否かを判定する。S2084においてNO、すなわち、目印の消去が指示されていない場合には、S2085において、目印情報移動制御部204によって、目印の表示に関係するキー入力が一定時間なされていないかが判定される。S2085においてNO、すなわち、一定時間内に目印の表示に関係するキー入力がなされた場合には、S2082からの処理に戻る。
Next, in step S <b> 2084, the mark information
一方、S2085においてYES、すなわち、目印の表示に関係するキー入力が一定時間なされていない場合には、S2086において、通信制御部13によって、通信部7を介して受信側の多機能テレビ10Tに対して目印の消去命令が送信される。また、S2087において、表示制御部13によって、表示部4に表示されている目印の消去が行われる。なお、図示していないが、S2087における目印の消去後に再び入力操作情報を待ち、入力操作情報によって目印の表示が指示されたらS2082へ戻る構成であってもよい。
On the other hand, if YES in S2085, that is, if the key input related to the display of the mark has not been made for a certain period of time, in S2086, the
次に、受信側の多機能テレビ10Tにおける処理について、図35(b)を参照しながら説明する。なお、上記した送信側の処理と同様に、以下の処理に先立って、送信側の多機能テレビ10Tと受信側の多機能テレビ10Tとの間で、テレビ電話機能または音声電話機能によって通信が確立している状態であるものとする。また、送信側および受信側の多機能テレビ10Tにおいて、動画データなどのコンテンツの共有がなされているものとする。
Next, processing in the
S2088では、共有がなされているコンテンツが表示部4の画面に表示される。そして、S2089において、送信側の多機能テレビ10Tから送信された目印情報が通信部7を介して受信されると、この目印情報が通信制御部13から目印情報移動制御部14に伝送される。そして、目印情報移動制御部14は、受信した目印情報に基づいて、表示制御部12に対して目印の表示指示を行い、これによって表示部4に目印が表示される(S2090)。
In S2088, the shared content is displayed on the screen of the
次にS2091において、送信側の多機能テレビ10Tから目印の消去命令が通信部7を介して受信されたか否かが通信制御部13によって判定される。S2091においてNO、すなわち、目印の消去命令が受信されていない場合には、S2089およびS2090における処理が繰り返される。
In step S <b> 2091, the
一方、S2091においてYES、すなわち、目印の消去命令が受信された場合には、S2092において、表示制御部13によって、表示部4に表示されている目印の消去が行われる。なお、図示していないが、S2092における目印の消去後にS2089へ戻って再び目印情報の受信を待ち、目印情報を受信したら再度目印を表示する構成であってもよい。
On the other hand, if YES in S2091, that is, if a mark deletion command is received, the
(目印消去制御例その2)
上記の目印消去制御例の変形例として、目印の消去命令を通信せずに、送信側の多機能テレビ10Tと受信側の多機能テレビ10Tとの双方で表示画面から目印を消去する方法について説明する。
(Example of mark deletion control 2)
As a modification of the above-described mark erasure control example, a method for erasing a mark from the display screen on both the transmission-
送信側の多機能テレビ10Tでは、先に説明したように、目印の表示に関連するキー入力操作子の操作が一定時間なされない場合に目印の消去を行う方法を用いて目印を消去するが、受信側の多機能テレビ10Tへの目印の消去命令の送信は行わない。その代わりに、受信側の多機能テレビ10Tでは、送信側の多機能テレビ10Tから目印の表示に関連する通信が一定時間なされない場合に目印の消去を行う。送信側の多機能テレビ10Tから一定時間、目印の移動その他の目印の表示に関連する通信を受信しないと、受信側の多機能テレビ10Tにて表示画面から目印が消える。
In the
送信側の多機能テレビ10Tにおいて目印を消去するか否かを判定するためのキー入力操作子の操作がなされないことを検出する一定時間と、受信側の多機能テレビ10Tにおいて目印を消去するか否かを判定するための表示に関連する通信を受信しないことを検出する一定時間とが同じ間隔であれば、送信側の多機能テレビ10Tにおいて目印が消去されるのとほぼ同時に、受信側の多機能テレビ10Tにおいて目印が消去される。
A certain time for detecting that the operation of the key input operator for determining whether or not to delete the mark in the
図36(a)は、この目印消去制御例における、送信側の多機能テレビ10Tにおける処理の流れ、図36(b)は、受信側の多機能テレビ10Tにおける処理の流れを示している。
FIG. 36A shows the flow of processing in the
まず、送信側の多機能テレビ10Tにおける処理の流れについて説明する。図36(a)において、S2101〜S2105の処理は、前記した図35(a)におけるS2081〜S2083、S2085、およびS2087の処理と同様である。すなわち、図36(a)による処理は、S35(a)のS2084における目印の消去指示検出処理、および、S2086における目印の消去命令の送信処理がないものとなっている点のみ異なり、その他の処理は同様となっている。なお、図示していないが、S2105における目印の消去後に再び入力操作情報を待ち、入力操作情報によって目印の表示が指示されたらS2102へ戻る構成であってもよい。
First, the flow of processing in the
次に、受信側の多機能テレビ10Tにおける処理の流れについて説明する。図36(b)において、S2106〜S2108、およびS2110における処理は、前記した図35(b)におけるS2088〜S2090、およびS2092における処理と同様である。図36(b)による処理では、図35(b)におけるS2091における目印の消去命令の受信確認処理の代わりに、S2109において、送信側の多機能テレビ10Tから目印情報を一定時間受信していないか否かの判断が通信制御部13によって行われる。S2109においてNO、すなわち、一定時間内に目印情報の受信が行われている場合には、S2107からの処理に戻る。一方、S2109においてYES、すなわち、目印情報の受信が一定時間なされていない場合には、S2110の処理に移行する。なお、図示していないが、S2110における目印の消去後にS2107へ戻って再び目印情報の受信を待ち、目印情報を受信したら再度目印を表示する構成であってもよい。
Next, the flow of processing in the
(目印の表示処理の他の例)
次に、目印の表示処理の他の例について説明する。目印の座標情報を単一に利用するだけでなく、目印の座標情報の組を利用して移動の軌跡を相手の情報通信端末に送る形態も考えられる。例えば、送信側の多機能テレビ10Tと受信側の多機能テレビ10Tとで共有する表示コンテンツが地図であり、送信側の多機能テレビ10Tの利用者が、受信側の多機能テレビ10Tの利用者に対して、道案内をすることが考えられる。このような道案内をする際には、目印の移動の軌跡を相手側に認識させることが重要となる。なお、本実施形態では、送信側および受信側ともに、情報通信端末として多機能テレビ10Tを用いた例を示しているが、道案内を行う例としては、送信側および/または受信側の情報通信端末が携帯型電話機10であってもよく、情報通信端末の形態は特に限定されるものではない。
(Other examples of mark display processing)
Next, another example of the mark display process will be described. In addition to using a single piece of mark coordinate information, a form of sending a movement locus to a partner information communication terminal using a set of mark coordinate information is also conceivable. For example, the display content shared between the
(折れ線矢印による表示態様例)
図37は、目印の移動の軌跡を折れ線矢印の形式で表示させた表示画面例を示している。同図に示すように、折れ線矢印は、地図上において、開始点A、中継点BおよびC、到達点Dを順に直線でつなぐとともに、到達点Dに矢印が示された図形となっている。このような折れ線矢印が受信側の多機能テレビ10Tにおいて表示されれば、受信側の利用者は、どのような経路をたどって目的地まで行けばよいかを明確に把握することができる。
(Example of display mode with broken line arrows)
FIG. 37 shows an example of a display screen in which the movement trajectory of the mark is displayed in the form of a broken line arrow. As shown in the figure, the broken line arrow is a figure in which the start point A, the relay points B and C, and the arrival point D are connected in order by a straight line on the map, and an arrow is indicated at the arrival point D. If such a broken line arrow is displayed on the
このような折れ線矢印からなる目印を送受信するには、次のようにすればよい。送信側の多機能テレビ10Tでは、次のような処理が行われる。まず、目印の種類および形状が、折れ線矢印となるように設定される。その後、開始点、中継点、および到達点の位置指定が行われるとともに、指定された位置がバッファに格納される。利用者によって到達点まで位置指定が行われ、確定指示が行われると、バッファに格納された入力操作情報が受信側の多機能テレビ10Tに送信される。
In order to transmit / receive such a marker consisting of a broken line arrow, the following may be performed. In the
なお、これらの処理の詳細については、基本的には前記した実施の形態と同様である。異なる点としては、入力操作情報に含まれる目印の位置情報は、開始点、中継点、および到達点についての位置情報であり、絶対位置指定や相対位置指定の途中の位置については含まれない点である。 The details of these processes are basically the same as those in the above-described embodiment. The difference is that the position information of the mark included in the input operation information is the position information about the start point, the relay point, and the arrival point, and is not included for the position in the middle of absolute position designation or relative position designation. It is.
一方、受信側の多機能テレビ10Tでは、入力操作情報を受信すると、まず折れ線矢印であることが認識される。そして、開始点、中継点、および到達点の位置情報を認識することによって、折れ線矢印が表示される。
On the other hand, when receiving the input operation information, the
なお、上記の処理では、開始点、中継点、および到達点の位置指定は、一旦バッファに格納され、確定した時点で入力操作情報が送信側の多機能テレビ10Tから受信側の多機能テレビ10Tに送信されるようになっている。これに対して、前記した逐次送信モードによって入力操作情報が送信されるようになっていてもよい。この場合、最初に折れ線矢印であることが送信側の多機能テレビ10Tから受信側の多機能テレビ10Tへ伝えられ、受信側の多機能テレビ10Tは、入力操作情報が逐次送られてくると、折れ線矢印を受信した順に延ばしていくようにすることによって実現することができる。
In the above processing, the position designation of the start point, the relay point, and the arrival point is temporarily stored in the buffer, and when the input operation information is confirmed, the input operation information is changed from the transmission-
(逐次送信モードによる表示態様例)
上記のように目印の表示態様を折れ線矢印に設定すれば道案内は簡単にできるが、図6(c)に示したように事前に適用目印の表示態様の候補をとりきめておき、適用目印の表示態様の候補を1つ選択し所望の座標に表示するといった単純なやり方では、折れ線矢印の目印情報を通信することはできない。そこで、図38に示すように、逐次送信モードを用いて、目印を順に移動して道案内を行うようにしてもよい。
(Display mode example in sequential transmission mode)
If the display mode of the mark is set to a broken line arrow as described above, the route guidance can be simplified. However, as shown in FIG. In a simple manner of selecting one display mode candidate and displaying it at a desired coordinate, the marker information of the broken line arrow cannot be communicated. Therefore, as shown in FIG. 38, the route guidance may be performed by sequentially moving the landmarks using the sequential transmission mode.
図38に示す例について説明する。まず、送信側の多機能テレビ10Tにおいて、開始点として座標(100,400)が指定されると、これが逐次送信モードによって受信側の多機能テレビ10Tに送信され、該当位置に目印が表示される。その後、中継点として座標(100,300)、(300,300)、(500,300)が、到達点として座標(500,150)が送信側の多機能テレビ10Tにおいて順に指定され、これが逐次送信モードによって受信側の多機能テレビ10Tに送信され、該当位置に目印が順に表示される。
The example shown in FIG. 38 will be described. First, when the coordinate (100, 400) is designated as a start point in the
以上のような処理が行われれば、受信側の多機能テレビ10Tでは目印がアニメーション的に移動することになるので、道案内が実現される。また、前記した実施の形態における逐次送信モードを用いればよいだけなので、実装も簡単である。
If the processing as described above is performed, the landmark moves in an animation manner on the receiving-
(軌跡情報送信による表示態様例)
上記の逐次送信モードによる表示態様例の場合、目印が移動するたびに入力操作情報が送信側の多機能テレビ10Tから受信側の多機能テレビ10Tへ送信されることになる。すなわち、目印の移動のたびに通信処理が発生してしまうという問題がある。そこで、目印の移動のたびに通信処理が発生しない実施例として、目印の座標情報の組を利用して、移動の軌跡を軌跡情報としてまとめて送信側の多機能テレビ10Tから受信側の多機能テレビ10Tへ送る方法について説明する。図39は、軌跡情報を送受信する際の送信側の多機能テレビ10Tおよび受信側の多機能テレビ10Tにおける表示例を示している。
(Example of display mode by sending trajectory information)
In the case of the display mode example in the above-described sequential transmission mode, input operation information is transmitted from the transmission-
入力操作情報の送信モードとしては、確定情報送信モードを用いるものとする。まず、送信側の多機能テレビ10Tにおいて、開始点として座標(100,400)が指定される。この時点では、この位置情報は受信側に送信されず、送信側の多機能テレビ10Tにおけるバッファに蓄えられることになる。その後、中継点として座標(100,300)、(300,300)、(500,300)が、到達点として座標(500,150)が送信側の多機能テレビ10Tにおいて順に指定され、この情報がバッファに蓄えられる。
As a transmission mode of input operation information, a fixed information transmission mode is used. First, in the
そして、これらの開始点、中継点、および到達点が確定されると、これらの点の位置情報がバッファから読み出され、軌跡情報が目印情報作成部11によって生成される。そして、この軌跡情報を含む入力操作情報が送信側の多機能テレビ10Tから受信側の多機能テレビ10Tへ向けて送信される。受信側の多機能テレビ10Tは、軌跡情報を含む入力操作情報を受信すると、開始点から到達点までを順に所定の時間間隔(例えば1秒)で目印を移動させて表示する。この受信側の多機能テレビ10Tの処理を、図42を用いて説明する。なお、以下の処理に先立って、送信側の多機能テレビ10Tと受信側の多機能テレビ10Tとの間で、テレビ電話機能または音声電話機能によって通信が確立している状態であるものとする。また、送信側および受信側の多機能テレビ10Tにおいて、動画データなどのコンテンツの共有がなされているものとする。
When these start point, relay point, and arrival point are determined, the position information of these points is read from the buffer, and the trajectory information is generated by the landmark
S2131では、共有がなされているコンテンツが表示部4の画面に表示される。そして、S2132において、送信側の多機能テレビ10Tから送信された軌跡情報を含む入力操作情報が通信部7を介して受信されると、この軌跡情報を含む入力操作情報が通信制御部13から目印情報移動制御部14に伝送される。そして、目印情報移動制御部14は、受信した軌跡情報から最初の座標の目印情報を読み出し(S2133)、表示制御部12に対して目印の表示指示を行い、これによって表示部4に目印が表示される(S2134)。そして、目印情報の表示位置と表示位置近辺のパターンとを一時的に記憶する。表示した目印情報が軌跡情報に含まれる最後の座標の目印情報である場合には、処理を終了する(S2135)。
In S 2131, the shared content is displayed on the screen of the
表示した目印情報が軌跡情報に含まれる最後の座標の目印情報でない場合には、S2136で一定時間(例えば1秒間)経過した後、受信した軌跡情報から次の座標の目印情報を読み出し(S2137)、表示制御部12に対して目印を移動して表示するように表示指示を行い、これによって表示部4に目印が表示される(S2138)。その後、S2135に戻り、表示した目印情報が軌跡情報に含まれる最後の座標の目印情報かどうかを判別する。
When the displayed landmark information is not the landmark information of the last coordinate included in the trajectory information, after a predetermined time (for example, 1 second) has elapsed in S2136, the landmark information of the next coordinate is read from the received trajectory information (S2137). Then, the
S2138における表示制御部12に対して目印を移動して表示する表示指示は、既に表示している目印を消去して新しい座標位置に目印を表示することであるが、既に表示している目印を消去せずに新しい座標位置に目印を表示してもかまわない。また、目印の態様は、受信した軌跡情報を含む入力操作情報に含まれる目印の態様に従って変更してもよいし、受信側の多機能テレビ10Tにあらかじめ固定的に設定された方法で目印の態様に従って変更してもよいし、直前に目印を表示した座標位置からの移動方向や移動距離に応じて目印の態様を変更してもよいし、もちろん目印の態様を変更しなくてもよい。なお、直前に目印を表示した座標位置からの移動方向や移動距離に応じて目印の態様を変更する実施例については、詳細に後述する。
The display instruction to move the mark to the
以上のような処理が行われれば、受信側の多機能テレビ10Tでは目印がアニメーション的に移動することになるので、道案内が実現される。また、入力操作情報の送受信は、開始点から到達点までが確定した後に行われることになるので、通信処理の回数を低く抑えることが可能となる。
If the processing as described above is performed, the landmark moves in an animation manner on the receiving-
(目印の表示態様の他の例)
図40(a)〜図40(e)は、目印を移動させて表示させる際に、目印の表示態様を変更する場合の表示画面例を示している。この例では、目印の表示態様を、目印の移動方向および移動距離に応じて変更するようになっており、一例として、目印の表示態様として擬人化キャラクタを用いている。
(Other examples of mark display mode)
FIGS. 40A to 40E show examples of display screens when the display mode of the mark is changed when the mark is moved and displayed. In this example, the display mode of the mark is changed according to the moving direction and the moving distance of the mark. As an example, anthropomorphic characters are used as the display mode of the mark.
受信側の多機能テレビ10Tは、送信側の多機能テレビ10Tから軌跡情報を含む入力操作情報を受信する。そして、受信側の多機能テレビ10Tにおいて、目印情報移動制御部14は、表示制御部12に対して、受信した軌跡情報に従い、図40(a)に示すとおり、まず最初の座標情報に目印を表示するように指示を行う。このとき、目印の表示態様として、擬人化キャラクタが立ち止っている絵を用いる。以下、目印の移動表示は、目印情報移動制御部14による表示制御部12に対する指示によって行われる。次に、図40(b)では、図40(a)の座標位置に対して上方向に短距離移動した座標に目印を表示する。このとき、目印の表示態様として、擬人化キャラクタが上方向に向かって歩いている絵を用いる。これは、移動方向が上方向であるため上方向に向かっている絵を選択し、移動距離が短距離なので歩いている絵を選択している。
The reception-
次に、図40(c)では、図40(b)の座標位置に対して右方向に長距離移動した座標に目印を表示する。このとき、目印の表示態様として、擬人化キャラクタが右方向に向かって走っている絵を用いる。これは、移動方向が右方向であるため右方向に向かっている絵を選択し、移動距離が長距離なので走っている絵を選択している。以下、図40(d)、図40(e)でも、目印軌跡情報に応じて、直前の座標からの移動方向と移動距離に応じて、目印の表示態様としての擬人化キャラクタの絵を選択する。これにより、道案内のための目印の移動が、より利用者にわかりやすく表示される。 Next, in FIG. 40C, marks are displayed at the coordinates moved a long distance in the right direction with respect to the coordinate positions of FIG. At this time, a picture in which the anthropomorphic character is running in the right direction is used as the display mode of the mark. This is because the moving direction is the right direction, so the picture moving toward the right is selected, and the moving picture is selected because the moving distance is long. Hereinafter, also in FIG. 40D and FIG. 40E, according to the mark trajectory information, a picture of anthropomorphic character as a mark display mode is selected according to the moving direction and moving distance from the immediately preceding coordinates. . Thereby, the movement of the landmark for route guidance is displayed in a more easily understandable manner for the user.
なお、本発明の目的は、上述した実施形態1・2・3における携帯型電話機10または通信機能を搭載した多機能テレビ10Tによって達成する以外にも、制御部1が備えている各機能ブロックを実現するソフトウェアである端末制御プログラムとしても達成可能である。
The object of the present invention is achieved not only by the
また、本発明の目的は、上述した機能を実現するソフトウェアであるプログラムのプログラムコードをコンピュータで読み取り可能に記録した記録媒体を、システムあるいは装置に供給し、そのシステムあるいは装置のコンピュータ(またはCPU,MPU)が記録媒体に記録されているプログラムコードを読み出し実行することによっても達成可能である。この場合、記録媒体から読み出されたプログラムコード自体が上述した機能を実現することになり、そのプログラムコードを記録した記録媒体は本発明を構成する。 Another object of the present invention is to supply a recording medium in which a program code of a program which is software for realizing the functions described above is recorded so as to be readable by a computer, to the system or apparatus, and the computer (or CPU, CPU) of the system or apparatus This can also be achieved by the MPU) reading and executing the program code recorded on the recording medium. In this case, the program code itself read from the recording medium realizes the above-described function, and the recording medium on which the program code is recorded constitutes the present invention.
なお、上記記録媒体は、磁気テープやカセットテープ、フロッピー(登録商標)ディスク、ハードディスク等の磁気ディスクや、CD−ROM/MO/MD/DVD/CD−R等の光ディスク、ICカード(メモリカードを含む)、あるいはマスクROM/EPROM/EEPROM/フラッシュROM等の半導体メモリ等を用いることができる。 The recording medium may be a magnetic tape, a cassette tape, a floppy (registered trademark) disk, a magnetic disk such as a hard disk, an optical disk such as a CD-ROM / MO / MD / DVD / CD-R, an IC card (memory card). Or a semiconductor memory such as a mask ROM / EPROM / EEPROM / flash ROM or the like.
なお、上記各実施形態の携帯型電話機10または多機能テレビ10Tでは、絶対位置指定モードにおいて目印の種類と形状を、相対位置指定モードにおいて目印のサイズを変更するようにしているが、本発明はこれに限定されるものではない。例えば、どちらのモードでも、目印の種類と形状とサイズを変更するようにしてもよいし、目印の線種や色も変更できるようにしてもよい。さらに、各操作にダイヤルボタン以外のボタンを使用してもよい。
In the
また、上記各実施形態では、絶対位置指定モード、相対位置指定モード、確定、または座標指定前や座標指定中であることを示すために、目印の線種や濃度等の表示態様を変化させているが、本発明はこれに限定されるものではなく、目印の色や、種類や、形状や、サイズを変化させてもよい。 In each of the above embodiments, the display mode such as the line type and density of the mark is changed in order to indicate that the absolute position designation mode, the relative position designation mode, the confirmation, or the coordinate designation is in progress or during coordinate designation. However, the present invention is not limited to this, and the color, type, shape, and size of the mark may be changed.
また、上記各実施形態では、本発明を携帯型電話機または多機能テレビ10Tに適用した場合について説明したが、本発明は特にこれらに限定されるものではなく、例えば、ディスプレイ付きの電話機や、ディスプレイ付きのFAX、ディスプレイ付きのコードレス子機等にも適用可能である。
In each of the above embodiments, the case where the present invention is applied to a mobile phone or a
本発明は上述した各実施形態に限定されるものではなく、請求項に示した範囲で種々の変更が可能であり、異なる実施形態にそれぞれ開示された技術的手段を適宜組み合わせて得られる実施形態についても本発明の技術的範囲に含まれる。 The present invention is not limited to the above-described embodiments, and various modifications are possible within the scope shown in the claims, and embodiments obtained by appropriately combining technical means disclosed in different embodiments. Is also included in the technical scope of the present invention.
また、本発明は、複数のネットワーク情報通信端末において、自入力の入力操作により発生する、ポインティング表示と連動させた表示を、他の情報通信端末に行わせしめる情報を通信する情報通信端末であって、表示画面上の領域を、キーの配置位置と同じに対応させ、キーを押下することで表示領域を指定する手段と、指定した領域の位置を示す、目印を表示する手段と、他の情報通信端末に、上記指定された表示領域を指定する領域指定情報、または目印情報を構成する要素のうち、少なくともひとつの送信情報を送信する手段を有することを特徴とする情報通信端末であってもよい。 The present invention also provides an information communication terminal that communicates information that causes another information communication terminal to perform display linked to a pointing display, which is generated by a self-input input operation, in a plurality of network information communication terminals. The area on the display screen is made to correspond to the same position as the key, and the means for designating the display area by pressing the key, the means for displaying the mark indicating the position of the designated area, and other information An information communication terminal characterized in that the communication terminal has means for transmitting at least one transmission information among the elements constituting the area designation information or landmark information for designating the designated display area. Good.
また、本発明は、表示画面上の領域を、少なくとも一つ以上に分割指定できる機能を有する情報通信端末であって、受信された領域を指定する情報、または領域を示す目印に関する情報の、少なくともにいずれかに基づいて、上記領域の位置を示す目印を、上記領域内に表示することを特徴とする情報通信端末と表現することもできる。 Further, the present invention is an information communication terminal having a function capable of designating an area on a display screen to be divided into at least one or more, at least of information specifying a received area or information about a mark indicating the area. Based on any of the above, it is possible to express an information communication terminal characterized by displaying a mark indicating the position of the area in the area.
本発明は、複数のネットワーク情報通信端末において、自入力の入力操作により発生する、ポインティング表示と連動させた表示を、他の情報通信端末に行わせしめる情報を通信する情報通信端末を制御するコンピュータに実行させるプログラムを記憶した記憶媒体であって、表示画面上の領域を、キーの配置位置と同じに対応させ、キーを押下することで表示領域を指定する機能と、指定した領域の位置を示す、目印を表示する機能と、他の情報通信端末に、上記指定された表示領域を指定する領域指定情報、または目印情報を構成する要素のうち、少なくともひとつの送信情報を送信することを特徴とするコンピュータに実行させる端末制御プログラムを記録した記録媒体であってもよい。 The present invention provides a computer that controls an information communication terminal that communicates information that causes another information communication terminal to perform display linked to pointing display, which is generated by a self-input input operation, in a plurality of network information communication terminals. A storage medium storing a program to be executed, the area on the display screen corresponding to the same key layout position, and the function of designating the display area by pressing the key, and the position of the designated area A function of displaying a mark, and transmitting to the other information communication terminal at least one transmission information among the area designating information designating the designated display area or elements constituting the mark information It may be a recording medium that records a terminal control program to be executed by a computer.
また、本発明は、表示画面上の領域を、少なくとも一つ以上に分割指定できる機能を有する情報通信端末を制御するコンピュータに実行させるプログラムを記憶した記憶媒体であって、受信された領域を指定する情報、または領域を示す目印に関する情報の、少なくともにいずれかに基づいて、上記領域の位置を示す目印を、上記領域内に表示することを特徴とするコンピュータに実行させる端末制御プログラムを記憶した記憶媒体であってもよい。 Further, the present invention is a storage medium storing a program to be executed by a computer controlling an information communication terminal having a function capable of specifying an area on a display screen to be divided into at least one or more, and specifying the received area A terminal control program for causing a computer to execute the display of the mark indicating the position of the area in the area based on at least one of the information to be performed or the information on the mark indicating the area It may be a storage medium.
本発明に係る情報通信端末は、通信先の情報通信端末と何らかのコンテンツを共有する場合に効果を奏するものであるので、携帯型電話機、通信機能を有する多機能テレビの他に、例えば、通信機能を有するコンピュータ(デスクトップ型、ノートブック型、PDA(Personal Digital Assistant)型などを含む)などにも適用可能である。 Since the information communication terminal according to the present invention is effective when sharing some content with the information communication terminal of the communication destination, in addition to the mobile phone and the multi-function TV having the communication function, for example, the communication function It can also be applied to computers (including desktop type, notebook type, PDA (Personal Digital Assistant) type, etc.).
1 制御部
2 ROM
3 RAM
4 表示部
4a 有効表示エリア
5 入力部(入力受付部)
5a ダイヤルボタン
6 音声処理部
6a 受話部
6b 送話部
7 通信部
7a アンテナ
10 携帯型電話機(情報通信端末)
10T 多機能テレビ(情報通信端末)
11 目印情報作成部(目印情報作成手段)
12 表示制御部(表示制御手段)
13 通信制御部(通信制御手段)
14 目印情報移動制御部(目印情報移動制御手段)
20a 表示部(送信側)
20b 表示部(受信側)
21b 有効表示エリア(受信側)
21a 有効表示エリア(送信側)
22 ダイヤルボタン
23a 目印(送信側)
23b 目印(受信側)
31 矢印(目印)
32 十字(目印)
33 丸(目印)
34 四角(目印)
70a 表示部(送信側)
71a 目印(送信側)
72a 分割グリッド線
70b 表示部(受信側)
71b 目印(受信側)
80a 表示部(送信側)
81a 目印(送信側)
82a 分割グリッド線
80b 表示部(受信側)
81b 目印(受信側)
120a 表示部(送信側)
121a 目印(送信側)
122a 分割グリッド線
120b 表示部(受信側)
121b 目印(受信側)
130a 表示部(送信側)
131a 目印(送信側)
132a 分割グリッド線
130b 表示部(受信側)
131b 目印(受信側)
201 テレビ放送受信部
202 カメラ
203 チャンネル設定部(チャンネル設定手段)
204 ネットワークコンテンツ受信部(ネットワークコンテンツ受信手段)
205 画像情報保持部
206 画像情報蓄積部
1
3 RAM
4
10T Multi-function TV (information communication terminal)
11. Mark information creation part (mark information creation means)
12 Display control unit (display control means)
13 Communication control unit (communication control means)
14 Mark Information Movement Control Unit (Mark Information Movement Control Unit)
20a Display unit (transmission side)
20b Display unit (receiving side)
21b Effective display area (receiving side)
21a Effective display area (transmission side)
22
23b Placement (receiving side)
31 Arrow (Mark)
32 Cross (Mark)
33 Circle (marker)
34 Square (Mark)
70a Display section (transmission side)
71a Mark (Sender)
72a Divided
71b Placement (receiving side)
80a Display section (transmission side)
81a Mark (Sender)
82a Divided
81b Mark (receiving side)
120a Display unit (transmission side)
121a Placemark (Sender)
122a
121b Placement (receiving side)
130a Display unit (transmission side)
131a Mark (Sender)
132a
131b Placement (receiving side)
201 TV
204 Network content receiving unit (network content receiving means)
205 Image
Claims (28)
外部からコンテンツデータを取得するコンテンツ取得手段と、
上記コンテンツ取得手段によって取得されたコンテンツデータ、および、目印を上記表示画面に表示するように上記表示部を制御する表示制御手段と、
上記入力受付部によって受け付けられた利用者による入力操作情報に基づいて、上記目印の表示位置を移動させる目印情報移動制御手段と、
上記目印の位置を示す目印情報、および、上記表示部に表示されているコンテンツデータの提供元を示すコンテンツ提供元情報を他の情報通信端末に対して送信するように上記通信部を制御する通信制御手段とを備えていることを特徴とする情報通信端末。 A display unit that displays an image based on image information on a display screen, an input receiving unit that includes an input operator that receives an input operation by a user, and a communication unit that communicates information with other information communication terminals. An information communication terminal provided,
Content acquisition means for acquiring content data from outside;
Display control means for controlling the display unit so as to display content data acquired by the content acquisition means and a mark on the display screen;
Mark information movement control means for moving the display position of the mark based on input operation information by the user received by the input receiving unit;
Communication for controlling the communication unit to transmit mark information indicating the position of the mark and content provider information indicating the provider of the content data displayed on the display unit to another information communication terminal An information communication terminal comprising a control means.
上記コンテンツ取得手段が、受信すべきテレビ放送のチャンネルを設定するチャンネル設定手段であり、
上記通信制御手段が、上記コンテンツ提供元情報として、上記チャンネル設定部によって設定されたチャンネルのチャンネル情報を送信するように上記通信部を制御することを特徴とする請求項1記載の情報通信端末。 In addition to a TV broadcast receiving unit for receiving TV broadcasts,
The content acquisition means is channel setting means for setting a channel of a television broadcast to be received,
The information communication terminal according to claim 1, wherein the communication control unit controls the communication unit to transmit channel information of a channel set by the channel setting unit as the content provider information.
上記通信制御手段が、上記コンテンツ提供元情報として、上記ネットワークコンテンツ受信手段によって取得されたコンテンツデータが提供されるネットワークアドレスのアドレス情報を送信するように上記通信部を制御することを特徴とする請求項1記載の情報通信端末。 The content acquisition means is network content reception means for acquiring the content data from an external network via the communication unit;
The communication control unit controls the communication unit to transmit address information of a network address to which content data acquired by the network content receiving unit is provided as the content provider information. Item 1. An information communication terminal according to item 1.
請求項1記載の情報通信端末からの目印情報およびコンテンツ提供元情報を受信するように上記通信部を制御する通信制御手段と、
受信したコンテンツ提供元情報に基づいて、外部からコンテンツデータを取得するコンテンツ取得手段と、
上記表示画面に、受信した目印情報に基づいて、目印を表示するように上記表示部を制御するとともに、上記コンテンツ取得手段によって取得されたコンテンツデータを表示するように上記表示部を制御する表示制御手段とを備えていることを特徴とする情報通信端末。 An information communication terminal comprising: a display unit that displays an image based on image information on a display screen; and a communication unit that communicates information with other information communication terminals,
Communication control means for controlling the communication unit so as to receive the landmark information and the content provider information from the information communication terminal according to claim 1;
Content acquisition means for acquiring content data from the outside based on the received content provider information;
Display control for controlling the display unit to display a landmark on the display screen based on the received landmark information and to control the display unit to display content data acquired by the content acquisition unit And an information communication terminal.
請求項2記載の情報通信端末からの目印情報およびチャンネル情報を受信するように上記通信部を制御する通信制御手段と、
受信したチャンネル情報に対応するチャンネルを受信すべきテレビ放送のチャンネルとして設定するチャンネル設定手段と、
上記表示画面に、受信した目印情報に基づいて、目印を表示するように上記表示部を制御するとともに、上記チャンネル設定手段によって設定されたチャンネルのテレビ映像を表示するように上記表示部を制御する表示制御手段とを備えていることを特徴とする情報通信端末。 An information communication terminal comprising: a display unit that displays an image based on image information on a display screen; a communication unit that communicates information with other information communication terminals; and a television broadcast receiver that receives television broadcasts. There,
Communication control means for controlling the communication unit so as to receive landmark information and channel information from the information communication terminal according to claim 2;
Channel setting means for setting a channel corresponding to the received channel information as a television broadcast channel to be received;
On the display screen, based on the received landmark information, the display unit is controlled to display a landmark, and the display unit is controlled to display a television image of the channel set by the channel setting means. An information communication terminal comprising display control means.
請求項2記載の情報通信端末からの目印情報およびアドレス情報を受信するように上記通信部を制御する通信制御手段と、
受信したアドレス情報に基づいて、外部のネットワークから上記通信部を介して該当アドレスにおいて提供されるコンテンツデータを取得するネットワークコンテンツ受信手段と、
上記表示画面に、受信した目印情報に基づいて、目印を表示するように上記表示部を制御するとともに、上記ネットワークコンテンツ受信手段によって取得されたコンテンツデータを表示するように上記表示部を制御する表示制御手段とを備えていることを特徴とする情報通信端末。 An information communication terminal comprising: a display unit that displays an image based on image information on a display screen; and a communication unit that communicates information with other information communication terminals,
Communication control means for controlling the communication unit so as to receive landmark information and address information from the information communication terminal according to claim 2;
Network content receiving means for acquiring content data provided at the corresponding address from the external network via the communication unit based on the received address information;
A display for controlling the display unit to display a landmark on the display screen based on the received landmark information and to control the display unit to display content data acquired by the network content receiving unit. An information communication terminal comprising a control means.
外部からコンテンツデータを取得するコンテンツ取得ステップと、
上記コンテンツ取得ステップで取得されたコンテンツデータ、および、目印を上記表示画面に表示するように上記表示部を制御する表示制御ステップと、
上記入力受付部によって受け付けられた利用者による入力操作情報に基づいて、上記目印の表示位置を移動させる目印情報移動制御ステップと、
上記目印の位置を示す目印情報、および、上記表示部に表示されているコンテンツデータの提供元を示すコンテンツ提供元情報を他の情報通信端末に対して送信するように上記通信部を制御する通信制御ステップとを有していることを特徴とする端末制御方法。 A display unit that displays an image based on image information on a display screen, an input receiving unit that includes an input operator that receives an input operation by a user, and a communication unit that communicates information with other information communication terminals. A terminal control method for an information communication terminal provided,
A content acquisition step of acquiring content data from the outside;
A display control step of controlling the display unit so as to display the content data acquired in the content acquisition step and a mark on the display screen;
A mark information movement control step for moving the display position of the mark based on input operation information by the user received by the input receiving unit;
Communication for controlling the communication unit to transmit mark information indicating the position of the mark and content provider information indicating the provider of the content data displayed on the display unit to another information communication terminal A terminal control method comprising: a control step.
請求項1記載の情報通信端末からの目印情報およびコンテンツ提供元情報を受信するように上記通信部を制御する通信制御ステップと、
受信したコンテンツ提供元情報に基づいて、外部からコンテンツデータを取得するコンテンツ取得ステップと、
上記表示画面に、受信した目印情報に基づいて、目印を表示するように上記表示部を制御するとともに、上記コンテンツ取得ステップにおいて取得されたコンテンツデータを表示するように上記表示部を制御する表示制御ステップとを有していることを特徴とする端末制御方法。 A terminal control method for an information communication terminal comprising: a display unit that displays an image based on image information on a display screen; and a communication unit that communicates information with another information communication terminal.
A communication control step for controlling the communication unit so as to receive the landmark information and the content provider information from the information communication terminal according to claim 1;
A content acquisition step of acquiring content data from the outside based on the received content provider information;
Display control for controlling the display unit to display a landmark on the display screen based on the received landmark information, and to control the display unit to display the content data acquired in the content acquisition step. And a terminal control method.
特定の動画データ、および、目印を上記表示画面に表示するように上記表示部を制御する表示制御手段と、
上記入力受付部によって受け付けられた利用者による入力操作情報に基づいて、上記目印の表示位置を移動させる目印情報移動制御手段と、
上記表示部において上記動画データの再生を開始したときに、該動画データの再生開始を指示する再生命令情報を他の情報通信端末に対して送信するように上記通信部を制御するとともに、上記再生命令情報を送信した後に、上記目印の位置を示す目印情報を上記他の情報通信端末に対して送信するように上記通信部を制御する通信制御手段とを備えていることを特徴とする情報通信端末。 A display unit that displays an image based on image information on a display screen, an input receiving unit that includes an input operator that receives an input operation by a user, and a communication unit that communicates information with other information communication terminals. An information communication terminal provided,
Display control means for controlling the display unit to display specific moving image data and a mark on the display screen;
Mark information movement control means for moving the display position of the mark based on input operation information by the user received by the input receiving unit;
When the reproduction of the moving image data is started on the display unit, the communication unit is controlled to transmit reproduction instruction information for instructing the reproduction start of the moving image data to another information communication terminal, and the reproduction An information communication comprising: communication control means for controlling the communication unit so as to transmit the mark information indicating the position of the mark to the other information communication terminal after transmitting the command information Terminal.
上記表示制御手段が、上記特定の動画データとして、上記ネットワークコンテンツ受信手段によって取得される動画データを上記表示画面に表示するように上記表示部を制御するとともに、
上記通信制御手段が、上記ネットワークコンテンツ受信手段によって取得された動画データが提供されるネットワークアドレスのアドレス情報を上記他の情報通信端末に対して送信するように上記通信部を制御することを特徴とする請求項9記載の情報通信端末。 Network content receiving means for acquiring the moving image data from an external network via the communication unit;
The display control unit controls the display unit to display the moving image data acquired by the network content receiving unit on the display screen as the specific moving image data,
The communication control unit controls the communication unit to transmit address information of a network address to which the moving image data acquired by the network content receiving unit is provided to the other information communication terminal. The information communication terminal according to claim 9.
上記表示制御手段が、上記特定の動画データとして、上記画像情報蓄積部に記憶されている動画データを上記表示画面に表示するように上記表示部を制御するとともに、
上記通信制御手段が、上記画像情報蓄積部に記憶されている動画データを上記他の情報通信端末に対して送信するように上記通信部を制御することを特徴とする請求項9記載の情報通信端末。 An image information storage unit for storing the moving image data;
The display control means controls the display unit to display the moving image data stored in the image information storage unit on the display screen as the specific moving image data,
10. The information communication according to claim 9, wherein the communication control unit controls the communication unit to transmit the moving image data stored in the image information storage unit to the other information communication terminal. Terminal.
請求項9記載の情報通信端末からの上記動画データの再生命令情報および目印情報を受信するように上記通信部を制御する通信制御手段と、
上記再生命令を受信した際に、上記動画データの再生を開始して該動画データを表示するように上記表示部を制御するとともに、受信した目印情報に基づいて、目印を表示するように上記表示部を制御する表示制御手段とを備えていることを特徴とする情報通信端末。 An information communication terminal comprising: a display unit that displays an image based on image information on a display screen; and a communication unit that communicates information with other information communication terminals,
Communication control means for controlling the communication unit so as to receive reproduction instruction information and landmark information of the moving image data from the information communication terminal according to claim 9;
When the playback instruction is received, the display unit is controlled to start playback of the moving image data and display the moving image data, and to display the mark based on the received mark information. An information communication terminal comprising display control means for controlling the unit.
請求項10記載の情報通信端末からの上記動画データの再生命令情報、上記アドレス情報、および目印情報を受信するように上記通信部を制御する通信制御手段と、
受信したアドレス情報に基づいて、外部のネットワークから上記通信部を介して該当アドレスにおいて提供される動画データを取得するネットワークコンテンツ受信手段をさらに備え、
上記再生命令を受信した際に、上記ネットワークコンテンツ受信手段によって取得される上記動画データの再生を開始して該動画データを表示するように上記表示部を制御するとともに、受信した目印情報に基づいて、目印を表示するように上記表示部を制御する表示制御手段とを備えていることを特徴とする情報通信端末。 An information communication terminal comprising: a display unit that displays an image based on image information on a display screen; and a communication unit that communicates information with other information communication terminals,
Communication control means for controlling the communication unit to receive the reproduction instruction information of the moving image data, the address information, and the landmark information from the information communication terminal according to claim 10;
Network content receiving means for acquiring video data provided at the corresponding address from the external network via the communication unit based on the received address information,
When the playback instruction is received, the display unit is controlled to start playback of the moving image data acquired by the network content receiving means and display the moving image data, and based on the received landmark information An information communication terminal comprising display control means for controlling the display unit so as to display a mark.
請求項11記載の情報通信端末からの上記動画データの再生命令情報、上記動画データ、および目印情報を受信するように上記通信部を制御する通信制御手段と、
上記再生命令を受信した際に、上記通信部を介して受信された動画データの再生を開始して該動画データを表示するように上記表示部を制御するとともに、受信した目印情報に基づいて、目印を表示するように上記表示部を制御する表示制御手段とを備えていることを特徴とする情報通信端末。 An information communication terminal comprising: a display unit that displays an image based on image information on a display screen; and a communication unit that communicates information with other information communication terminals,
Communication control means for controlling the communication unit to receive the reproduction instruction information of the moving image data, the moving image data, and landmark information from the information communication terminal according to claim 11;
When the playback command is received, the display unit is controlled to start playback of the video data received via the communication unit and display the video data, and based on the received landmark information, An information communication terminal comprising: display control means for controlling the display unit so as to display a mark.
特定の動画データ、および、目印を上記表示画面に表示するように上記表示部を制御する表示制御ステップと、
上記入力受付部によって受け付けられた利用者による入力操作情報に基づいて、上記目印の表示位置を移動させる目印情報移動制御ステップと、
上記表示部において上記動画データの再生を開始したときに、該動画データの再生開始を指示する再生命令情報を他の情報通信端末に対して送信するように上記通信部を制御するとともに、上記再生命令情報を送信した後に、上記目印の位置を示す目印情報を上記他の情報通信端末に対して送信するように上記通信部を制御する通信制御ステップとを有していることを特徴とする端末制御方法。 A display unit that displays an image based on image information on a display screen, an input receiving unit that includes an input operator that receives an input operation by a user, and a communication unit that communicates information with other information communication terminals. A terminal control method for an information communication terminal provided,
A display control step for controlling the display unit to display specific video data and a mark on the display screen;
A mark information movement control step for moving the display position of the mark based on input operation information by the user received by the input receiving unit;
When the reproduction of the moving image data is started on the display unit, the communication unit is controlled to transmit reproduction instruction information for instructing the reproduction start of the moving image data to another information communication terminal, and the reproduction And a communication control step for controlling the communication unit so as to transmit the mark information indicating the position of the mark to the other information communication terminal after transmitting the command information. Control method.
請求項9記載の情報通信端末からの上記動画データの再生命令情報および目印情報を受信するように上記通信部を制御する通信制御ステップと、
上記再生命令を受信した際に、上記動画データの再生を開始して該動画データを表示するように上記表示部を制御するとともに、受信した目印情報に基づいて、目印を表示するように上記表示部を制御する表示制御ステップとを有していることを特徴とする端末制御方法。 A terminal control method for an information communication terminal comprising: a display unit that displays an image based on image information on a display screen; and a communication unit that communicates information with another information communication terminal.
A communication control step of controlling the communication unit so as to receive reproduction instruction information and landmark information of the moving image data from the information communication terminal according to claim 9;
When the playback instruction is received, the display unit is controlled to start playback of the moving image data and display the moving image data, and to display the mark based on the received mark information. And a display control step for controlling the unit.
上記入力受付部によって受け付けられた利用者による入力操作情報に基づいて、目印の表示位置を指定する目印情報を作成する目印情報作成手段と、
上記目印情報、および、上記目印の消去命令を他の情報通信端末に対して送信するように上記通信部を制御する通信制御手段とを備えていることを特徴とする情報通信端末。 A display unit that displays an image based on image information on a display screen, an input receiving unit that includes an input operator that receives an input operation by a user, and a communication unit that communicates information with other information communication terminals. An information communication terminal provided,
Mark information creating means for creating mark information for designating the display position of the mark based on the input operation information by the user received by the input receiving unit;
An information communication terminal comprising: communication control means for controlling the communication unit so as to transmit the mark information and an instruction to delete the mark to another information communication terminal.
請求項18〜21の何れか一項に記載の情報通信端末からの目印情報および目印の消去命令を受信するように上記通信部を制御する通信制御手段と、
上記表示画面に、受信した目印情報に基づいて、目印を表示するように上記表示部を制御するとともに、目印の消去命令を受信した場合に、表示されている目印を消去するように上記表示部を制御する表示制御手段とを備えていることを特徴とする情報通信端末。 An information communication terminal comprising: a display unit that displays an image based on image information on a display screen; and a communication unit that communicates information with other information communication terminals,
Communication control means for controlling the communication unit to receive mark information and a mark erasure command from the information communication terminal according to any one of claims 18 to 21;
The display unit controls the display unit to display a mark on the display screen based on the received mark information, and deletes the displayed mark when a mark erasing command is received. An information communication terminal comprising display control means for controlling the information.
他の情報通信端末からの目印情報を受信するように上記通信部を制御する通信制御手段と、
上記表示画面に、受信した目印情報に基づいて、目印を表示するように上記表示部を制御するとともに、上記通信制御手段が上記目印情報を所定の期間受信しなかった場合に、表示されている目印を消去するように上記表示部を制御する表示制御手段とを備えていることを特徴とする情報通信端末。 An information communication terminal comprising: a display unit that displays an image based on image information on a display screen; and a communication unit that communicates information with other information communication terminals,
Communication control means for controlling the communication unit so as to receive landmark information from other information communication terminals;
Displayed on the display screen when the display unit is controlled to display a mark based on the received mark information and when the communication control means does not receive the mark information for a predetermined period. An information communication terminal comprising: display control means for controlling the display unit so as to erase the mark.
上記入力受付部によって受け付けられた利用者による入力操作情報に基づいて、目印の表示位置を指定する目印情報を作成する目印情報作成ステップと、
上記目印情報、および、上記目印の消去命令を他の情報通信端末に対して送信するように上記通信部を制御する通信制御ステップとを有していることを特徴とする端末制御方法。 A display unit that displays an image based on image information on a display screen, an input receiving unit that includes an input operator that receives an input operation by a user, and a communication unit that communicates information with other information communication terminals. A terminal control method for an information communication terminal provided,
A landmark information creating step for creating landmark information for designating the display position of the landmark based on the input operation information by the user accepted by the input accepting unit;
A terminal control method, comprising: a communication control step of controlling the communication unit so as to transmit the mark information and an instruction to delete the mark to another information communication terminal.
請求項18〜21の何れか一項に記載の情報通信端末からの目印情報および目印の消去命令を受信するように上記通信部を制御する通信制御ステップと、
上記表示画面に、受信した目印情報に基づいて、目印を表示するように上記表示部を制御するとともに、目印の消去命令を受信した場合に、表示されている目印を消去するように上記表示部を制御する表示制御ステップとを有していることを特徴とする端末制御方法。 A terminal control method for an information communication terminal comprising: a display unit that displays an image based on image information on a display screen; and a communication unit that communicates information with another information communication terminal.
A communication control step of controlling the communication unit so as to receive mark information and a mark erasure command from the information communication terminal according to any one of claims 18 to 21;
The display unit controls the display unit to display a mark on the display screen based on the received mark information, and deletes the displayed mark when a mark erasing command is received. And a display control step for controlling the terminal.
他の情報通信端末からの目印情報を受信するように上記通信部を制御する通信制御ステップと、
上記表示画面に、受信した目印情報に基づいて、目印を表示するように上記表示部を制御するとともに、上記通信制御手段が上記目印情報を所定の期間受信しなかった場合に、表示されている目印を消去するように上記表示部を制御する表示制御ステップとを有していることを特徴とする端末制御方法。 A terminal control method for an information communication terminal comprising: a display unit that displays an image based on image information on a display screen; and a communication unit that communicates information with another information communication terminal.
A communication control step for controlling the communication unit to receive landmark information from other information communication terminals;
Displayed on the display screen when the display unit is controlled to display a mark based on the received mark information and when the communication control means does not receive the mark information for a predetermined period. And a display control step of controlling the display unit so as to erase the mark.
上記各手段をコンピュータに実現させることを特徴とする端末制御プログラム。 A terminal control program for operating the information communication terminal according to any one of claims 1 to 6, 9 to 14, and 18 to 23,
A terminal control program for causing a computer to realize the above means.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004055129A JP2005244866A (en) | 2004-02-27 | 2004-02-27 | Information communication terminal and terminal control method, and terminal control program as well as record medium recording the same |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004055129A JP2005244866A (en) | 2004-02-27 | 2004-02-27 | Information communication terminal and terminal control method, and terminal control program as well as record medium recording the same |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2005244866A true JP2005244866A (en) | 2005-09-08 |
Family
ID=35026068
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2004055129A Pending JP2005244866A (en) | 2004-02-27 | 2004-02-27 | Information communication terminal and terminal control method, and terminal control program as well as record medium recording the same |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2005244866A (en) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007282219A (en) * | 2006-03-31 | 2007-10-25 | Polycom Inc | System, method and apparatus for extending wireless personal area through connection of conferencing |
WO2009081994A1 (en) * | 2007-12-25 | 2009-07-02 | Nec Corporation | Information processing device and information processing method |
JP2011004398A (en) * | 2009-06-17 | 2011-01-06 | Avaya Inc | Personal identification and interactive device for internet-based text and video communication services |
JP2011034491A (en) * | 2009-08-05 | 2011-02-17 | Seiko Epson Corp | Collaborative work support system and server |
JP2012108872A (en) * | 2010-10-26 | 2012-06-07 | Ricoh Co Ltd | Screen sharing service providing system, information processing device, projection device, screen sharing service providing method, and screen sharing service providing program |
JP2012226533A (en) * | 2011-04-19 | 2012-11-15 | Konica Minolta Business Technologies Inc | Content display device, content display system, and program for content display |
-
2004
- 2004-02-27 JP JP2004055129A patent/JP2005244866A/en active Pending
Cited By (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007282219A (en) * | 2006-03-31 | 2007-10-25 | Polycom Inc | System, method and apparatus for extending wireless personal area through connection of conferencing |
WO2009081994A1 (en) * | 2007-12-25 | 2009-07-02 | Nec Corporation | Information processing device and information processing method |
CN101910979A (en) * | 2007-12-25 | 2010-12-08 | 日本电气株式会社 | Information processing device and information processing method |
JP2011004398A (en) * | 2009-06-17 | 2011-01-06 | Avaya Inc | Personal identification and interactive device for internet-based text and video communication services |
JP2011034491A (en) * | 2009-08-05 | 2011-02-17 | Seiko Epson Corp | Collaborative work support system and server |
US10025453B2 (en) | 2010-10-26 | 2018-07-17 | Ricoh Company, Ltd. | Screen sharing system, screen sharing method, and storage medium |
US9098230B2 (en) | 2010-10-26 | 2015-08-04 | Ricoh Company, Ltd. | Screen sharing system, screen sharing method, and storage medium |
US9317247B2 (en) | 2010-10-26 | 2016-04-19 | Ricoh Company, Ltd. | Screen sharing system, screen sharing method, and storage medium |
JP2012108872A (en) * | 2010-10-26 | 2012-06-07 | Ricoh Co Ltd | Screen sharing service providing system, information processing device, projection device, screen sharing service providing method, and screen sharing service providing program |
US10255025B2 (en) | 2010-10-26 | 2019-04-09 | Ricoh Company, Ltd. | Screen sharing system, screen sharing method, and storage medium |
US10489101B2 (en) | 2010-10-26 | 2019-11-26 | Ricoh Company, Ltd. | Screen sharing system, screen sharing method, and storage medium |
US10896019B2 (en) | 2010-10-26 | 2021-01-19 | Ricoh Company, Ltd. | Screen sharing system, screen sharing method, and storage medium |
JP2012226533A (en) * | 2011-04-19 | 2012-11-15 | Konica Minolta Business Technologies Inc | Content display device, content display system, and program for content display |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10545645B2 (en) | Method for realizing user interface using camera and mobile communication terminal for the same | |
JP4780208B2 (en) | Portable information terminal and image display control method for portable information terminal | |
JP2009141489A (en) | Electronic equipment | |
CN103593047A (en) | Mobile terminal and control method thereof | |
CN110531913B (en) | Video color ring processing method, communication equipment and computer readable storage medium | |
JP5928436B2 (en) | Remote control device, remote operation device, screen transmission control method, screen display control method, screen transmission control program, and screen display control program | |
WO2014065344A1 (en) | Display control device, display control program, and display control method | |
JP4478868B2 (en) | Image display device and image display method | |
JP2007135195A (en) | Mobile communication terminal and image processing method using the same in video communication | |
JP4767499B2 (en) | Information communication terminal and terminal control program | |
JP4417292B2 (en) | Object output method and information processing apparatus | |
JP2009284551A (en) | Information communication terminal, terminal control method, terminal control program, and recording medium recorded therewith | |
JP4289153B2 (en) | Mobile communication device, display control method for mobile communication device, and program thereof | |
JP2005244866A (en) | Information communication terminal and terminal control method, and terminal control program as well as record medium recording the same | |
JP2007251887A (en) | Communication system, mobile terminal, server, and computer program | |
JP2009296547A (en) | Mobile terminal | |
JP4354442B2 (en) | Content output device | |
JP2009069842A (en) | Display device, mobile phone device with the display device, and image display program | |
JP2007116524A (en) | Communication apparatus and method of storing broadcast contents in communication apparatus | |
KR100640540B1 (en) | Method of setting background picture in wireless communication terminal | |
JP2008242096A (en) | Display device, control method of display device, control program of display device, and recording medium with control program of display device recorded thereon | |
JP2008005456A (en) | Mobile phone | |
KR100581836B1 (en) | Mobile communication terminal be able to edit and set up a screen and method thereof | |
JP2003051869A (en) | Digital information equipment system, digital mobile terminal and control method | |
JP4783713B2 (en) | Mobile radio terminal apparatus and display control method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20060117 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20060117 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20071120 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080118 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090317 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20090707 |