JP6396754B2 - Terminal device, communication method between terminals, and program for terminal device - Google Patents
Terminal device, communication method between terminals, and program for terminal device Download PDFInfo
- Publication number
- JP6396754B2 JP6396754B2 JP2014217388A JP2014217388A JP6396754B2 JP 6396754 B2 JP6396754 B2 JP 6396754B2 JP 2014217388 A JP2014217388 A JP 2014217388A JP 2014217388 A JP2014217388 A JP 2014217388A JP 6396754 B2 JP6396754 B2 JP 6396754B2
- Authority
- JP
- Japan
- Prior art keywords
- information
- terminal device
- image
- unit
- display unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Description
本発明の実施形態は、端末装置、端末間通信方法、および端末装置用プログラムに関する。 Embodiments described herein relate generally to a terminal device, a communication method between terminals, and a program for a terminal device.
従来、音声データ及び画像データを携帯用端末装置間において相互に送受信することにより、これらの携帯用端末装置を利用する通話者の間で同じ画像をリアルタイムに相互に加工することが可能なデータ通信システムが知られている（例えば、特許文献１を参照）。 Conventionally, data communication by which voice data and image data can be mutually processed in real time between callers using these portable terminal devices by transmitting and receiving voice data and image data to and from each other. A system is known (see, for example, Patent Document 1).
上述したようなデータ通信システムにおいては、携帯端末装置間で送受信して相互に共有させたい情報と、携帯端末装置間では送受信させずに共有させたくない情報がある。携帯端末装置間では送受信させずに共有させたくない情報としては、例えば、個人情報や個人的に秘匿したい情報などがある。しかしながら、従来のデータ通信システムは、携帯端末装置から送信させる情報を柔軟に設定できなかった。 In the data communication system as described above, there are information that is desired to be transmitted / received between portable terminal devices and shared with each other, and information that is not desired to be shared without being transmitted / received between portable terminal devices. Examples of information that is not desired to be shared without being transmitted / received between portable terminal devices include personal information and information that is desired to be kept private. However, the conventional data communication system cannot flexibly set information to be transmitted from the mobile terminal device.
本発明は、端末装置から送信させる情報を柔軟に設定できる端末装置、端末間通信方法、および端末装置用プログラムを提供することを目的とする。 An object of this invention is to provide the terminal device which can set the information transmitted from a terminal device flexibly, the communication method between terminals, and the program for terminal devices.
（１）本発明の一実施形態は、情報を表示する表示部と、前記情報の視覚効果を変化させる情報処理部と、情報を送受信する通信部と、前記通信部により受信された音声データに基づいて音声を出力させる音声出力部と、前記通信部により音声データを他の端末装置との間で通信して前記他の端末装置との間の通話音声を前記音声出力部に出力させている最中において、前記表示部に出力させている情報の送信制御情報を判定し、前記表示部に表示されている前記情報に対して検出されたユーザ操作に基づいて前記通信部による前記情報の送信を中断または中止させるように制御する制御部と、を有し、前記制御部は、前記表示部に出力させている前記情報が、視覚効果が変化されて前記他の端末装置に送信されたことを通知する情報を前記表示部に表示させる、端末装置である。
（２）本発明の一実施形態は、前記送信制御情報は、前記情報を前記表示部に出力させるアプリケーションの属性情報に基づいて設定される、上記（１）の端末装置である。
（３）本発明の一実施形態は、前記制御部は、前記アプリケーションの属性情報に基づいて前記送信される前記情報の保存権限を設定し、保存権限が設定された前記情報を前記通信部に送信させる、上記（２）の端末装置である。
（４）本発明の一実施形態は、前記制御部は、前記表示部に出力させている前記情報の送信が拒否であることを通知する情報を前記通信部に送信させる、上記（１）から（３）のうち何れかの端末装置である。
(1) One embodiment of the present invention includes a display unit that displays information, an information processing unit that changes a visual effect of the information, a communication unit that transmits and receives information, and audio data received by the communication unit. A voice output unit that outputs a voice based on the voice data, and the communication unit communicates voice data with another terminal device to cause the voice output unit to output a voice call between the other terminal device. During the process, transmission control information of information output on the display unit is determined, and the information is transmitted by the communication unit based on a user operation detected for the information displayed on the display unit. It possesses a control unit for controlling so as to interrupt or discontinue, the control unit, that the information being output to the display unit, the visual effect is transmitted is changed to the other terminal devices To notify the information Is displayed on the radical 113 is a terminal device.
(2) One embodiment of the present invention is the terminal device according to (1), wherein the transmission control information is set based on attribute information of an application that causes the display unit to output the information.
(3) In one embodiment of the present invention, the control unit sets a save authority for the transmitted information based on attribute information of the application, and sends the information with the save authority set to the communication unit. The terminal device according to (2), which is transmitted.
(4) In one embodiment of the present invention, from the above (1), the control unit causes the communication unit to transmit information notifying that transmission of the information output to the display unit is a rejection. The terminal device is any one of (3).
また、本発明の一実施形態は、第１の端末装置と第２の端末装置との間で音声データを通信して、前記第１の端末装置の音声出力部および前記第２の端末装置の音声出力部により通話音声を出力させている最中に、前記第１の端末装置および前記第２の端末装置のうち情報を出力する情報出力端末装置が、自装置の表示部に出力させている情報の送信制御情報を判定し、前記自装置の表示部に出力させている前記情報に対して検出されたユーザ操作に基づいて前記自装置の表示部に出力させている前記情報の送信を中断または中止させるように制御し、前記情報出力端末装置が、自装置の表示部に出力させている情報が、視覚効果が変化されて、前記第１の端末装置および前記第２の端末装置のうち他の端末装置に送信されたことを通知する情報を前記自装置の表示部に表示させる、端末間通信方法である。 Moreover, one Embodiment of this invention communicates audio | speech data between a 1st terminal device and a 2nd terminal device, the audio | voice output part of the said 1st terminal device, and the said 2nd terminal device The information output terminal device that outputs information among the first terminal device and the second terminal device outputs the information to the display unit of the own device while the voice output unit is outputting the call voice. The transmission control information of the information is determined, and the transmission of the information output on the display unit of the own device is interrupted based on the user operation detected for the information output on the display unit of the own device Alternatively, the information output terminal device controls the information output terminal device to output to the display unit of the device itself, the visual effect is changed, and the information is output from the first terminal device and the second terminal device. Notify that it has been sent to another terminal device Displaying the broadcast on a display unit of the own device is a terminal-to-terminal communication process.
また、本発明の一実施形態は、情報を表示する表示部と、前記情報の視覚効果を変化させる情報処理部と、情報を送受信する通信部と、前記通信部により受信された音声データに基づいて音声を出力させる音声出力部と、を有する端末装置が備えるコンピュータに、前記通信部により音声データを他の端末装置との間で通信して前記他の端末装置との間の通話音声を前記音声出力部に出力させている最中において、前記表示部に出力させている情報の送信制御情報を判定するステップと、前記表示部に出力させている前記情報に対して検出されたユーザ操作に基づいて前記通信部による前記情報の送信を中断または中止させるように制御するステップと、前記表示部に出力させている前記情報が、視覚効果が変化されて前記他の端末装置に送信されたことを通知する情報を前記表示部に表示させるステップと、を実行させるための端末装置用プログラムである。
Further, an embodiment of the present invention is based on a display unit that displays information, an information processing unit that changes a visual effect of the information, a communication unit that transmits and receives information, and audio data received by the communication unit. A voice output unit for outputting voice to the computer provided in the terminal device, the voice data is communicated between the terminal unit and the other terminal device by the communication unit, and the call voice between the other terminal device is transmitted to the computer. During the output to the audio output unit, the step of determining the transmission control information of the information output to the display unit, and the user operation detected for the information output to the display unit and controlling transmission to suspend or to stop the said information by the communication unit based, said information being outputted to the display unit, the visual effect is varied sent to the other terminal devices And a step to display the information which notifies that it has been on the display unit, a terminal device program for causing execution.
本発明によれば、端末装置から送信させる情報を柔軟に設定できる端末装置、端末間通信方法、および端末装置用プログラムを提供することができる。 ADVANTAGE OF THE INVENTION According to this invention, the terminal device which can set the information transmitted from a terminal device flexibly, the communication method between terminals, and the program for terminal devices can be provided.
以下、図を参照して本実施形態による端末間通信システム１の実施形態について説明する。
本実施形態の端末間通信システム１は、複数の端末装置１０の間における情報共有機能を提供する。ここでいう端末装置１０とは、音声や文字により装置間で相互に通信が可能な通信装置であり、例えば、携帯電話やスマートフォンである。この端末装置１０は、音声情報と、画像情報とを同一の回線で送受信可能な、高速データ通信回線に接続が可能である。この高速データ通信回線とは、例えば、ＬＴＥ（Long Term Evolution）通信網である。この高速データ通信回線は、画像や文字などのデジタル情報の送受信に加えて、音声通話を可能にするサービス（ＶｏＬＴＥ；Voice over LTE）を提供する。
Hereinafter, an embodiment of the
The
この情報共有機能とは、複数の端末装置１０の間において、画像情報又は音声情報を共有する機能である。より具体的には、ある端末装置１０は、他の端末装置１０に対して、画像情報又は音声情報を送信する。これにより、端末間通信システム１は、送信側の端末装置１０に表示されている画像、又は再生されている音声を、受信側の端末装置１０に表示又は再生させる。また、端末間通信システム１は、ある端末装置１０から他の端末装置１０に対する一方向の情報共有機能のみならず、端末装置１０間の双方向の情報共有機能を提供する。
この実施形態において、情報発信側の端末装置１０は、共有される情報の送信制御情報に基づいて、情報の送信を制御し、および／または、送信される情報の視覚効果の変化を制御する。
The information sharing function is a function for sharing image information or audio information among a plurality of
In this embodiment, the
この端末間通信システム１には、複数の端末装置１０が含まれる。以下の説明において、複数の端末装置１０のそれぞれを区別する場合には、例えば、端末装置１０−１、端末装置１０−２と記載する。また、以下の説明において、これら複数の端末装置１０のそれぞれを区別しない場合には、単に端末装置１０と記載する。この端末装置１０の構成について図１を参照して説明する。
The
［端末装置の構成］
図１は、本実施形態の端末装置１０の構成の一例を示す模式図である。端末装置１０は、表示部１００と、操作検出部１１０と、撮像部１２０と、音再生部１３０（音声出力部）と、収音部１４０と、通信部１５０と、制御部１６０（情報処理部を含む）とを備えている。
[Configuration of terminal device]
FIG. 1 is a schematic diagram illustrating an example of a configuration of the
表示部１００は、液晶ディスプレイを備えており、文字や写真などの画像を表示する。この表示部１００が表示する画像には、着信を待ち受けている場合に表示される待ち受け画像、端末装置１０において動作するアプリケーションが提供するアプリ画像、端末装置が提供する各種の機能をユーザが選択するためのメニュー画像などが含まれる。
The
このアプリ画像には、電話（音声通信）アプリケーションが提供するダイヤラ画像、氏名や電話番号、メールアドレスを管理するアドレス帳アプリケーションが提供するアドレス帳の画像が含まれる。また、このアプリ画像には、動画再生アプリケーションが提供する動画像、ウェブブラウザアプリケーションが提供するウェブ画像、地図アプリケーションが提供する地図画像、写真アルバムアプリケーションが提供する写真の画像が含まれる。また、このアプリ画像には、電子メールアプリケーションが提供するメール文面の画像、電子ドキュメントを公開および配布する文書アプリケーションが提供するドキュメント文書の画像や、テキストチャットアプリケーションが提供するチャットの画像など、種々の画像が含まれる。 This application image includes a dialer image provided by a telephone (voice communication) application, and an address book image provided by an address book application that manages names, telephone numbers, and mail addresses. In addition, the application image includes a moving image provided by the moving image reproduction application, a web image provided by the web browser application, a map image provided by the map application, and a photo image provided by the photo album application. The application image includes various images such as a mail text image provided by an e-mail application, a document document image provided by a document application that publishes and distributes an electronic document, and a chat image provided by a text chat application. Contains images.
また、表示部１００が表示するメニュー画像のうち、情報共有機能を選択するためのメニュー画像を、特に情報共有メニュー画像という。また、この情報共有メニュー画像を、共有メニューボール画像、又は共有メニューボタン画像ともいう。ここで、メニューには、情報共有メニューの他に、種々のメニューが含まれる。
Of the menu images displayed on the
図１に戻り、操作検出部１１０は、表示部１００を覆う透明なタッチパネルセンサを備えており、ユーザの操作を検出する。ユーザの操作には、様々な種類がある。操作の種類の一例には、タップ操作と、ドラッグ操作と、ピンチ操作とがある。タップ操作とは、ユーザが、タッチパネルのある位置に指を触れた後、すぐに指を離す操作である。ドラッグ操作とは、ユーザが、タッチパネルに触れた指を、タッチパネルに触れた状態のままある方向に移動させる操作である。ピンチ操作とは、ユーザが、タッチパネルに触れた２本の指の間隔を変化させる操作である。また、タップ操作には、１回だけ触れるシングルタップ操作と、シングルタップ操作をすばやく２回繰り返すダブルタップ操作とが含まれる。また、ドラッグ操作には、移動速度がドラッグ操作に比べて速いスワイプ操作と、さらに速いフリック操作とが含まれる。また、ピンチ操作には、タッチパネルに触れた２本の指の間隔を広げるピンチアウト操作と、タッチパネルに触れた２本の指の間隔を狭めるピンチイン操作とが含まれる。
Returning to FIG. 1, the
なお、ここでは、ユーザが、指によってタッチパネルセンサに触れることにより操作する場合を一例にして説明したが、これに限られない。例えば、ユーザは、指に代えて、操作用の指示棒などを用いて操作してもよい。すなわち、操作検出部１１０は、指や、指以外の物体（例えば、指示棒）による操作を、ユーザの操作として検出する。
Here, the case where the user performs an operation by touching the touch panel sensor with a finger has been described as an example, but the present invention is not limited thereto. For example, the user may operate using an operation indicator bar instead of a finger. That is, the
音再生部１３０は、スピーカを備えており、入力される音情報に基づく音を再生する。この音再生部１３０は、耳あて通話用スピーカ１３１と、スピーカモード用スピーカ１３２とを備えている。耳あて通話用スピーカ１３１は、端末装置１０をユーザの耳に当てて通話する場合に用いられる。スピーカモード用スピーカ１３２は、端末装置１０を耳から話した状態で音を再生する場合に用いられる。
The
収音部１４０は、マイクを備えており、端末装置１０の周囲の音を収音して、収音した音を音情報に変換する。この端末装置１０の周囲の音には、端末装置１０の周囲の雑音、ユーザが通話のために発音している音、及び音再生部１３０のスピーカが発音している音が含まれる。すなわち、収音部１４０は、端末装置１０の周囲の雑音や、通話中のユーザの声、端末装置１０のスピーカが発している音など、種々の音を収音する。
The
通信部１５０は、通信制御用ＩＣ（Integrated Circuit）を備え、他の装置との通信を行う。端末装置１０は、この通信部１５０による通信動作によって、他の装置と通信を行う。以下の説明において、通信部１５０の構成及び動作の説明は省略する。
The
制御部１６０は、ＣＰＵ（Central Processing Unit）を備え、端末装置１０が備える各部を制御する。端末装置１０は、この制御部１６０による各部の制御によって、表示部１００への表示、操作検出部１１０による操作の検出、通信部１５０による他の装置との通信等の動作を行う。
また、制御部１６０は、ＣＰＵが画像処理を実行するアプリケーションを実行することにより、情報の視覚効果を変化させる情報処理部を実現する。情報の視覚効果とは、情報を表示部１００に表示させたときにおいてユーザに与える視覚的な刺激である。情報の視覚効果としては、情報の輝度、色、解像度、透明度、縁の滑らかさ、動画像の表示レート等が挙げられる。制御部１６０は、後述するように表示部１００に表示される情報の送信制御情報に基づいて、当該情報の視覚効果を変化させる。
以下の説明において、制御部１６０の構成及び動作の説明は省略する。
The
In addition, the
In the following description, description of the configuration and operation of the
［情報共有機能の概要］
次に、端末間通信システム１が提供する情報共有機能の概要について図２を参照して説明する。
図２は、端末間通信システム１が提供する情報共有機能の概要の一例を示す模式図である。端末間通信システム１が提供する情報共有機能には、一例として、表示中の画像を共有する機能、手書き画像を共有する機能がある。
表示中の画像を共有する機能による表示画像の一例を、図２（Ａ）に示す。手書き画像を共有する機能による表示画像の一例を、図２（Ｂ）に示す。
[Overview of information sharing function]
Next, an outline of the information sharing function provided by the
FIG. 2 is a schematic diagram illustrating an example of an overview of an information sharing function provided by the
An example of a display image by the function of sharing the image being displayed is shown in FIG. An example of a display image by a function for sharing a handwritten image is shown in FIG.
これらの情報共有機能は、端末装置１０上で動作する情報共有機能アプリケーションによって提供される。以下の説明において、この情報共有機能アプリケーションを、情報共有アプリケーションＡＰ１とも記載する。情報共有アプリケーションＡＰ１は、端末装置１０内の基本ソフトウエア、及び他のアプリケーションと連携して動作することにより、情報共有機能を提供する。
These information sharing functions are provided by an information sharing function application that operates on the
ここで、情報共有機能を説明するにあたり、本実施形態の説明中における端末装置１０の表記の方法について説明する。
端末装置１０は、情報共有対象の情報を発信する側の端末装置１０と、情報共有対象の情報を受信する側の端末装置１０とに区別される。以下の説明において、複数の端末装置１０のうち、情報共有対象の情報を発信する側の端末装置１０を、情報発信側の端末装置１０又は端末装置１０−Ｓとも記載する。また、情報共有対象の情報を受信する側の端末装置１０を、情報受信側の端末装置１０、又は端末装置１０−Ｒとも記載する。
なお、情報共有を要求する側の端末装置１０と、情報共有が要求される側の端末装置１０とのうち、いずれが情報共有対象の情報を発信し、いずれがこの情報を受信するのかは、各情報共有機能間の機能の違いや、端末装置１０の動作状態などに依存する。すなわち、この端末間通信システム１においては、情報共有を要求する側の端末装置１０が情報共有対象の情報を発信する場合と、情報共有が要求される側の端末装置１０が情報共有対象の情報を発信する場合とがある。
Here, in describing the information sharing function, a description method of the
The
Of the
［情報共有機能１：表示中の画像の共有（表示画面共有機能）］
次に、図２を参照して、各情報共有機能の概要について説明する。端末間通信システム１が提供する情報共有機能のうち、まず、表示中の画像の共有（表示画面共有機能）について説明する。
[Information sharing function 1: Sharing images being displayed (display screen sharing function)]
Next, an overview of each information sharing function will be described with reference to FIG. Among the information sharing functions provided by the
端末間通信システム１は、表示画面共有機能を提供する。この表示画面共有機能とは、端末装置１０の表示部１００に表示されている画像Ｐ１を、他の端末装置１０の表示部１００に画像Ｐ２として表示させることにより、端末装置１０の間において画像を共有する機能である。この表示画面共有機能により端末装置１０に表示される画面の一例を図２（Ａ）に示す。ここでいう表示部１００に表示されている画像には、上述した待ち受け画像、アプリ画像、及び、メニュー画像が含まれる。
The
ある端末装置１０−１において、この表示画面共有機能が選択されると、端末間通信システム１は、この端末装置１０−１の表示部１００に表示されている画像Ｐ１を、共有先である他の端末装置１０−２の表示部１００に画像Ｐ２として表示させる。
When the display screen sharing function is selected in a certain terminal device 10-1, the
この表示画面共有機能の具体例について説明する。例えば、端末装置１０−１において、写真アルバムアプリケーションが起動されており、この写真アルバムアプリケーションが写真の画像（図２（Ａ）に示す画像Ｐ１）を表示部１００に表示している場合について説明する。この場合、端末間通信システム１は、端末装置１０−１の表示部１００に表示されている写真の画像Ｐ１を、共有先である他の端末装置１０−２の表示部１００に画像Ｐ２として表示させる。このようにして２台の端末装置１０のそれぞれの表示部１００に、同一の写真の画像Ｐ１が表示されることにより、写真の画像Ｐ１が共有される。
A specific example of this display screen sharing function will be described. For example, a case will be described in which a photo album application is activated in the terminal device 10-1, and the photo album application displays a photo image (image P1 shown in FIG. 2A) on the
次に、表示画面共有機能の他の具体例について説明する。例えば、端末装置１０−１において、動画アプリケーションが起動されており、この動画アプリケーションが音声付の動画像を表示部１００に表示している場合について説明する。この場合、端末間通信システム１は、端末装置１０−１の表示部１００に表示されている動画像を、共有先である他の端末装置１０−２の表示部１００に表示させる。このようにして２台の端末装置１０のそれぞれの表示部１００に、同一の動画像が表示されることにより、動画像が共有される。また、画像の共有と同時に端末間通信システム１は、端末装置１０−１の音再生部１３０から再生されている音を、共有先である他の端末装置１０−２の音再生部１３０から再生させる。このようにして２台の端末装置１０のそれぞれの音再生部１３０から、同一の音が再生されることにより、動画像に付されている音声が共有される。このようにして、２台の端末装置１０間において、音声付の動画像が共有される。すなわち、端末間通信システム１によれば、画像情報と音情報とのいずれの情報も共有が可能である。
Next, another specific example of the display screen sharing function will be described. For example, a case where a moving image application is activated in the terminal device 10-1 and the moving image application displays a moving image with sound on the
［情報共有機能２：手書き画像の共有（手書き共有機能）］
次に、端末間通信システム１が提供する情報共有機能のうち、手書き画像の共有（手書き共有機能）について、図２（Ｂ）を参照して説明する。
端末間通信システム１は、手書き図形の画像を共有する手書き共有機能を提供する。ここで、手書き図形の画像とは、端末装置１０の操作検出部１１０を指などでドラッグ操作することにより、表示部１００に表示されたドラッグ操作の軌跡の画像である。すなわち、手書き共有機能とは、端末装置１０の操作検出部１１０を指などでドラッグ操作して表示部１００に表示された手書きの図形の画像Ｐ３を、他の端末装置１０の表示部１００に画像Ｐ４として表示させることにより、端末装置１０の間において画像を共有する機能である。
[Information sharing function 2: Sharing handwritten images (handwriting sharing function)]
Next, handwriting image sharing (handwriting sharing function) among the information sharing functions provided by the
The
この手書き共有機能の具体例について説明する。例えば、端末装置１０−１において、手書きツールアプリケーションが起動されており、この手書きツールアプリケーションが手書き図形の画像（図２（Ｂ）に示す画像Ｐ３）を表示部１００に表示している場合について説明する。この場合、端末間通信システム１は、端末装置１０−１の表示部１００に表示されている手書き図形の画像Ｐ３を、共有先である他の端末装置１０−２の表示部１００に画像Ｐ４として表示させる。このようにして２台の端末装置１０のそれぞれの表示部１００に、同一の手書き図形の画像が表示されることにより、手書き図形の画像が共有される。
A specific example of the handwriting sharing function will be described. For example, a description will be given of a case where a handwriting tool application is activated in the terminal device 10-1, and the handwriting tool application displays an image of a handwritten graphic (image P3 shown in FIG. 2B) on the
［画像のレイヤ表示］
なお、端末装置１０の表示部１００は、写真アルバムアプリケーションが表示する写真（例えば、図２（Ｂ）の画像Ｐ５）と、手書きツールアプリケーションが表示する手書き図形の画像（例えば、図２（Ｂ）の画像Ｐ３）とを重ねて表示することができる。すなわち、端末装置１０の表示部１００は、複数の画像を積層させて表示することができる。この場合、表示部１００は、アプリケーションごとに設定されているレイヤによって、画像を表示する。このレイヤとは、積層されて表示される画像の論理的な階層である。
例えば、表示部１００は、下位のレイヤである第１のレイヤに画像Ｐ５を、第１のレイヤよりも上位のレイヤである第２のレイヤに画像Ｐ３を、それぞれ表示する。ここで、上位のレイヤとは、積層された複数のレイヤのうち、手前側（ユーザに近い側）に画像を表示するレイヤである。また、下位のレイヤとは、積層された複数のレイヤのうち、奥側（ユーザから遠い側）に画像を表示するレイヤである。これらのレイヤに表示される画像には、不透明度を例えば０％から１００％の間で設定することができる。上位のレイヤに表示される画像の不透明度が１００％の場合には、上位の画像が不透明になり、下位のレイヤの画像が隠されるため、下位のレイヤの画像は表示されない。また、上位のレイヤに表示される画像の不透明度が０％の場合には、上位の画像が透明になり、下位のレイヤの画像が隠されずに透過して表示される。
[Image layer display]
Note that the
For example, the
また、操作検出部１１０は、最も上位のレイヤに対する操作を検出する。この一例では、手書きツールアプリケーションが、手書き図形の画像Ｐ３を、最も上位の第２レイヤに表示している場合について説明する。この場合には、操作検出部１１０は、タッチパネルによって検出した操作（例えば、ドラッグ操作）を、最も上位のレイヤに画像を表示している手書きツールアプリケーションに出力する。手書きツールアプリケーションは、操作検出部１１０が出力したドラッグ操作に基づいて、このドラッグ操作の軌跡を示す画像を、手書き図形の画像として、表示部１００に表示する。
ここで、別の一例として、第２レイヤよりも上位の第３レイヤに、メニュー制御ソフトウエアが共有メニューボタン画像を表示している場合について説明する。この場合、操作検出部１１０は、最も上位のレイヤ、すなわち第３レイヤに対する操作を検出する。操作検出部１１０は、共有メニューボタン画像が表示されている位置に対する操作（例えば、タップ操作）を、タッチパネルによって検出する。操作検出部１１０は、検出した操作（例えば、タップ操作）を、最も上位のレイヤに画像を表示しているメニュー制御ソフトウエアに出力する。メニュー制御ソフトウエアは、操作検出部１１０が出力した操作に基づいて、このタップ操作の位置に対応する機能を選択して、選択した機能を提供する。
つまり、操作検出部１１０は、表示部１００に表示される画像の複数のレイヤのうち、最上位のレイヤに対する操作を検出する。したがって、図２（Ｂ）に示す例において、手書き図形の画像Ｐ３が、写真の画像Ｐ５よりも下位側のレイヤに表示される場合には、ユーザが表示部１００のタッチパネルを操作しても、この操作に応じた手書き図形の画像は描画されない。
Further, the
Here, as another example, a case will be described in which the menu control software displays a shared menu button image in a third layer higher than the second layer. In this case, the
That is, the
なお、手書き共有機能において、端末間通信システム１は、複数の端末装置１０の間で手書き図形の画像を双方向に共有することも可能である。具体的には、端末間通信システム１は、端末装置１０−１の表示部１００に表示されている手書き図形の画像Ｐ３を、共有先である他の端末装置１０−２の表示部１００に画像Ｐ４として表示させる。この場合において、端末間通信システム１は、端末装置１０−２の表示部１００に表示されている手書き図形の画像Ｐ６を、共有先である他の端末装置１０−１の表示部１００に画像Ｐ７表示させる。このようにして２台の端末装置１０のそれぞれの表示部１００に、手書き図形の画像が表示されることにより、手書き図形の画像が双方向に共有される。
なお、手書き共有機能において、端末間通信システム１が画像を共有する仕組みと、上述した表示画像共有機能において、端末間通信システム１が画像を共有する仕組みとは、次の点で相違する。すなわち、表示画像共有機能においては、端末間通信システム１は、表示部１００に表示されている画像をキャプチャしたデータを、端末装置１０間において共有することにより、画像を共有する。一方、手書き共有機能においては、端末間通信システム１は、画像をキャプチャしたデータではなく、画像を描画するためのデータを共有することにより、画像を共有する。具体的には、手書き共有機能においては、情報発信側の端末装置１０−Ｓは、端末装置１０−Ｓの操作検出部１１０が検出した手書き図形の座標データ、及び線の色、太さなどのデータ（すなわち、画像を描画するためのデータ）を、情報受信側の端末装置１０−Ｒに対して送信する。情報受信側の端末装置１０−Ｒは、受信した手書き図形の座標データ、及び線の色、太さなどのデータに基づいて、端末装置１０−Ｒの表示部１００に画像を表示する。
In the handwriting sharing function, the
In the handwriting sharing function, the mechanism in which the
［情報共有機能の選択操作の概要］
次に、ユーザが情報共有機能を起動する操作の概要について、図３を参照して説明する。
図３は、本実施形態の端末間通信システム１が提供する情報共有機能の選択操作の一例を示す模式図である。
ここでは、ユーザＡ（Ａさん）と、ユーザＢ（Ｂさん）とが、それぞれ端末装置１０を使用して表示画面共有を利用する場合を一例にして説明する。また、この一例の説明において、ユーザＡが利用する端末装置１０が、情報発信側の端末装置１０、すなわち端末装置１０−１Ｓである。また、この一例の説明において、端末装置１０−２が、情報受信側の端末装置１０、すなわち端末装置１０−２Ｒである。
[Overview of selecting information sharing function]
Next, an outline of an operation for the user to activate the information sharing function will be described with reference to FIG.
FIG. 3 is a schematic diagram illustrating an example of the selection operation of the information sharing function provided by the
Here, a case where user A (Mr. A) and user B (Mr. B) use display screen sharing using the
ユーザＡと、ユーザＢとは、図３（Ａ）から図３（Ｅ）に示す操作を順に行うことにより、表示画面共有機能を利用する。このユーザＡと、ユーザＢとは、ＬＴＥ通信網を経由した音声通話セションを利用して音声通話を行っている。このユーザＡと、ユーザＢとが、ＬＴＥ通信網を経由した音声通話を行っている場合の、各端末装置１０に表示される画像の一例を、図３（Ａ）に示す。
The user A and the user B use the display screen sharing function by sequentially performing the operations shown in FIGS. 3 (A) to 3 (E). The user A and the user B make a voice call using a voice call session via the LTE communication network. FIG. 3A shows an example of an image displayed on each
このとき、ユーザＡの端末装置１０−１Ｓの表示部１００、及びユーザＢの表示部１００には、いずれも共有メニューボタンの画像ＰＭＢが表示されている。この共有メニューボタンの画像ＰＭＢの表示は、通信の相手側の端末装置１０が、上述した情報共有機能のうち、いずれかの情報共有機能に対応していることを示す。この一例では、共有メニューボタンの画像ＰＭＢの表示は、端末装置１０−１Ｓと、端末装置１０−２Ｒとが、いずれも表示画面共有機能に対応していることを示す。
At this time, the image PMB of the shared menu button is displayed on both the
ユーザＡは、端末装置１０−１Ｓの表示部１００に表示されている共有メニューボタンの画像ＰＭＢをタップ操作する。このタップ操作を端末装置１０−１Ｓの操作検出部１１０が検出すると、ランチャー画像Ｐ２０が表示される（図３（Ｂ）を参照）。このランチャー画像Ｐ２０とは、上述したメニュー画像の一例である。この一例においては、ランチャー画像Ｐ２０は、表示画面共有機能及び手書き共有機能のアイコン画像を示す。このアイコン画像が表示されている表示部１００上の位置を、ユーザがタップ操作することにより、アイコン画像に対応づけられた機能が起動する。ここでは、ユーザＡが、ランチャー画像Ｐ２０に表示される各情報共有機能のうち、表示画面共有機能のアイコン画像Ｐ２１をタップ操作する場合について説明する。
User A taps the image PMB of the shared menu button displayed on the
このタップ操作を端末装置１０−１Ｓの操作検出部１１０が検出すると、表示画面共有機能の機能説明画像Ｐ２２が表示される（図３（Ｃ）を参照）。また、このタップ操作を端末装置１０−１Ｓの操作検出部１１０が検出すると、共有先の端末装置１０−２Ｒの表示部１００に画面共有開始の承諾画像Ｐ２３が表示される。この承諾画像Ｐ２３とは、情報共有の被要求側の端末装置１０に表示される画像であり、要求側の端末装置１０による情報共有の要求を承諾するか否かを示す操作を、ユーザに促す画像である。この一例においては、承諾画像Ｐ２３とは、ユーザＡからの画面共有の要求を承諾するか否かを示すタップ操作をユーザＢに対して促す画像である。
When the
次に、ユーザＢは、承諾画像Ｐ２３の承諾ボタンの画像Ｐ２４をタップ操作する。このタップ操作を端末装置１０−２Ｒの操作検出部１１０が検出すると、端末装置１０−２Ｒ及び端末装置１０−１Ｓの各表示部１００に、接続中を示す画像Ｐ２５が表示される（図３（Ｄ）を参照）。このとき、端末装置１０−１Ｓと端末装置１０−２Ｒとの間において、表示画面共有のための端末間通信のセションが構築される。
Next, the user B taps the image P24 of the consent button of the consent image P23. When the
次に、端末装置１０−１Ｓと端末装置１０−２Ｒとの間において、表示画面共有のための端末間通信のセションが確立すると、端末装置１０−１Ｓの表示部１００に表示されている画像Ｐ２６が、端末装置１０−２Ｒの表示部１００に画像Ｐ２７として表示される（図３（Ｅ）を参照）。すなわち、端末装置１０−１Ｓと端末装置１０−２Ｒとの間において、表示画面共有が開始される。
なお、端末装置１０−１Ｓおよび端末装置１０−２Ｒの双方の端末装置１０は、それぞれ、後述するように、音声通話セションが構築されている通話相手の電話番号およびＩＰアドレスを保持している。音声通話中において、双方の端末装置１０は、音声データに含まれる情報と、保持している電話番号およびＩＰアドレスとを照合して、音声通話が継続されているか否かを監視する。
端末装置１０−１Ｓまたは端末装置１０−２Ｒの何れか一方により通話終了の操作が受け付けられた場合、通話終了の操作を受け付けた端末装置１０は、音声通話セションを終了させると共に、表示画面共有のための情報通信セション（端末間の情報共有のセションともいう）も終了させる。このとき、端末装置１０は、音声通話セションを構築したＬＴＥ通信網におけるサーバ装置にセションの終了要求を送信すると共に、シグナリングサーバ２０に情報通信セションの終了要求を送信する。他方の端末装置１０は、保持している電話番号およびＩＰアドレスを含む音声データの受信が所定時間に亘り無いことを検出すると、音声通話が継続されていないと判定する。これにより、他方の端末装置１０は、音声通話セションおよび表示画面共有のための情報通信セションが終了されたことを判定する。
Next, when a session for inter-terminal communication for display screen sharing is established between the terminal device 10-1S and the terminal device 10-2R, an image P26 displayed on the
Note that each of the
When the call end operation is accepted by either the terminal device 10-1S or the terminal device 10-2R, the
［端末間通信システムの構成］
次に、上述した情報共有機能を提供する端末間通信システム１の構成について、図４を参照して説明する。
図４は、本実施形態の端末間通信システム１の構成の一例を示す概要図である。端末間通信システム１は、複数の端末装置１０（この一例では、端末装置１０−１Ｓ及び端末装置１０−２Ｒ）の他に、次の装置を備える。すなわち、端末間通信システム１は、シグナリングサーバ２０と、認証サーバ３０と、プッシュサーバ４０と、リレーサーバ５０とを備えている。
[Configuration of inter-terminal communication system]
Next, the configuration of the
FIG. 4 is a schematic diagram illustrating an example of the configuration of the
シグナリングサーバ２０は、端末装置１０の間において行われる情報通信セションを管理する。具体的には、シグナリングサーバ２０は、複数の端末装置１０、認証サーバ３０、及びプッシュサーバ４０との間において通信が可能である。シグナリングサーバ２０は、端末装置１０が情報共有機能に対応している場合、その端末装置１０の情報のレジストレーション（初期登録）を行う。また、シグナリングサーバ２０は、端末装置１０から情報共有の要求があった場合に、共有先の端末装置１０との間の通信の情報通信セションを構築するためのシグナリング処理を行う。また、シグナリングサーバ２０は、端末装置１０から情報共有の要求があった場合に、共有の要求先の端末装置１０が情報共有機能に対応しているか否かの返答を、要求側の端末装置１０に対して行う。
The signaling
このシグナリングサーバ２０は、端末情報受信部と、適合性判定部と、判定結果送信部と、セション構築部とを、その機能部として備えている。
このうち、端末情報受信部は、端末情報を端末装置１０から受信する。この端末情報には、端末装置１０を識別する端末識別情報と、端末装置１０において動作するアプリケーションを識別するアプリケーション識別情報とが含まれている。
適合性判定部は、端末装置１０−１において動作する第１アプリケーションと、端末装置１０−２において動作する第２アプリケーションとの適合性を、端末情報に基づいて判定する。
判定結果送信部は、端末装置１０−１において動作する第１アプリケーションが送信する判定要求に応じて、適合性判定部による判定結果を端末装置１０−１に送信する。
セション構築部は、第１アプリケーションが送信する通信開始の要求に応じて、通信開始の要求を送信した第１アプリケーションと、第２アプリケーションとの間の情報通信セションを、端末情報に基づいて構築する。
The signaling
Among these, the terminal information receiving unit receives terminal information from the
The suitability determination unit determines suitability between the first application operating in the terminal device 10-1 and the second application operating in the terminal device 10-2 based on the terminal information.
The determination result transmission unit transmits the determination result by the suitability determination unit to the terminal device 10-1 in response to the determination request transmitted by the first application operating in the terminal device 10-1.
The session construction unit constructs an information communication session between the first application that transmitted the communication start request and the second application based on the terminal information in response to the communication start request transmitted by the first application. .
また、シグナリングサーバ２０は、情報通信セションの構築開始時に端末装置１０が正規の装置であるか否かを判定する。端末装置１０が正規の装置であるか否かは、様々な手段によって判定することができる。この一例においては、シグナリングサーバ２０は、端末装置１０から送信される電話番号及びＩＰアドレスに基づいて、端末装置１０が正規の装置であるか否かを判定する。より具体的には、シグナリングサーバ２０は、端末装置１０から送信される電話番号及びＩＰアドレスと、この端末装置１０に予め割り当てられている電話番号及びＩＰアドレスとが一致するか否かに基づいて、端末装置１０が正規の装置であるか否かを判定する。以下の説明において、シグナリングサーバ２０が行う、端末装置１０が正規の装置であるか否かの判定を、セキュア判定とも記載する。
Further, the signaling
なお、シグナリングサーバ２０は、セション構築時およびセション構築後の情報通信中において、音声通話セションにより音声データを通信している双方の端末装置１０間について情報通信セションを構築していることを確認する処理を実施してもよい。
すなわち、シグナリングサーバ２０は、現在通話中の双方の端末装置１０の電話番号を予め記憶しておく。例えば、シグナリングサーバ２０は、図示しない音声通話セションを構築したサーバから通話中の双方の端末装置１０の電話番号を受信して、内部に記憶する。
シグナリングサーバ２０は、セション構築の要求を受信したことに応じて、情報通信セションを構築する双方の端末装置１０の電話番号が、音声通話中の双方の端末装置１０の電話番号であるか否かの判定によって、端末装置１０が正規の装置であるか否かを判定する。なお、セション構築時の判定処理の具体例は、後述する。
The signaling
That is, the signaling
In response to receiving the session construction request, the signaling
また、シグナリングサーバ２０は、セション構築後において、所定時間毎に、情報を挙有している双方の端末装置１０が、音声通話中の端末装置１０であるか否かを判定する。シグナリングサーバ２０は、所定時間毎に、現在通話中の双方の端末装置１０電話番号を、音声通話セションを構築したサーバから取得すると共に、情報通信セションを構築した際に取得して記憶された双方の端末装置１０の電話番号を読み出す。シグナリングサーバ２０は、音声通話セションを構築したサーバから取得した双方の端末装置１０の電話番号と、読み出した双方の端末装置１０の電話番号が一致するか否かを判定する。シグナリングサーバ２０は、双方の電話番号が一致したと判定した場合には、情報共有セションを維持する。一方、シグナリングサーバ２０は、双方の電話番号が一致しないと判定した場合には、情報共有セションを切断する。これにより、シグナリングサーバ２０は、端末装置１０が正規の装置であるか否かの判定を行う。
In addition, after the session is established, the signaling
また、シグナリングサーバ２０は、レジストレーション情報を記憶する。シグナリングサーバ２０は、このレジストレーション情報を利用して、情報通信セションの構築、及びセキュア判定を行う。このシグナリングサーバ２０が記憶するレジストレーション情報について、図５を参照して説明する。
In addition, the signaling
図５は、本実施形態のシグナリングサーバ２０が記憶するレジストレーション情報の一例を示す表である。シグナリングサーバ２０は、レジストレーション情報として、端末装置１０の電話番号と、端末モデル名と、プッシュＩＤと、アプリケーションバージョンとを記憶する。ここで、プッシュＩＤとは、端末装置１０上で動作する情報共有機能対応のアプリケーションについて、このアプリケーションを識別する識別情報である。
FIG. 5 is a table showing an example of registration information stored in the signaling
図４に戻り、シグナリングサーバ２０は、情報通信セションが確立された後には、所定の頻度で端末装置１０が正規の装置であるか否かを判定する。シグナリングサーバ２０は、端末装置１０が正規の装置であると判定した場合に限り、情報通信セションを構築し、又は確立された情報通信セションを維持する。具体的には、シグナリングサーバ２０は、端末装置１０が正規の装置であると判定した場合には、端末装置１０に対してトークンを発行する。このトークンとは、高速通信回線を経由して端末装置１０どうしが通信を行うための承諾情報である。このトークンには、発行の時点からの有効期限が設定されている。端末装置１０は、この有効なトークンが発行されている場合に、他の端末装置１０との画面情報共有を行うことができる。また、端末装置１は、トークンが発行されていない場合、及び発行されているトークンの有効期限が途過している場合には、他の端末装置１０との画面情報共有を行うことができない。このようにして、シグナリングサーバ２０は、端末装置１０の間の情報通信セションを管理する。
Returning to FIG. 4, after the information communication session is established, the signaling
認証サーバ３０は、端末装置１０の電話番号と、インターネットプロトコルアドレス（ＩＰアドレス）とを関連付けて記憶している。認証サーバ３０は、シグナリングサーバ２０から、電話番号に対応するＩＰアドレスの要求があった場合に、端末装置１０の電話番号に対応するＩＰアドレスを、シグナリングサーバ２０に返答する。
The
なお、ある端末装置１０についての電話番号とＩＰアドレスとの組み合わせが、認証サーバ３０に記憶されている電話番号とＩＰアドレスとの組み合わせと一致しない場合には、この端末装置１０が正規の装置でない可能性がある。シグナリングサーバ２０は、ある端末装置１０から電話番号及びＩＰアドレスを取得し、認証サーバに記憶されている電話番号及びＩＰアドレスと比較して、電話番号とＩＰアドレスとの組み合わせが一致するか否かを判定する。この比較の結果、電話番号とＩＰアドレスとの組み合わせが一致すると判定した場合、シグナリングサーバ２０は、端末装置１０に対してトークンを発行する。また、この比較の結果、電話番号とＩＰアドレスとの組み合わせが一致しないと判定した場合、シグナリングサーバ２０は、端末装置１０に対してトークンを発行しない。
If the combination of the telephone number and the IP address for a certain
プッシュサーバ４０は、複数のプッシュＩＤを記憶する。このプッシュサーバ４０に記憶されるプッシュＩＤと、端末装置１０上で動作するアプリケーションとは、シグナリングサーバ２０によって対応付けられている。具体的には、端末装置１０において、ダウンロードされた新たなアプリケーションが初めて起動されると、この端末装置１０は、プッシュサーバ４０に対してプッシュＩＤの発行を要求する。プッシュサーバ４０は、この要求に基づいて端末装置１０の新たなアプリケーションに対するプッシュＩＤを発行して、発行したプッシュＩＤを端末装置１０に送信する。端末装置１０は、この新たなアプリケーションと、発行されたプッシュＩＤとを関連付けた情報を、シグナリングサーバ２０に対してレジストレーション情報として送信する。シグナリングサーバ２０は、端末装置１０から送信されたレジストレーション情報を記憶する。これにより、プッシュサーバ４０に記憶されるプッシュＩＤと、端末装置１０上で動作するアプリケーションとが、シグナリングサーバ２０によって対応付けられる。
The
また、プッシュサーバ４０は、端末装置１０においてアプリケーションがバージョンアップされると、このバージョンアップに伴って新たなプッシュＩＤを発行する。つまり、プッシュサーバ４０は、端末装置１０において動作するアプリケーションの、アプリケーションバージョンの更新に伴い、更新される。
Further, when the application is upgraded in the
また、プッシュサーバ４０は、被要求側の端末装置１０に対してシグナリングサーバ２０がセション構築開始の要求を行う際に、要求側の端末装置１０の電話番号をプッシュ技術により被要求側の端末装置１０に対して送信する。このプッシュ技術とは、端末装置１０に対する通信リクエストを、サーバ装置側（この例の場合には、シグナリングサーバ２０、及びプッシュサーバ４０側）からＩＰアドレスを用いてプッシュ配信する技術である。なお、以下の説明において、プッシュ技術によって情報を送信することを、単に、情報をプッシュするとも記載する。
Further, when the signaling
中継サーバ５０は、複数の端末装置１０の間の情報共有通信においてピア・トゥー・ピア接続ができない場合に、複数の端末装置１０の間の情報共有通信を行う中継サーバである。ピア・トゥー・ピア接続は、Ｐ２Ｐ接続とも称する。複数の端末装置１０の間の情報共有通信のＰ２Ｐセションが、所定の時間を超えても確立できない場合に、中継サーバ５０を介したセションが構築される。
The
［端末間通信システムの動作手順］
次に、図６及び図７を参照して、端末間通信システム１の動作手順について説明する。初めに、図６を参照して、端末装置１０のレジストレーション（初期設定）の動作手順について説明する。次に、図７を参照して、端末間通信システム１による情報通信セション構築の動作手順について説明する。なお、図４に示すステップＳの番号は、図６及び図７のステップＳの番号に対応する。
[Operation procedure of inter-terminal communication system]
Next, with reference to FIG.6 and FIG.7, the operation | movement procedure of the
［端末間通信システムの動作手順１：初期設定］
図６を参照して、端末装置１０のレジストレーション（初期設定）の動作手順について説明する。ここでは、端末装置１０−１、及び端末装置１０−２が順にレジストレーションを行う場合について説明する。
[Operation procedure of inter-terminal communication system 1: initial setting]
With reference to FIG. 6, an operation procedure of registration (initial setting) of the
図６は、本実施形態のレジストレーションの動作手順の一例を示す流れ図である。
端末装置１０−１は、情報共有機能対応のアプリケーションが端末装置１０−１において起動された場合に、プッシュサーバ４０に対して、起動されたアプリケーションに対応するプッシュＩＤの発行の要求を送信する（ステップＳ１０）。
プッシュサーバ４０は、プッシュＩＤの発行の要求を受信すると、起動されたアプリケーションに対応するプッシュＩＤを、端末装置１０−１に送信する（ステップＳ２０）。端末装置１０−１は、プッシュサーバ４０からプッシュＩＤを取得する（ステップＳ３０）。
FIG. 6 is a flowchart illustrating an example of an operation procedure of registration according to the present embodiment.
When the application corresponding to the information sharing function is activated in the terminal device 10-1, the terminal device 10-1 transmits a push ID issuance request corresponding to the activated application to the push server 40 ( Step S10).
Upon receiving the push ID issuance request, the
次に、端末装置１０は、レジストレーション情報を、シグナリングサーバ２０に対して送信する（ステップＳ４０）。ここで、レジストレーション情報には、ステップＳ１０において取得したプッシュＩＤと、このプッシュＩＤに対応するアプリケーションのアプリケーションバージョン情報と、自装置の電話番号と、自装置の端末モデル名称とが含まれる。
Next, the
シグナリングサーバ２０は、ステップＳ２０において送信されたレジストレーション情報を記憶して（ステップＳ５０）、端末装置１０−１についての、レジストレーションの処理を終了する。
The signaling
次に、シグナリングサーバ２０は、認証サーバ３０に対して、電話番号を送信する（ステップＳ６０）。この電話番号とは、ステップＳ２０において送信されたレジストレーション情報に含まれる電話番号である。
Next, the signaling
認証サーバ３０は、ステップＳ６０において送信された電話番号を受信し、この電話番号が予め登録されている電話番号であるか否かを判定して、この判定結果をシグナリングサーバ２０に送信する（ステップＳ７０）。ここで、認証サーバ３０に予め登録されている電話番号とは、端末装置１０が正規の端末装置１０であることを示す情報である。すなわち、認証サーバ３０は、端末装置１０から送信されたレジストレーション情報に含まれる電話番号が、正規の端末装置１０の電話番号であるか否かを判定する。また、ここでいう正規の端末装置１０とは、予め登録された正規の利用者に利用されている端末装置１０である。すなわち、シグナリングサーバ２０は、レジストレーション情報を送信した端末装置１０が、予め登録された正規の利用者本人が利用する端末装置１０であるか否かを判定する。つまり、シグナリングサーバ２０は、ステップＳ６０及びステップＳ７０において、端末装置１０の利用者の本人認証を行う。
The
また、端末装置１０−２は、図６に示すステップＳ１０−２からステップＳ７０−２によって、レジストレーションを行う。ここで、ステップＳ１０−２からステップＳ７０−２は、上述したステップＳ１０からステップＳ５０に対応する。このステップＳ１０−２からステップＳ７０−２についての説明は省略する。 Further, the terminal device 10-2 performs registration through steps S10-2 to S70-2 illustrated in FIG. Here, Steps S10-2 to S70-2 correspond to Steps S10 to S50 described above. A description of steps S10-2 to S70-2 will be omitted.
［端末間通信システムの動作２：セション構築］
次に、図７を参照して、端末装置１０のセション構築の動作手順について説明する。
図７は、本実施形態のセション構築の動作手順の一例を示す流れ図である。ここでは、端末装置１０−１と端末装置１０−２との間に情報通信セションを構築する場合について説明する。また、端末装置１０−１が情報共有の要求側であり、端末装置１０−２が情報共有の被要求側である場合について説明する。さらに、この端末装置１０の情報通信セション構築の動作は、端末装置１０−１と端末装置１０−２との間に既に音声通話セションが構築されており、端末装置１０−１と端末装置１０−２との間で音声データを通信している最中に開始される。
[Operation of inter-terminal communication system 2: session construction]
Next, with reference to FIG. 7, the operation procedure of session construction of the
FIG. 7 is a flowchart illustrating an example of an operation procedure for session construction according to the present embodiment. Here, a case where an information communication session is established between the terminal device 10-1 and the terminal device 10-2 will be described. The case where the terminal device 10-1 is the information sharing request side and the terminal device 10-2 is the information sharing request side will be described. Further, in the operation of information communication session establishment of the
要求側の端末装置１０−１は、情報共有の要求をシグナリングサーバ２０に対して送信する（ステップＳ１００）。
シグナリングサーバ２０は、端末装置１０から情報共有の要求を受け付ける（ステップＳ１１０）。この情報共有の要求には、被要求側の端末装置１０の電話番号が含まれている。
The requesting terminal device 10-1 transmits an information sharing request to the signaling server 20 (step S100).
The signaling
次に、シグナリングサーバ２０は、ステップＳ１１０において受け付けた電話番号と、予め記憶しているレジストレーション情報とを比較して、受信した電話番号が利用可能であるか否かを判定する（ステップＳ１２０）。
なお、シグナリングサーバ２０は、電話番号の判定に代えて、又は電話番号の判定に加えて、プッシュＩＤの判定を行うこともできる。具体的には、シグナリングサーバ２０は、ステップＳ１１０において受け付けた電話番号に対応するレジストレーション情報に、プッシュＩＤが登録されているか否かを判定する。
Next, the signaling
The signaling
次に、シグナリングサーバ２０は、ステップＳ１１０において受信した電話番号が利用可能であると判定した場合（ステップＳ１２０；ＹＥＳ）には、要求側の端末装置１０に対して、情報共有機能が利用可能である旨を通知する（ステップＳ１３０）。一方、シグナリングサーバ２０は、ステップＳ１１０において受信した電話番号が利用可能でないと判定した場合（ステップＳ１２０；ＮＯ）には、要求側の端末装置１０に対して、情報共有機能が利用不可能である旨を通知して、処理を終了する。
Next, when the signaling
なお、上述において、シグナリングサーバ２０は、シグナリングサーバ２０に対して情報共有の要求があった後に情報通信セションを構築する過程において、要求側の端末装置１０に対して情報共有機能が利用可能である旨を通知するとして説明したが、これに限られない。一例として、シグナリングサーバ２０は、情報共有の要求がなされる前において、要求側の端末装置１０に対して情報共有機能が利用可能である旨を通知してもよい。この場合、シグナリングサーバ２０は、端末装置１０間の音声通話開始時、又は音声通話中に、音声通話のバックグラウンド処理によって、情報共有の要求がなされる前において、要求側の端末装置１０に対して情報共有機能が利用可能である旨を通知する。
In the above description, the signaling
また、他の変形例として、シグナリングサーバ２０は、電話番号の判定に代えて、又は電話番号の判定に加えて、次に例示する条件によって情報共有機能が利用可能である旨を通知してもよい。一例として、シグナリングサーバ２０は、要求側の端末装置１０と、被要求側の端末装置１０とのいずれもに、情報共有アプリケーションがインストールされている場合に、情報共有機能が利用可能である旨を通知する。また、一例として、シグナリングサーバ２０は、要求側の端末装置１０にインストールされている情報共有アプリケーションのアプリケーションバージョンと、被要求側の端末装置１０にインストールされている情報共有アプリケーションのアプリケーションバージョンとが同一である場合に、情報共有機能が利用可能である旨を通知する。また、一例として、シグナリングサーバ２０は、要求側の端末装置１０にインストールされている情報共有アプリケーションと、被要求側の端末装置１０にインストールされている情報共有アプリケーションとが互換性を有する場合に、情報共有機能が利用可能である旨を通知する。
As another modification, the signaling
また、他の一例として、シグナリングサーバ２０は、要求側の端末装置１０と、被要求側の端末装置１０とが、いずれも高速データ通信回線（例えば、ＶｏＬＴＥ）による通信に対応する端末装置である場合に、情報共有機能が利用可能である旨を通知する。
As another example, the signaling
次に、要求側の端末装置１０は、情報共有機能が利用可能である旨の通知を受信すると、シグナリングサーバ２０にセション構築の要求を送信する（ステップＳ１４０）。このセション構築の要求には、送信要求側の端末装置１０の電話番号及びＩＰアドレスと、被要求側の端末装置１０の電話番号とが含まれる。
なお、上述したステップＳ１００と、ステップＳ１４０との処理タイミングの前後関係は問わない。例えば、ステップＳ１００が先で、ステップＳ１４０が後でもよく、これらステップＳ１００と、ステップＳ１４０とが同時に行われてもよい。
Next, when receiving the notification that the information sharing function is available, the requesting
Note that there is no limitation on the order of processing timing between step S100 and step S140 described above. For example, step S100 may be performed first, step S140 may be performed later, and step S100 and step S140 may be performed simultaneously.
次に、シグナリングサーバ２０は、ステップＳ１３０において送信されたセション構築の要求を受信すると、プッシュサーバ４０に対して、セション構築情報を送信する（ステップＳ１５０）。このセション構築情報には、要求側の端末装置１０の電話番号と、プッシュＩＤとが含まれている。このとき、シグナリングサーバ２０は、被要求側の端末装置１０の電話番号を検索キーにしてレジストレーション情報を検索することにより、プッシュＩＤを取得する。このプッシュＩＤは、被要求側の端末装置１０において動作する情報共有アプリケーションに対応している。
Next, when the signaling
プッシュサーバ４０は、ステップＳ１５０において送信されたセション構築情報を受信すると、このセション構築情報に含まれるプッシュＩＤに基づいて、被要求側の端末装置１０に対して、情報共有アプリケーションの起動要求をプッシュする（ステップＳ１６０）。このときプッシュサーバ４０がプッシュする情報には、要求側の端末装置１０の電話番号が含まれている。
Upon receiving the session construction information transmitted in step S150, the
被要求側の端末装置１０は、ステップＳ１６０のプッシュが行われると、受信した要求側の端末装置１０の電話番号が、現在通話中の相手の電話番号と一致するか否かを判定する（ステップＳ１７０）。被要求側の端末装置１０は、受信した要求側の端末装置１０の電話番号が、現在通話中の相手の電話番号と一致すると判定した場合（ステップＳ１７０；ＹＥＳ）には、処理をステップＳ１８０に進める。一方、被要求側の端末装置１０は、受信した要求側の端末装置１０の電話番号が、現在通話中の相手の電話番号と一致しないと判定した場合（ステップＳ１７０；ＮＯ）には、情報共有の承認をしない旨を、シグナリングサーバ２０を介して要求側の端末装置１０に送信して、処理を終了する。
When the requested
次に、被要求側の端末装置１０は、情報共有の承認画像を表示し、ユーザの承認操作を待つ（ステップＳ１８０）。被要求側の端末装置１０は、ユーザが承認する操作を行った場合（ステップＳ１８０；ＹＥＳ）には、シグナリングサーバ２０に対してセション構築承認情報を送信する（ステップＳ１９０）。このセション構築承認情報には、被要求側の端末装置１０の電話番号、ＩＰアドレス及びポート番号が含まれている。一方、被要求側の端末装置１０は、ユーザが承認しない操作を行った場合（ステップＳ１８０；ＮＯ）には、情報共有の承認をしない旨を、シグナリングサーバ２０を介して要求側の端末装置１０に送信して、処理を終了する。
Next, the requested
次に、シグナリングサーバ２０は、ステップＳ１９０において送信されたセション構築承認情報を受信すると、要求側の端末装置１０と、被要求側の端末装置１０との間において情報通信セションを構築して（ステップＳ２００）、セション構築の処理を終了する。具体的には、ステップＳ２００において、シグナリングサーバ２０は、ステップＳ１９０において送信された被要求側の端末装置１０のＩＰアドレス及びポート番号を、要求側の端末装置１０に送信する。次に、要求側の端末装置１０は、要求側の端末装置１０のＩＰアドレス及びポート番号を、シグナリングサーバ２０に送信する。シグナリングサーバ２０は、要求側の端末装置１０のＩＰアドレス及びポート番号を受信すると、受信したＩＰアドレス及びポート番号を被要求側の端末装置１０に送信する。これにより、要求側の端末装置１０は、被要求側の端末装置１０のＩＰアドレス及びポート番号を取得する。また、被要求側の端末装置１０は、要求側の端末装置１０のＩＰアドレス及びポート番号を取得する。すなわち、複数の端末装置１０は、互いに、情報共有相手の端末装置１０のＩＰアドレス及びポート番号を取得する。
Next, when receiving the session construction approval information transmitted in step S190, the signaling
なお、シグナリングサーバ２０は、セション構築時（例えばステップＳ１５０）において、音声通話セションにより音声データを通信している双方の端末装置１０間について情報通信セションを構築していることを確認する処理を実施してもよい。
すなわち、シグナリングサーバ２０は、現在通話中の双方の端末装置１０電話番号を予め記憶しておく。例えば、シグナリングサーバ２０は、図示しない音声通話セションを構築したサーバから通話中の双方の端末装置１０の電話番号を受信して、内部に記憶する。
シグナリングサーバ２０は、セション構築の要求を受信すると（ステップＳ１４０）、当該セション構築の要求に含まれる双方の端末装置１０の電話番号と、予め記憶された双方の端末装置１０の電話番号とが一致するかを判定する。シグナリングサーバ２０は、双方の電話番号が一致したと判定した場合には、プッシュサーバ４０にセション構築情報を送信して、セション構築の動作を継続させる。一方、シグナリングサーバ２０は、双方の電話番号が一致しないと判定した場合には、セション構築を終了するために、プッシュサーバ４０へセション構築情報を送信しない。また、シグナリングサーバ２０は、情報共有の承認をしない旨を、端末装置１０に送信してもよい。
Note that the signaling
That is, the signaling
When the signaling
セション構築の処理が終了すると、端末装置１０−１及び端末装置１０−２は、相互に情報共有を行う（ステップＳ２１０）。この情報共有は、端末装置１０−１または端末装置１０−２により、情報通信セションを利用して通信相手の端末装置１０に情報を送信する。
When the session construction process ends, the terminal device 10-1 and the terminal device 10-2 share information with each other (step S210). In this information sharing, the terminal device 10-1 or the terminal device 10-2 uses the information communication session to transmit information to the communication
［情報発信側の端末装置１０の情報送信処理］
次に、情報発信側の端末装置１０により情報を送信する処理について説明する。
この情報発信側の端末装置１０は、制御部１６０により音声データを情報受信側の端末装置１０との間で通信して情報発信側の端末装置１０との間の通話音声を音再生部１３０に出力させている最中において、情報発信側の端末装置１０における制御部１６０は、表示部１００に出力させている情報の送信制御情報を判定する。制御部１６０は、判定した送信制御情報に基づいて、通信部１５０による情報の送信を制御する。制御部１６０は、判定した送信制御情報に基づいて、送信される情報の視覚効果の変化するよう制御する。
[Information transmission processing of
Next, processing for transmitting information by the
The
図８は、情報発信側の端末装置１０において情報を送信する際の動作を示すフローチャートである。先ず、情報発信側の端末装置１０は、自装置から情報受信側の端末装置１０に情報を送信するタイミングが到来すると（ステップＳ１００：ＹＥＳ）、表示部１００に出力されている情報を取得する。このとき、情報発信側の端末装置１０は、表示部１００に出力されている情報の送信制御情報を取得する。
送信制御情報とは、情報受信側の端末装置１０に送信することがユーザによって承諾されているか否かを示す設定情報である。送信制御情報は、予めユーザの操作に基づいて表示部１００に出力される情報ごとに設定される。
FIG. 8 is a flowchart showing an operation when transmitting information in the
The transmission control information is setting information indicating whether or not transmission to the
送信制御情報を設定する処理は、情報通信セションにおいて、情報を情報発信側の端末装置１０から情報受信側の端末装置１０に送信させる前に、情報を送信する承諾可否画像を表示部１００に表示させる。この承諾可否画像には、情報の送信を承諾するタップ操作を受け付ける画像、および情報の送信を承諾しないタップ操作を受け付ける画像が含まれる。
In the process of setting the transmission control information, before the information is transmitted from the
情報発信側の端末装置１０は、情報共有を開始させる前における操作に基づいて送信制御情報を設定する。例えば、情報発信側の端末装置１０が情報を表示させている状態で、ランチャー画像Ｐ２０（図３（Ｂ））における表示画面共有機能に対応したアイコン画像がタップ操作されたことに応じて、情報発信側の端末装置１０は、図３（Ｃ）に示すような操作説明画像Ｐ２２を、承諾可否画像として表示させる。情報発信側の端末装置１０は、画面共有を承諾するタップ操作を受け付けると、表示部１００に表示された情報の送信を承諾する送信制御情報を生成する。一方、画面共有を承諾しないタップ操作を受け付けると、表示部１００に表示された情報の送信を承諾しない送信制御情報を生成する。
The
また、情報発信側の端末装置１０は、情報共有を承諾するタップ操作を受け付けた後、表示部１００に表示させる画像（情報）を切り換えるための操作に応じて送信制御情報を設定してもよい。
図９は、新たな情報を送信する前に表示させる承諾可否画像を含む画面を示す。情報発信側の端末装置１０は、情報共有中における画像の切り換え操作を検出したことに応じて承諾可否画像を表示させる。この承諾可否画像は、表示部１００に表示させている画面の下部に起動されるランチャー画像である。
この承諾可否画像には、例えば「画像（切り換え後の画像）を共有しますか？」というメッセージ画像と、情報の送信を承諾または拒否にするタップ操作を受け付けるための画像とが含まれる。情報発信側の端末装置１０は、承諾可否画像に対するタップ操作を受け付ける。情報発信側の端末装置１０は、情報の共有を承諾するタップ操作を受け付けた場合、当該情報の送信制御情報を「承諾」に設定する。情報発信側の端末装置１０は、情報の共有を拒否するタップ操作を受け付けた場合、当該情報の送信制御情報を「拒否」に設定する。
The
FIG. 9 shows a screen including a permission / non-permission image to be displayed before transmitting new information. The
This acceptance / rejection image includes, for example, a message image “Do you share an image (image after switching)?” And an image for accepting a tap operation for accepting or rejecting information transmission. The
情報発信側の端末装置１０は、最上位レイヤに表示させる画像を切り換える操作を検出したことに応じて承諾可否画像を表示させてもよい。情報発信側の端末装置１０は、承諾可否画像に対するタップ操作に基づいて、当該最上位レイヤに表示される画像の送信制御情報を生成する。
また、情報発信側の端末装置１０は、ウェブページにおけるリンク先をタップ操作が検出されたことに応じて承諾可否画像を表示させてもよい。情報発信側の端末装置１０は、承諾可否画像に対するタップ操作に基づいて、リンク先の送信制御情報を生成する。
さらに、情報発信側の端末装置１０は、動画像または静止画像を表示させる操作、新たな文書ドキュメントを表示させる操作、受信メールまたは送信メールを表示させる操作、または着信通知やメール受信があったことを知らせるポップアップ表示が検出されたことに応じて承諾可否画像を表示させてもよい。情報発信側の端末装置１０は、承諾可否画像に対するタップ操作に基づいて、動画像、静止画像、文書ドキュメント、受信メールまたは送信メールの送信制御情報を生成する。
なお、情報共有中において承諾可否画像を情報発信側の端末装置１０に表示させる場合、情報発信側の端末装置１０は、承諾可否画像を送信対象から除外する。すなわち、情報発信側の端末装置１０は、承諾可否画像以外の表示部１００に表示されている画像を送信対象にする。
The
Further, the
Further, the
In addition, when displaying the approval / disapproval image on the information transmission-
さらに、情報発信側の端末装置１０は、アプリケーションが起動されることに応じて承諾可否画像を表示させてもよい。情報発信側の端末装置１０は、承諾可否画像に対するタップ操作に基づいて、アプリケーションの送信制御情報を生成する。また、アプリケーションの送信制御情報を作成するに際して、情報発信側の端末装置１０は、ランチャー画像Ｐ２０における表示画面共有機能に対応したアイコン画像がタップ操作されたことに応じて、画面共有を許容するアプリケーションの名称の一覧を含む承諾可否画像を表示部１００に表示させてもよい。
Furthermore, the
図１０は、画面共有を開始する前に表示させる承諾可否画像を含む画面を示す。情報発信側の端末装置１０は、情報共有を開始させるための承諾可否画像に、複数のアプリケーションの名称および当該アプリケーションから表示部１００に出力させる情報の共有の承諾可否を示すラジオボタンと、情報の送信を承諾または拒否にするタップ操作を受け付けるための画像とを含める。情報発信側の端末装置１０は、各アプリケーションに対応したラジオボタンに対するタップ操作を受け付け、さらに、情報の送信を承諾または拒否にするタップ操作を受け付けるための画像に対するタップ操作を受け付ける。
情報発信側の端末装置１０は、情報の共有を承諾するタップ操作を受け付けた時点において各アプリケーションに対応したラジオボタンの選択状態に基づいて、各アプリケーションの送信制御情報を生成する。情報発信側の端末装置１０は、図１０の例において、アプリＡ、Ｃに対応したラジオボタンの承諾（はい）が選択されているので、アプリケーションＡ、Ｃの送信制御情報を「承諾」に設定する。また、情報発信側の端末装置１０は、アプリＢに対応したラジオボタンの拒否（いいえ）が選択されているので、アプリケーションＢの送信制御情報を「拒否」に設定する。
なお、情報の共有を承諾するアプリケーションを選択させる手法は、各アプリケーションに対応したラジオボタンへの選択操作に限らず、他の手法であってもよく、例えばプルダウンメニューで承諾または拒否が選択可能であってもよい。
FIG. 10 shows a screen including an approval / denial image to be displayed before screen sharing is started. The
The
Note that the method for selecting an application that accepts sharing of information is not limited to the selection operation to the radio button corresponding to each application, and other methods may be used. For example, acceptance or rejection can be selected from a pull-down menu. There may be.
さらに、情報発信側の端末装置１０は、電子メールアプリケーションにより参照される電子メールアドレスごとに送信制御情報を生成してもよい。この電子メールアドレスは、メールアドレスを管理するアドレス帳アプリケーションが提供するアドレス帳の画像である。アドレスごとの送信制御情報は、アドレス帳アプリケーションにおいて電子メールアドレスを登録または編集する動作モードにより、情報共有機能アプリケーションによる情報送信の承諾または拒否が設定される。
これにより、情報発信側の端末装置１０は、電子メールアドレスごとに設定された送信制御情報を参照し、当該電子メールアドレスを含む電子メール画面（新規作成メール、保存メール、送信メールおよび受信メールを含む）の送信を制御し、または電子メール画面の視覚効果を変化させる。
Furthermore, the
Thereby, the
情報発信側の端末装置１０は、電子メールデータを保存している電子メールフォルダごとに送信制御情報を設定してもよい。電子メールフォルダごとの送信制御情報は、電子メールアプリケーションにおける電子メールフォルダの設定機能により、情報共有機能アプリケーションによる送信の承諾または拒否が設定される。電子メールフォルダに格納された電子メールデータは、電子メールフォルダに設定された送信制御情報と同じ送信制御情報が設定される。
これにより、情報発信側の端末装置１０は、電子メールフォルダごとに設定された送信制御情報を参照し、当該電子メールフォルダに格納された電子メールの一覧、当該電子メールフォルダに格納された電子メールの画面の送信を制御し、または電子メールの一覧および電子メール画面の視覚効果を変化させる。
The
Thereby, the
情報発信側の端末装置１０は、通話相手のユーザ毎に送信制御情報を生成してもよい。情報発信側の端末装置１０は、承諾可否画像に対するタップ操作を受け付けたことに応じて、通話中の情報受信側の端末装置１０の情報（電話番号およびＩＰアドレス）に対応させて送信制御情報を生成する。これにより、情報発信側の端末装置１０は、通話相手のユーザ毎に情報の送信を制御できる。
さらに、情報発信側の端末装置１０は、３者間で通話を行うと共に、３者間で情報の通信を行う場合にも、通話相手ごとに設定された送信制御情報に基づいて情報の送信を制御してもよい。３者間の情報通信は、単一の情報発信側の端末装置１０と、２台の情報受信側の端末装置１０とが情報通信セションにより情報を通信する通信モードである。情報発信側の端末装置１０は、３者間通信の情報共有セションが構築されたことに応じて、２台の情報受信側の端末装置１０のそれぞれについての送信制御情報を参照する。これにより、情報発信側の端末装置１０は、情報受信側の端末装置１０ごとに情報の送信を制御し、または情報の視覚効果を変化させる。
The
Further, the
なお、情報発信側の端末装置１０は、送信制御情報が設定されていない場合、情報通信セッションが構築されていても情報受信側の端末装置１０へ情報を送信せず、情報の送信が承諾されて情報制御情報が生成された後に当該情報を送信する。すなわち、情報発信側の端末装置１０に情報を表示しても、情報発信側の端末装置１０において送信制御情報が生成されるまで情報は送信されず、承諾することの送信制御情報が生成された後に、情報受信側の端末装置１０に情報を表示させる。
If the transmission control information is not set, the
情報発信側の端末装置１０は、取得された情報の送信制御情報を判定し（ステップＳ１０４）、情報の共有が制限されているか否かを判定する（ステップＳ１０６）。情報発信側の端末装置１０は、送信制御情報が情報の送信を承諾するものである場合（ステップＳ１０６；ＮＯ）、表示部１００に表示されている情報を送信する（ステップＳ１０８）。
The
一方、情報発信側の端末装置１０は、情報の送信が制限されている場合（ステップＳ１０６；ＹＥＳ）、表示部１００に表示されている情報の共有について制限を実施する（ステップＳ１１０）。この情報の共有制限には、情報の送信を制御すること、または情報の視覚効果を変化させることが含まれる。
情報の送信を制御することには、情報の送信を中断または中止させることが含まれる。
情報の視覚効果を変化させることとは、表示部１００に表示されている情報の輝度、色等の視覚効果に関するパラメータを変化させることと、情報を他の情報に置き換えることとを含む。
視覚効果に関するパラメータを変化させることには、情報受信側の端末装置１０における表示部１００に情報を表示させても情報の内容が知覚できないほど情報を加工することが含まれる。例えば、情報発信側の端末装置１０は、情報発信側の端末装置１０の表示部１００に表示されている情報の解像度、または輝度等を低下させる。
情報を他の情報に置き換えることには、例えば、情報発信側の端末装置１０の表示部１００に表示されている情報を、黒画像に置き換えることが含まれる。これにより、情報発信側の端末装置１０は、情報発信側の端末装置１０の表示部１００に表示されている画像Ｐ２６（図１１（Ａ））を黒画像に置き換え、情報受信側の端末装置１０の表示部１００に表示させる画像Ｐ２７を黒画像に変更させる（図１１（Ｂ））。
また、情報発信側の端末装置１０は、表示部１００に表示されている情報に代えて置き換えられる画像を、ユーザにより選択可能にしてもよい。例えば、情報共有機能アプリケーションの設定モードにおいて、黒画像、絵柄画像またはメッセージ画像のうち、ユーザが選択した画像を記憶しておく。情報発信側の端末装置１０は、表示部１００に表示されている情報を置き換える場合に、予め選択された画像を読み出して、当該画像に置き換えた情報を情報受信側の端末装置１０へ送信させる。
On the other hand, when the transmission of information is restricted (step S106; YES), the
Controlling the transmission of information includes interrupting or stopping the transmission of information.
Changing the visual effect of information includes changing parameters relating to the visual effect such as brightness and color of information displayed on the
Changing the parameter relating to the visual effect includes processing the information so that the content of the information cannot be perceived even if the information is displayed on the
Replacing the information with other information includes, for example, replacing the information displayed on the
Further, the
この情報の共有制限において、情報発信側の端末装置１０は、表示部１００に表示されている情報に複数の情報が含まれている場合、各情報についてステップＳ１０２〜ステップＳ１１０の処理を実施してもよい。
また、情報発信側の端末装置１０は、複数の情報のうち何れかの情報の送信制御情報に基づいて複数の情報の共有制限を実施してもよい。情報発信側の端末装置１０は、何れかの情報の送信制御情報が送信拒否である場合、複数の情報の全てを送信させない、または、複数の情報の全ての視覚効果を変化させる。これにより、例えば、情報発信側の端末装置１０は、全ての情報を画像Ｐ２６（図１１（Ａ））を黒画像に置き換え、情報受信側の端末装置１０の表示部１００に表示させる画像Ｐ２７を黒画像に変更させる（図１１（Ｂ））。
In the information sharing restriction, when the information displayed on the
Further, the
図１２は、情報発信側の端末装置１０の画面および情報受信側の端末装置１０の画面の一例を示す模式図である。図１２（Ａ）に示すように、情報発信側の端末装置１０の表示部１００に表示させている情報Ｐ２６に文書情報Ｐ２６ａおよび画像情報Ｐ２６ｂが含まれており、文書情報Ｐ２６ａの送信制御情報が送信承諾であり、画像情報Ｐ２６ｂの送信制御情報が送信拒否であるとする。図１２に示した画像Ｐ２６は、例えばＰＤＦ（Portable Document Format）形式の文書ドキュメントである。
この場合、情報発信側の端末装置１０は、文書情報Ｐ２６ａをそのまま送信させ、画像情報Ｐ２６ｂに対して共有制限を実施する。例えば、情報発信側の端末装置１０は、画像情報Ｐ２６ｂを黒画像に変換させることにより、図１２（Ｂ）に示すように、閲覧可能な文書情報Ｐ２６ａと視覚効果が低下された画像情報Ｐ２７ｂとを含む画像Ｐ２７を情報受信側の端末装置１０の表示部１００に表示させる。
FIG. 12 is a schematic diagram illustrating an example of a screen of the
In this case, the
なお、情報発信側の端末装置１０は、情報共有の動作を行っている最中に、ユーザの操作により、当該情報共有の動作を中断又は中止することができる。例えば、ユーザは、情報共有機能を利用中にその動作を中断させる場合には、表示部１００をダブルタップ操作する。情報発信側の端末装置１０の操作検出部１１０は、このダブルタップ操作を検出する。端末装置１０は、情報共有機能の動作中に、操作検出部１１０がダブルタップ操作を検出した場合、情報受信側の端末装置１０に対する情報の送信を中断する。
また、情報発信側の端末装置１０は、情報共有機能の動作の中断中に、操作検出部１１０がダブルタップ操作を検出した場合、情報受信側の端末装置１０に対する情報の送信を再開する構成であってもよい。
Note that the
Further, the
また、情報発信側の端末装置１０は、表示画面共有機能において、表示部１００に表示させている全情報ではなく、一部の情報の共有を中断または中止してもよい。表示部１００に複数の画像が表示されている場合において、操作検出部１１０がダブルタップ操作を検出した場合、ダブルタップ操作の位置を検出し、ダブルタップ操作の位置に対応する画像を判定する。これにより、情報発信側の端末装置１０は、ダブルタップ操作の位置に対応する画像の送信を中断する。
情報発信側の端末装置１０は、例えば、電子メールのアドレスの表示領域と電子メールの本文の表示領域とを含む電子メールアプリケーションの画像を表示させているとする。この場合において、情報発信側の端末装置１０は、電子メールの本文の表示領域に対するダブルタップ操作を検出した場合には、電子メールの本文の画像の送信を中断させる。
In addition, the
For example, it is assumed that the
さらに、情報発信側の端末装置１０は、表示画面共有機能において、表示部１００に表示されている情報に対して認識処理を行って画像の共有を中断または中止してもよい。情報発信側の端末装置１０は、予め情報の送信を中断または中止させる画像または文字を設定する。情報発信側の端末装置１０は、情報共有機能アプリケーションの設定モードにおいて送信を中断または中止させる画像または文字を設定し、設定された画像または文字を図示しないメモリに記憶する。
情報発信側の端末装置１０は、画面共有中において、表示部１００に表示されている情報に対して情報解析を行い、情報に含まれる画像または文字を認識し、認識された画像または文字と予め記憶された画像または文字とを比較する。情報発信側の端末装置１０は、認識された画像または文字が、予め記憶された画像または文字に一致または相当する場合には、情報の送信を中断または中止する。
情報発信側の端末装置１０は、例えば、「社外秘」を情報の共有を中断または中止させる画像または文字として設定しておき、表示部１００に表示されている情報に「社外秘」なる画像または文字が含まれていることを認識すると、情報の送信を中断または中止することができる。
Furthermore, the
The
For example, the
以上説明したように、実施形態として示した端末装置１０によれば、例えばユーザに送信制御情報を設定させることにより、自装置から送信させる情報を柔軟に設定できる。
As described above, according to the
さらに、情報発信側の端末装置１０は、表示部１００に出力させている情報が情報受信側の端末装置１０に送信されたことを通知する情報を表示部１００に表示させてもよい。
図１３は、情報発信側の端末装置１０の画面および情報受信側の端末装置１０の画面の一例を示す模式図である。
図１３（Ａ）に示す情報発信側の端末装置１０の表示部１００に表示させている文書情報Ｐ２６ａを、図１３（Ｂ）に示す情報受信側の端末装置１０の表示部１００に文書情報Ｐ２７ａとして表示させている場合に、情報発信側の端末装置１０は、文書情報Ｐ２６ａを囲うようにハイライト画像Ｐ２６ｃを表示させる。一方、情報発信側の端末装置１０は、情報受信側の端末装置１０に送信させていない画像情報Ｐ２６ｂに対してはハイライト画像を表示させない。これにより、情報発信側の端末装置１０は、情報発信側の端末装置１０のユーザに文書情報Ｐ２６ａが情報受信側の端末装置１０に送信されたことを提示できる。
なお、情報受信側の端末装置１０に送信されたことを通知する情報は、ハイライト画像Ｐ２６ｃではなく他の形態であってもよい。例えば、情報受信側の端末装置１０に送信されたことを通知する情報は、メッセージであってもよく、送信される情報全体を覆う画像であってもよく、カラー画像であってもよく、点滅画像であってもよい。さらに、情報受信側の端末装置１０に送信されたことを通知する情報は、表示部１００における輝度等の表示状態を変更された表示画像であってもよい。これにより情報発信側の端末装置１０は、情報発信側の端末装置１０のユーザに表示部１００に表示されている情報が送信されていることを通知できる。
Further, the
FIG. 13 is a schematic diagram illustrating an example of a screen of the
The document information P26a displayed on the
Note that the information notifying that the information has been transmitted to the
さらに、情報発信側の端末装置１０は、表示部１００に出力させている情報が、視覚効果が変化されて情報受信側の端末装置１０に送信されたことを通知する情報を表示部１００に表示させてもよい。
図１４は、情報発信側の端末装置１０の画面および情報受信側の端末装置１０の画面の一例を示す模式図である。図１４（Ａ）に示す情報発信側の端末装置１０の表示部１００に表示させている画像情報Ｐ２６ｂの視覚効果を変化させて送信させ、図１４（Ｂ）に示す情報受信側の端末装置１０の表示部１００に加工された画像情報Ｐ２７ｂとして表示させている場合に、情報発信側の端末装置１０は、画像情報Ｐ２６ｂを覆うようにハイライト画像Ｐ２６ｂ＃を重畳して表示させる。一方、情報発信側の端末装置１０は、視覚効果を変化させていない文書情報Ｐ２６ａに対してはハイライト画像を表示させない。これにより、情報発信側の端末装置１０は、情報発信側の端末装置１０のユーザに画像情報Ｐ２６ｂの視覚効果が変化されて情報受信側の端末装置１０に送信されたことを提示できる。
Furthermore, the
FIG. 14 is a schematic diagram illustrating an example of a screen of the
なお、情報受信側の端末装置１０に視覚効果が変化されて送信されたことを通知する情報は、ハイライト画像Ｐ２６ｂ＃ではなく他の形態であってもよい。例えば、情報受信側の端末装置１０に送信されたことを通知する情報は、メッセージであってもよく、情報の表示枠を囲う画像であってもよく、カラー画像であってもよく、点滅画像であってもよい。さらに、情報受信側の端末装置１０に視覚効果が変化されて送信されたことを通知する情報は、表示部１００における輝度等の表示状態を変更された表示画像であってもよい。これにより情報発信側の端末装置１０は、情報発信側の端末装置１０のユーザに表示部１００に表示されている情報が、視覚効果が変化されて送信されていることを通知できる。
Note that the information for notifying the
さらに、上述した実施形態において、送信制御情報は、表示部１００に情報を出力させるアプリケーションの属性情報に基づいて設定してもよい。アプリケーションの属性情報とは、上述した情報の送信を承諾または拒否を示す情報に加えて、アプリケーションの名称、種類、または設定情報等を含む。
アプリケーションの種類は、電話（音声通信）アプリケーション、アドレス帳アプリケーション、動画再生アプリケーション、ウェブブラウザアプリケーション、地図アプリケーション、写真アルバムアプリケーション、電子メールアプリケーション、文書アプリケーション、テキストチャットアプリケーション等が挙げられる。情報発信側の端末装置１０は、アプリケーションの名称および種類に対応して送信制御情報が設定される。このアプリケーションの名称および種類に対応した送信制御情報を設定する設定処理は、情報共有機能アプリケーションの設定モードにおいて設定することができる。また、アプリケーションに対応した送信制御情報は、当該アプリケーションが通信を行う相手側装置ごとに設定してもよい。さらに、アプリケーションに対応した送信制御情報は、初期値は「拒否」に設定され、承諾可否画像に対して承諾の操作が受け付けられたことに応じて「承諾」に変更させてもよい。アプリケーションの属性情報に対応した送信制御情報は、情報発信側の端末装置１０内の図示しないメモリに記憶される。
情報発信側の端末装置１０は、情報を送信する際に、表示部１００に情報を出力させているアプリケーションの名称および種類を判定し、アプリケーションの名称および種類に対応した送信制御情報を参照する。これにより情報発信側の端末装置１０は、アプリケーションの名称および種類に基づいて情報の送信を制御、または情報の視覚効果を変化させる。
Further, in the above-described embodiment, the transmission control information may be set based on attribute information of an application that causes the
Examples of the application include a telephone (voice communication) application, an address book application, a moving picture reproduction application, a web browser application, a map application, a photo album application, an e-mail application, a document application, and a text chat application. In the
When transmitting information, the
さらに、上述した実施形態において、情報発信側の端末装置１０は、アプリケーションの属性情報に基づいて、送信される情報に対する複数の視覚効果のうちいずれかを選択して、選択された視覚効果となるように情報を処理させてもよい。
情報発信側の端末装置１０は、情報共有機能アプリケーションの設定モードにおいて、アプリケーションの属性情報に対応して情報の視覚効果を設定して送信制御情報を生成する。アプリケーションの属性情報に対応した情報の視覚効果は、情報発信側の端末装置１０内の図示しないメモリに記憶される。
情報発信側の端末装置１０は、情報を送信する際に、表示部１００に情報を出力させているアプリケーションの名称および種類を判定し、アプリケーションの名称および種類に対応した送信制御情報を参照する。情報発信側の端末装置１０は、情報の送信が承諾されていた場合、アプリケーションの送信制御情報に対応した視覚効果を参照する。これにより情報発信側の端末装置１０は、アプリケーションの属性情報に基づいて情報の視覚効果を変化させる。
Further, in the above-described embodiment, the
In the information sharing function application setting mode, the
When transmitting information, the
さらに、上述した実施形態において、情報発信側の端末装置１０は、アプリケーションの属性情報に基づいて送信される情報の保存権限を設定し、保存権限が設定された情報を通信部１５０に送信させてもよい。情報の保存権限は、情報の保存を承諾または拒否とする情報である。また、情報の保存権限には、情報を保存する残り回数が含まれていてもよく、情報を保存する権限を有するユーザまたは端末を特定する情報が含まれていてもよい。情報の保存権限は、アプリケーションまたは情報共有機能アプリケーションの設定モードにより設定されてもよく、情報発信側の端末装置１０のユーザの操作に基づいて設定されてもよい。
Furthermore, in the above-described embodiment, the
情報発信側の端末装置１０は、情報を送信する際に、表示部１００に情報を出力させているアプリケーションの属性情報を判定し、アプリケーションの属性情報に対応した保存権限を参照する。情報発信側の端末装置１０は、保存権限が設定されていない場合、情報に保存権限を設定せずに通信部１５０から情報を送信させる。一方、情報発信側の端末装置１０は、保存権限が設定されている場合、情報に保存権限を設定して通信部１５０から情報を送信させる。情報受信側の端末装置１０は、情報を受信すると、当該情報に設定された保存権限を参照する。情報受信側の端末装置１０は、保存権限が承諾である場合には受信した情報を表示部１００に表示させると共に図示しないメモリに保存する。情報受信側の端末装置１０は、保存権限が拒否である場合には受信した情報を表示部１００に表示させ、表示部１００への表示後に情報を消去する。
When transmitting information, the
また、情報発信側の端末装置１０は、ユーザの操作を受け付けて、情報受信側の端末装置１０に保存させることを許容する情報を選択させてもよい。例えば、図１５に示すような画面共有の承諾可否画像に、「保存を承諾しますか？」というメッセージおよび情報の保存を承諾または拒否にするタップ操作を受け付けるための画像とを含める。これにより情報発信側の端末装置１０は、情報の保存を承諾または拒否にする画像に対するタップ操作を受け付けて、情報の保存権限を設定する。
Further, the
さらに、上述した実施形態において、情報発信側の端末装置１０は、表示部１００に出力させている情報の送信が拒否であることを通知する情報を通信部１５０に送信させてもよい。情報発信側の端末装置１０は、表示部１００に表示されている情報の送信が拒否であると判定した場合、当該情報に代えて、情報の送信が拒否であることを通知する情報を通信部１５０に送信させる。情報の送信が拒否であることを通知する情報は、情報受信側の端末装置１０に受信される。これにより、情報受信側の端末装置１０は、情報発信側の端末装置１０から情報の送信が拒否とされたことをユーザに通知できる。
Further, in the above-described embodiment, the
図１６は、情報発信側の端末装置１０の画面および情報受信側の端末装置１０の画面の一例を示す模式図である。図１６（Ａ）に示す情報発信側の端末装置１０の表示部１００に表示させている画像情報Ｐ２６ｂの送信が拒否である場合、図１６（B）に示すように、情報受信側の端末装置１０は、通知された情報に基づいて画像情報Ｐ２６ｂに対応した画像情報Ｐ２７ｂ＃の周囲を点滅させる。
FIG. 16 is a schematic diagram illustrating an example of a screen of the
なお、情報の送信が拒否であることを通知する形態は、点滅画像ではなく他の形態であってもよい。例えば、情報の送信が拒否であることを通知する形態は、メッセージであってもよく、情報を覆う画像であってもよく、カラー画像であってもよい。さらに、情報の送信が拒否であることを通知する形態は、表示部１００における輝度等の表示状態を変更された表示画像であってもよい。
In addition, the form which notifies that transmission of information is rejection may be another form instead of a blink image. For example, the form for notifying that transmission of information is rejected may be a message, an image covering the information, or a color image. Furthermore, the form for notifying that the transmission of information is rejected may be a display image in which the display state such as the luminance in the
また、情報発信側の端末装置１０は、情報受信側の端末装置１０に表示させている画面を自装置に表示させてもよい。このとき、情報受信側の端末装置１０は、通信部１５０から送信させている情報に基づいて表示データを生成して、表示部１００に表示させる。これにより、情報発信側の端末装置１０は、自装置に表示させる画像Ｐ２６と、情報受信側の端末装置１０に表示させている画像Ｐ２７とを切り替えて表示させることができ、情報発信側の端末装置１０のユーザに情報受信側の端末装置１０に表示させている画像を確認させることができる。
Further, the
情報受信側の端末装置１０は、情報発信側の端末装置１０から送信されていない画像の送信を要求してもよい。図１７は、本実施形態の端末装置において、情報発信側の端末装置１０の表示画面遷移および情報受信側の端末装置１０の表示画面遷移を示す。
情報発信側の端末装置１０に画像情報Ｐ２６ｂを表示させている状態で（図１７（Ａ１））、情報受信側の端末装置１０は、図１６（Ｂ）に示した画像情報Ｐ２７ｂ＃を表示させた後、ユーザが画像情報Ｐ２７ｂ＃に相当する位置をタップ操作したことに応じて、図１７（Ｂ１）に示すようなランチャー画像Ｐ２７ｃを表示させる。このランチャー画像Ｐ２７ｃには、「画像を要求しますか？」というメッセージ画像、および情報を要求するか否かを受け付ける画像が含まれる。情報受信側の端末装置１０は、画像を要求する「はい」に相当する位置に対するタップ操作を受け付けると、情報発信側の端末装置１０から送信されていない画像を要求するリクエストを情報発信側の端末装置１０に送信する。
The
While the image information P26b is displayed on the
情報発信側の端末装置１０は、情報発信側の端末装置１０から画像を要求するリクエストを受信すると、図１７（Ａ２）に示すようなランチャー画像Ｐ２６ｄを表示部１００に表示させる。このランチャー画像Ｐ２７ｄには、「画像共有を承諾しますか？」というメッセージ画像、および画像共有を承諾するか否かを受け付ける画像が含まれる。この時点において、情報受信側の端末装置１０には、画像情報は表示されていない（図１７（Ｂ２））。
情報発信側の端末装置１０は、画像共有を承諾する「はい」に相当する位置に対するタップ操作を受け付けると、送信させていない画像を情報受信側の端末装置１０に送信する。情報発信側の端末装置１０は、画像を送信したことに応じて、図１７（Ａ３）に示すように、画像情報Ｐ２６ｂを囲うようにハイライト画像２６ｃを表示させる。これにより、情報発信側の端末装置１０は、ユーザに画像情報Ｐ２６ｂが共有されていることを提示する。
When receiving the request for an image from the information transmission
When the
情報受信側の端末装置１０は、情報発信側の端末装置１０から送信された画像情報を受信すると、当該画像を表示部１００に表示させる。これにより、情報発信側の端末装置１０は、図１７（Ｂ３）に示すように、画像情報Ｐ２７ｂ＃における黒画像を、情報発信側の端末装置１０から送信された画像情報に置き換えることができる。
When receiving the image information transmitted from the
これにより、情報受信側の端末装置１０は、情報発信側の端末装置１０から送信されていない情報を表示させることができる。また、情報発信側の端末装置１０は、情報の送信が拒否である送信制御情報が設定されていても、ユーザ自身で情報を送信してもよい場合には送信制御情報にかかわらず情報を情報受信側の端末装置１０に送信させることができる。
Thereby, the
なお、情報受信側の端末装置１０は、情報発信側の端末装置１０から送信された画像を表示させる画面領域と、自装置の画像を表示させる画面領域とを分離してもよい。例えば、情報受信側の端末装置１０は、自装置の画像として、電子メールやＳＮＳ（Social Networking Service）の画像を表示させることができる。
Note that the
［変形例：タブレット型端末］
なお、これまで端末装置１０が、携帯電話やスマートフォンなどである場合を一例にして説明したが、これに限られない。例えば、端末装置１０は、タブレットなどの装置であってもよい。ここで、携帯電話やスマートフォンは、耳あて通話用スピーカ１３１を備えており、耳あて通話が可能である。一方、タブレットは、耳あて通話用スピーカ１３１を備えていない。すなわち、端末装置１０は、耳あて通話用スピーカ１３１を備えない装置であってもよい。端末装置１０がタブレットである場合には、スピーカモードによって通話が行われてもよい。
[Modification: Tablet terminal]
In addition, although the case where the
［変形例：テキスト通信中の情報共有］
なお、これまでの説明において、端末間通信システム１は、音声通話中において情報共有機能を提供するとして説明したが、これに限られない。端末間通信システム１は、テキストによる通信中において、情報共有機能を提供してもよい。例えば、端末間通信システム１は、テキストチャットアプリケーションが提供するチャット中に、情報共有機能を提供してもよい。
[Variation: Information sharing during text communication]
In the above description, the
以上、本発明の実施形態及びその変形を説明したが、これらの実施形態及びその変形は、例として提示したものであり、発明の範囲を限定することは意図していない。これら実施形態及びその変形は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態及びその変形は、発明の範囲や要旨に含まれると同時に、特許請求の範囲に記載された発明とその均等の範囲に含まれるものである。 As mentioned above, although embodiment of this invention and its deformation | transformation were demonstrated, these embodiment and its deformation | transformation were shown as an example and are not intending limiting the range of invention. These embodiments and modifications thereof can be implemented in various other forms, and various omissions, replacements, and changes can be made without departing from the spirit of the invention. These embodiments and modifications thereof are included in the scope and gist of the invention, and at the same time, are included in the invention described in the claims and equivalents thereof.
なお、上述の各装置は内部にコンピュータを有している。そして、上述した各装置の各処理の過程は、プログラムの形式でコンピュータ読み取り可能な記録媒体に記憶されており、このプログラムをコンピュータが読み出して実行することによって、上記処理が行われる。ここでコンピュータ読み取り可能な記録媒体とは、磁気ディスク、光磁気ディスク、ＣＤ−ＲＯＭ、ＤＶＤ−ＲＯＭ、半導体メモリ等をいう。また、このコンピュータプログラムを通信回線によってコンピュータに配信し、この配信を受けたコンピュータが当該プログラムを実行するようにしてもよい。 Each of the above devices has a computer inside. The process of each device described above is stored in a computer-readable recording medium in the form of a program, and the above-described processing is performed by the computer reading and executing the program. Here, the computer-readable recording medium means a magnetic disk, a magneto-optical disk, a CD-ROM, a DVD-ROM, a semiconductor memory, or the like. Alternatively, the computer program may be distributed to the computer via a communication line, and the computer that has received the distribution may execute the program.
また、上記プログラムは、前述した機能の一部を実現するためのものであってもよい。
さらに、前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるもの、いわゆる差分ファイル（差分プログラム）であってもよい。
The program may be for realizing a part of the functions described above.
Furthermore, what can implement | achieve the function mentioned above in combination with the program already recorded on the computer system, what is called a difference file (difference program) may be sufficient.
１…端末間通信システム、１０…端末装置、２０…シグナリングサーバ、３０…認証サーバ、４０…プッシュサーバ、５０…中継サーバ
DESCRIPTION OF
Claims (6)
前記情報の視覚効果を変化させる情報処理部と、
情報を送受信する通信部と、
前記通信部により受信された音声データに基づいて音声を出力させる音声出力部と、
前記通信部により音声データを他の端末装置との間で通信して前記他の端末装置との間の通話音声を前記音声出力部に出力させている最中において、前記表示部に出力させている情報の送信制御情報を判定し、前記表示部に表示されている前記情報に対して検出されたユーザ操作に基づいて前記通信部による前記情報の送信を中断または中止させるように制御する制御部と、を有し、
前記制御部は、前記表示部に出力させている前記情報が、視覚効果が変化されて前記他の端末装置に送信されたことを通知する情報を前記表示部に表示させる、
端末装置。 A display for displaying information;
An information processing unit for changing a visual effect of the information;
A communication unit for transmitting and receiving information;
An audio output unit that outputs audio based on audio data received by the communication unit;
While the voice data is communicated with the other terminal device by the communication unit and the voice signal with the other terminal device is being output to the voice output unit, the voice data is output to the display unit. A control unit that determines transmission control information of the information that is present and controls to interrupt or stop transmission of the information by the communication unit based on a user operation detected for the information displayed on the display unit and, the possess,
The control unit causes the display unit to display information for notifying that the information output to the display unit is transmitted to the other terminal device with a changed visual effect.
Terminal device.
請求項１に記載の端末装置。 The transmission control information is set based on attribute information of an application that causes the display unit to output the information.
The terminal device according to claim 1 .
請求項２に記載の端末装置。 The control unit sets the storage authority of the information to be transmitted based on the attribute information of the application, and causes the communication unit to transmit the information in which the storage authority is set.
The terminal device according to claim 2 .
請求項１から３のうち何れか１項に記載の端末装置。 The control unit causes the communication unit to transmit information notifying that transmission of the information being output to the display unit is a rejection.
The terminal device according to any one of claims 1 to 3 .
前記第１の端末装置および前記第２の端末装置のうち情報を出力する情報出力端末装置が、
自装置の表示部に出力させている情報の送信制御情報を判定し、
前記自装置の表示部に出力させている前記情報に対して検出されたユーザ操作に基づいて前記自装置の表示部に出力させている前記情報の送信を中断または中止させるように制御し、
前記情報出力端末装置が、
自装置の表示部に出力させている情報が、視覚効果が変化されて、前記第１の端末装置および前記第２の端末装置のうち他の端末装置に送信されたことを通知する情報を前記自装置の表示部に表示させる、
端末間通信方法。 Voice data is communicated between the first terminal device and the second terminal device, and voice is output by the voice output unit of the first terminal device and the voice output unit of the second terminal device. In the middle of being
An information output terminal device that outputs information among the first terminal device and the second terminal device,
Determine the transmission control information of the information being output to the display unit of its own device,
Control to interrupt or stop the transmission of the information to be output to the display unit of the device based on the user operation detected for the information to be output to the display unit of the device;
The information output terminal device
Information notifying that the information output to the display unit of the own device has been transmitted to another terminal device among the first terminal device and the second terminal device, with the visual effect changed, Display it on the display of your device,
Terminal-to-terminal communication method.
前記通信部により音声データを他の端末装置との間で通信して前記他の端末装置との間の通話音声を前記音声出力部に出力させている最中において、
前記表示部に出力させている情報の送信制御情報を判定するステップと、
前記表示部に出力させている前記情報に対して検出されたユーザ操作に基づいて前記通信部による前記情報の送信を中断または中止させるように制御するステップと、
前記表示部に出力させている前記情報が、視覚効果が変化されて前記他の端末装置に送信されたことを通知する情報を前記表示部に表示させるステップと、
を実行させるための端末装置用プログラム。 A display unit that displays information; an information processing unit that changes a visual effect of the information; a communication unit that transmits and receives information; an audio output unit that outputs audio based on audio data received by the communication unit; In a computer provided in a terminal device having
While the voice data is communicated with the other terminal device by the communication unit and the voice voice with the other terminal device is output to the voice output unit,
Determining transmission control information of information being output to the display unit;
Controlling to interrupt or stop transmission of the information by the communication unit based on a user operation detected for the information being output to the display unit ;
Displaying on the display unit information notifying that the information being output to the display unit has been transmitted to the other terminal device with a changed visual effect;
A program for a terminal device for executing
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2014217388A JP6396754B2 (en) | 2014-10-24 | 2014-10-24 | Terminal device, communication method between terminals, and program for terminal device |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2014217388A JP6396754B2 (en) | 2014-10-24 | 2014-10-24 | Terminal device, communication method between terminals, and program for terminal device |
Related Child Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2017091482A Division JP6409092B2 (en) | 2017-05-01 | 2017-05-01 | Terminal device, communication method between terminals, and program for terminal device |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2016086272A JP2016086272A (en) | 2016-05-19 |
| JP6396754B2 true JP6396754B2 (en) | 2018-09-26 |
Family
ID=55971894
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2014217388A Active JP6396754B2 (en) | 2014-10-24 | 2014-10-24 | Terminal device, communication method between terminals, and program for terminal device |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6396754B2 (en) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP7367909B2 (en) * | 2018-04-06 | 2023-10-24 | 株式会社プレイド | First terminal, server device, second terminal, information processing method, and program |
Family Cites Families (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2003174488A (en) * | 2001-12-05 | 2003-06-20 | Nippon Telegr & Teleph Corp <Ntt> | Communication control unit |
| DE10345444A1 (en) * | 2003-09-30 | 2005-04-21 | Siemens Ag | Method for establishing a communication connection |
| JP5413347B2 (en) * | 2010-09-29 | 2014-02-12 | ブラザー工業株式会社 | Terminal device, display control method, and display control program |
| JP5553721B2 (en) * | 2010-10-04 | 2014-07-16 | 株式会社Ｎｔｔドコモ | Display device, disclosure control device, disclosure control method, and program |
| JP5679425B2 (en) * | 2010-11-26 | 2015-03-04 | 株式会社Ｎｔｔドコモ | Display device, disclosure control device, disclosure control method, and program |
| JP5734085B2 (en) * | 2011-05-13 | 2015-06-10 | 株式会社Ｎｔｔドコモ | Screen sharing device, screen sharing system, screen sharing method and program |
| KR101140418B1 (en) * | 2011-09-10 | 2012-05-03 | 알서포트 주식회사 | Screen image interception method for mobile telephone on the remote control using status bar alert message |
-
2014
- 2014-10-24 JP JP2014217388A patent/JP6396754B2/en active Active
Also Published As
| Publication number | Publication date |
|---|---|
| JP2016086272A (en) | 2016-05-19 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP7435943B2 (en) | Notification Processing Methods, Electronic Devices, and Programs | |
| KR101942308B1 (en) | Method for providing message function and an electronic device thereof | |
| TWI544428B (en) | Messaging service system and method for expanding member addition operation | |
| CN103141075A (en) | Media/voice binding protocol and related user interfaces | |
| US8918083B2 (en) | System and method to manage visual voice mail messages | |
| US11765114B2 (en) | Voice communication method | |
| JP6409092B2 (en) | Terminal device, communication method between terminals, and program for terminal device | |
| KR20120023264A (en) | Method and apparatus for operating call function of portable terminal | |
| EP2660680A1 (en) | System and method for enabling collaborative gesture-based sharing of ressources between devices | |
| JP6396754B2 (en) | Terminal device, communication method between terminals, and program for terminal device | |
| JP6254067B2 (en) | Inter-terminal communication system, server, and inter-terminal communication method | |
| JP6081973B2 (en) | Inter-terminal communication system, inter-terminal communication method, and inter-terminal communication program | |
| JP6059699B2 (en) | Terminal device, operation reception method, and program | |
| KR20140062795A (en) | Method for providing caller information and an electronic device thereof | |
| JP2018117394A (en) | Inter-terminal communication system, server device and method | |
| JP2013246635A (en) | Reservation reception device and reservation reception method | |
| JP5676306B2 (en) | Mobile terminal and setting method | |
| JP6499094B2 (en) | Terminal device, information providing method, and computer program | |
| JP2017034359A (en) | Electronic apparatus, operation method for electronic apparatus, and control program | |
| JP6509917B2 (en) | Inter-terminal communication system, inter-terminal communication method, inter-terminal communication program, and communication server | |
| JP6216704B2 (en) | Terminal device, communication method, and program | |
| JP2016072874A (en) | End-to-end communication system, end-to-end communication method, and terminal device | |
| JP2016086276A (en) | Terminal device, terminal-to-terminal communication method and terminal device program | |
| KR20160001150A (en) | Method for processing communication call and apparatus supporting the same | |
| JP2016072875A (en) | Position display system and position display method |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160621 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160817 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20160818 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20170207 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170501 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20170502 |
|
| A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20170511 |
|
| A912 | Re-examination (zenchi) completed and case transferred to appeal board |
Free format text: JAPANESE INTERMEDIATE CODE: A912 Effective date: 20170804 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180705 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20180706 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20180830 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6396754 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |