JP2018013912A - Terminal device, support system equipped with the same, and program to be executed by computer - Google Patents

Terminal device, support system equipped with the same, and program to be executed by computer Download PDF

Info

Publication number
JP2018013912A
JP2018013912A JP2016142363A JP2016142363A JP2018013912A JP 2018013912 A JP2018013912 A JP 2018013912A JP 2016142363 A JP2016142363 A JP 2016142363A JP 2016142363 A JP2016142363 A JP 2016142363A JP 2018013912 A JP2018013912 A JP 2018013912A
Authority
JP
Japan
Prior art keywords
image
terminal
crd
display unit
rotation angle
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2016142363A
Other languages
Japanese (ja)
Inventor
門 洋一
Yoichi Kado
洋一 門
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Orangeone
Orangeone Corp
Original Assignee
Orangeone
Orangeone Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Orangeone, Orangeone Corp filed Critical Orangeone
Priority to JP2016142363A priority Critical patent/JP2018013912A/en
Publication of JP2018013912A publication Critical patent/JP2018013912A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Digital Computer Display Output (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide a terminal device which allows a rapid display of an image by a support terminal which performs the support.SOLUTION: Determination means 14 of a terminal device 1 determines a rotational angle RA of an image GS displayed in a display unit 15 on the basis of the relation between an absolute coordinate CRD_ABS and a relative coordinate CRD_REL showing the position of the top of the rectangular shape of the display unit 15 when the terminal device 1 is rotated. The determination means 14 thereafter outputs the determined rotational angle RA to the rotation means 16. The rotation means 16 rotates the image GS so that the rotational angle RA of the image GS displayed in the display unit 15 becomes 0° on the basis of the rotational angle RA determined by the determination means 14. The rotation means 16 thereafter outputs a rotated image GS_R to transmission means 17, and the transmission means 17 sends the image GS_R received from the rotation means 16 to a support terminal.SELECTED DRAWING: Figure 2

Description

この発明は、端末装置、それを備えたサポートシステム、およびコンピュータに実行させるためのプログラムに関する。   The present invention relates to a terminal device, a support system including the terminal device, and a program for causing a computer to execute the program.

従来、リモートシステムが知られている(特許文献1)。このリモートシステムは、端末と、リモート端末と、リモートサーバとを備える。   Conventionally, a remote system is known (Patent Document 1). The remote system includes a terminal, a remote terminal, and a remote server.

端末は、自己の表示部に表示されている画像情報と、表示部に対して、画像情報を縦型に表示しているか、横型に表示しているかを示す識別子とをリモートサーバへ送信する。   The terminal transmits image information displayed on its own display unit and an identifier indicating whether the image information is displayed vertically or horizontally to the display unit to the remote server.

リモートサーバは、画像情報と識別子とを端末から受信し、その受信した画像情報と識別子とをリモート端末へ送信する。   The remote server receives image information and an identifier from the terminal, and transmits the received image information and identifier to the remote terminal.

リモート端末は、画像情報と識別子とをリモートサーバから受信し、識別子に基づいた画像情報の向きで、画像情報を表示する。   The remote terminal receives the image information and the identifier from the remote server, and displays the image information in the direction of the image information based on the identifier.

このように、特許文献1は、端末の表示部に表示されている画像情報の向きを示す識別子をリモート端末へ送信し、リモート端末は、端末から受信した識別子に基づいた画像情報の向きで画像情報を表示することを開示する。   As described above, Patent Document 1 transmits an identifier indicating the direction of image information displayed on the display unit of the terminal to the remote terminal, and the remote terminal displays the image in the direction of the image information based on the identifier received from the terminal. Disclose displaying information.

特許第5653301号公報Japanese Patent No. 5653301

しかし、従来技術においては、画像情報の向きを示す識別子と画像情報とを端末からリモート端末へ送信し、リモート端末は、端末から受信した識別子を参照して画像情報の向きを検出し、その検出した画像情報の向きになるように、端末から受信した画像情報を調整した後に画像情報を表示する。   However, in the prior art, an identifier indicating the orientation of image information and the image information are transmitted from the terminal to the remote terminal, and the remote terminal detects the orientation of the image information with reference to the identifier received from the terminal, and the detection The image information is displayed after adjusting the image information received from the terminal so that the image information is oriented.

従って、端末から受信した画像情報を迅速に表示することが困難であるという問題がある。   Therefore, there is a problem that it is difficult to quickly display image information received from the terminal.

そこで、この発明の実施の形態によれば、サポートを行うサポート端末において画像を迅速に表示できるようにする端末装置を提供する。   Therefore, according to the embodiment of the present invention, a terminal device is provided that allows an image to be quickly displayed on a support terminal that performs support.

また、この発明の実施の形態によれば、サポートを行うサポート端末において画像を迅速に表示できるようにする端末装置を備えるサポートシステムを提供する。   In addition, according to the embodiment of the present invention, a support system including a terminal device that can quickly display an image on a support terminal that performs support is provided.

更に、この発明の実施の形態によれば、サポートを行うサポート端末において画像を迅速に表示できるようにするプログラムを提供する。   Furthermore, according to the embodiment of the present invention, a program is provided that allows an image to be quickly displayed on a support terminal that performs support.

更に、この発明の実施の形態によれば、サポートを行うサポート端末において画像を迅速に表示できるようにするプログラムを記録したコンピュータ読み取り可能な記録媒体を提供する。   Furthermore, according to the embodiment of the present invention, there is provided a computer-readable recording medium on which a program for enabling an image to be quickly displayed on a support terminal that performs support is recorded.

この発明の実施の形態によれば、端末装置は、表示部と、回転手段と、送信手段とを備える。表示部は、矩形形状を有し、画像を表示する。回転手段は、画像回転情報に基づいて、表示部に表示される画像の回転角度が0°になるように画像を回転させる。送信手段は、回転手段によって回転された画像を、ネットワークを介して当該端末装置をサポートするサポート端末へ送信する。   According to the embodiment of the present invention, the terminal device includes a display unit, a rotation unit, and a transmission unit. The display unit has a rectangular shape and displays an image. The rotation unit rotates the image based on the image rotation information so that the rotation angle of the image displayed on the display unit is 0 °. The transmission unit transmits the image rotated by the rotation unit to a support terminal that supports the terminal device via a network.

この発明の実施の形態による端末装置においては、回転手段は、画像回転情報に基づいて、表示部に表示される画像の回転角度が0°になるように画像を回転し、送信手段は、回転手段によって回転された画像を、ネットワークを介して当該端末装置をサポートするサポート端末へ送信する。その結果、サポート端末は、端末装置から受信した画像をそのまま表示部に表示すれば、回転していない画像を表示部に表示できる。   In the terminal device according to the embodiment of the present invention, the rotation means rotates the image based on the image rotation information so that the rotation angle of the image displayed on the display unit becomes 0 °, and the transmission means rotates. The image rotated by the means is transmitted to the support terminal that supports the terminal device via the network. As a result, the support terminal can display an unrotated image on the display unit by displaying the image received from the terminal device as it is on the display unit.

従って、画像をサポート端末の表示部に迅速に表示できる。すなわち、サポート端末において画像の方向を調整して表示する場合の処理遅延を防止することに加え、サポートされる端末装置で画像を回転するタイミングとサポート端末において画像の方向を調整するタイミングとのずれを防止することによって、画像をサポート端末の表示部に迅速に表示できる。つまり、この発明の実施の形態によれば、サポートされる端末装置で画像を回転するタイミングとサポート端末において画像の方向を調整するタイミングとの同期を取る必要がないので、画像調整による処理遅延に加え、同期を取るための時間による遅延である同期遅延を防止することによって、画像をサポート端末の表示部に迅速に表示できる。   Accordingly, the image can be quickly displayed on the display unit of the support terminal. That is, in addition to preventing a processing delay when displaying the image by adjusting the orientation of the image on the support terminal, the difference between the timing of rotating the image on the supported terminal device and the timing of adjusting the image orientation on the support terminal By preventing this, an image can be quickly displayed on the display unit of the support terminal. In other words, according to the embodiment of the present invention, there is no need to synchronize the timing of rotating an image with a supported terminal device and the timing of adjusting the direction of the image with a support terminal. In addition, it is possible to quickly display an image on the display unit of the support terminal by preventing a synchronization delay that is a delay due to time for synchronization.

好ましくは、端末装置は、判定手段を更に備える。判定手段は、当該端末装置が回転したときの矩形形状の頂点の位置を表す絶対座標と相対座標との関係に基づいて、表示部に表示された画像の回転角度を判定する。回転手段は、判定手段による判定結果に基づいて、表示部に表示された画像の回転角度が0°になるように画像を回転させる。   Preferably, the terminal device further includes a determination unit. The determination means determines the rotation angle of the image displayed on the display unit based on the relationship between the absolute coordinates and the relative coordinates representing the position of the rectangular vertex when the terminal device is rotated. The rotation unit rotates the image based on the determination result by the determination unit so that the rotation angle of the image displayed on the display unit becomes 0 °.

判定手段は、表示部に表示された画像の回転角度を判定し、回転手段は、判定された画像の回転角度に基づいて、回転角度が0°になるように画像を回転し、送信手段は、回転された画像をサポート端末へ送信する。その結果、画像の実際の表示状態に基づいて画像の回転角度が判定される。   The determination means determines the rotation angle of the image displayed on the display unit, the rotation means rotates the image so that the rotation angle is 0 ° based on the determined rotation angle of the image, and the transmission means The rotated image is transmitted to the support terminal. As a result, the rotation angle of the image is determined based on the actual display state of the image.

従って、画像の回転角度を正確に判定できる。その結果、回転角度が0°になるように画像を正確に回転できる。   Therefore, the rotation angle of the image can be accurately determined. As a result, the image can be accurately rotated so that the rotation angle becomes 0 °.

好ましくは、判定手段は、当該端末装置が回転したときの絶対座標と相対座標との関係に当該端末装置の回転角度を対応付けた対応表を保持しており、表示部の矩形形状の頂点の位置を示す絶対座標および相対座標を検出すると、対応表を参照して、検出した絶対座標と相対座標との関係に対応する角度を検出し、その検出した角度を当該端末装置の回転角度と判定する。   Preferably, the determination unit holds a correspondence table in which the rotation angle of the terminal device is associated with the relationship between the absolute coordinate and the relative coordinate when the terminal device is rotated, and the vertex of the rectangular shape of the display unit When the absolute coordinates and relative coordinates indicating the position are detected, an angle corresponding to the relationship between the detected absolute coordinates and the relative coordinates is detected with reference to the correspondence table, and the detected angle is determined as the rotation angle of the terminal device. To do.

判定手段は、対応表を参照して画像の回転角度を判定するので、画像の回転角度を迅速に判定できる。   Since the determination unit determines the rotation angle of the image with reference to the correspondence table, the rotation angle of the image can be quickly determined.

好ましくは、判定手段は、サポート端末からの画像転送要求に応じて、画像の回転角度を判定する。   Preferably, the determination unit determines the rotation angle of the image in response to an image transfer request from the support terminal.

判定手段は、サポート端末から画像転送要求を受信すると、画像の回転角度を判定し、送信手段は、回転角度が0°である画像をサポート端末へ送信するので、サポート端末は、回転していない画像を表示部に表示したいときに回転していない画像を表示部に表示できる。   When the determination unit receives the image transfer request from the support terminal, the determination unit determines the rotation angle of the image, and the transmission unit transmits the image having the rotation angle of 0 ° to the support terminal, so the support terminal is not rotated. When the image is to be displayed on the display unit, an image that is not rotated can be displayed on the display unit.

好ましくは、画像は、ストリーミングによって表示部に表示された画像である。   Preferably, the image is an image displayed on the display unit by streaming.

判定手段は、端末装置がサポート端末からの画像を受信しながら表示部に表示された画像に基づいて画像の回転角度を判定する。   The determination unit determines the rotation angle of the image based on the image displayed on the display unit while the terminal device receives the image from the support terminal.

従って、画像の回転角度を迅速に判定できる。   Therefore, the rotation angle of the image can be quickly determined.

また、この発明の実施の形態によれば、サポートシステムは、被サポート端末と、サポート端末とを備える。サポート端末は、ネットワークを介して被サポート端末をサポートする。そして、被サポート端末は、請求項1または請求項2に記載の端末装置からなり、サポート端末は、被サポート端末から受信した画像をそのまま表示部に表示する。   According to the embodiment of the present invention, the support system includes a supported terminal and a support terminal. The support terminal supports the supported terminal via the network. The supported terminal includes the terminal device according to claim 1 or 2, and the support terminal displays the image received from the supported terminal as it is on the display unit.

被サポート端末の回転手段は、画像回転情報に基づいて、回転角度が0°になるように画像を回転し、送信手段は、回転された画像をサポート端末へ送信する。そして、サポート端末は、被サポート端末から受信した画像をそのまま表示部に表示する。   The rotation means of the supported terminal rotates the image so that the rotation angle becomes 0 ° based on the image rotation information, and the transmission means transmits the rotated image to the support terminal. Then, the support terminal displays the image received from the supported terminal as it is on the display unit.

従って、サポート端末は、回転していない画像を迅速に表示できる。すなわち、上述した処理遅延と同期遅延とを防止することによって、回転していない画像を迅速に表示できる。   Therefore, the support terminal can quickly display an image that is not rotated. That is, by preventing the processing delay and the synchronization delay described above, an image that is not rotated can be quickly displayed.

更に、この発明の実施の形態によれば、コンピュータに実行させるためのプログラムは、端末装置の表示部に表示される画像の操作をコンピュータに実行させるためのプログラムであって、回転手段が、画像回転情報に基づいて、表示部に表示される画像の回転角度が0°になるように画像を回転させる第1のステップと、送信手段が、第1のステップにおいて回転された画像を、ネットワークを介して端末装置をサポートするサポート端末へ送信する第2のステップとをコンピュータに実行させるためのプログラムである。   Further, according to the embodiment of the present invention, the program for causing the computer to execute is a program for causing the computer to perform an operation on the image displayed on the display unit of the terminal device, and the rotating means includes the image Based on the rotation information, the first step of rotating the image so that the rotation angle of the image displayed on the display unit is 0 °, and the transmission unit transmits the image rotated in the first step to the network. A program for causing a computer to execute the second step of transmitting to a support terminal that supports the terminal device via the computer.

プログラムを実行することにより、回転手段は、画像回転情報に基づいて、表示部に表示される画像の回転角度が0°になるように画像を回転し、送信手段は、回転手段によって回転された画像を、ネットワークを介して当該端末装置をサポートするサポート端末へ送信する。その結果、サポート端末は、端末装置から受信した画像をそのまま表示部に表示すれば、回転していない画像を表示部に表示できる。   By executing the program, the rotation unit rotates the image based on the image rotation information so that the rotation angle of the image displayed on the display unit is 0 °, and the transmission unit is rotated by the rotation unit. The image is transmitted to the support terminal that supports the terminal device via the network. As a result, the support terminal can display an unrotated image on the display unit by displaying the image received from the terminal device as it is on the display unit.

従って、画像をサポート端末の表示部に迅速に表示できる。すなわち、上述した処理遅延と同期遅延とを防止することによって、画像をサポート端末の表示部に迅速に表示できる。   Accordingly, the image can be quickly displayed on the display unit of the support terminal. That is, by preventing the processing delay and the synchronization delay described above, the image can be quickly displayed on the display unit of the support terminal.

好ましくは、プログラムは、判定手段が、端末装置が回転したときの表示部の矩形形状の頂点の位置を表す絶対座標と相対座標との関係に基づいて、表示部に表示された画像の回転角度を判定する第3のステップを更にコンピュータに実行させ、回転手段は、第1のステップにおいて、第3のステップにおける判定結果に基づいて、表示部に表示された画像の回転角度が0°になるように画像を回転させる。   Preferably, the program determines whether the determination unit rotates the angle of the image displayed on the display unit based on the relationship between the absolute coordinate and the relative coordinate indicating the position of the vertex of the rectangular shape of the display unit when the terminal device rotates. In the first step, the rotation means makes the rotation angle of the image displayed on the display unit 0 ° based on the determination result in the third step. Rotate the image so that.

プログラムを実行することにより、判定手段は、表示部に表示された画像の回転角度を判定し、回転手段は、判定された画像の回転角度に基づいて、回転角度が0°になるように画像を回転し、送信手段は、回転された画像をサポート端末へ送信する。その結果、画像の実際の表示状態に基づいて画像の回転角度が判定される。   By executing the program, the determination unit determines the rotation angle of the image displayed on the display unit, and the rotation unit determines the rotation angle to be 0 ° based on the determined rotation angle of the image. The transmission means transmits the rotated image to the support terminal. As a result, the rotation angle of the image is determined based on the actual display state of the image.

従って、画像の回転角度を正確に判定できる。その結果、回転角度が0°になるように画像を正確に回転できる。   Therefore, the rotation angle of the image can be accurately determined. As a result, the image can be accurately rotated so that the rotation angle becomes 0 °.

好ましくは、判定手段は、第3のステップにおいて、表示部の矩形形状の頂点の位置を示す絶対座標および相対座標を検出すると、端末装置が回転したときの絶対座標と相対座標との関係に端末装置の回転角度を対応付けた対応表を参照して、検出した絶対座標と相対座標との関係に対応する角度を検出し、その検出した角度を当該端末装置の回転角度と判定する。   Preferably, in the third step, when the determination unit detects the absolute coordinate and the relative coordinate indicating the position of the vertex of the rectangular shape of the display unit, the determination unit determines the relationship between the absolute coordinate and the relative coordinate when the terminal device is rotated. An angle corresponding to the relationship between the detected absolute coordinate and relative coordinate is detected with reference to a correspondence table in which the rotation angle of the device is associated, and the detected angle is determined as the rotation angle of the terminal device.

プログラムを実行することにより、判定手段は、対応表を参照して画像の回転角度を判定するので、画像の回転角度を迅速に判定できる。   By executing the program, the determination unit refers to the correspondence table to determine the rotation angle of the image, so that the rotation angle of the image can be quickly determined.

好ましくは、判定手段は、第3のステップにおいて、サポート端末からの画像転送要求に応じて、画像の回転角度を判定する。   Preferably, in the third step, the determination unit determines the rotation angle of the image in response to an image transfer request from the support terminal.

プログラムを実行することにより、判定手段は、サポート端末から画像転送要求を受信すると、画像の回転角度を判定し、送信手段は、回転角度が0°である画像をサポート端末へ送信するので、サポート端末は、回転していない画像を表示部に表示したいときに回転していない画像を表示部に表示できる。   By executing the program, when the determination unit receives the image transfer request from the support terminal, the determination unit determines the rotation angle of the image, and the transmission unit transmits the image having the rotation angle of 0 ° to the support terminal. The terminal can display the non-rotated image on the display unit when it is desired to display the non-rotated image on the display unit.

好ましくは、画像は、ストリーミングによって表示部に表示された画像である。   Preferably, the image is an image displayed on the display unit by streaming.

プログラムを実行することにより、判定手段は、端末装置がサポート端末からの画像を受信しながら表示部に表示された画像に基づいて画像の回転角度を判定する。   By executing the program, the determination unit determines the rotation angle of the image based on the image displayed on the display unit while the terminal device receives the image from the support terminal.

従って、画像の回転角度を迅速に判定できる。   Therefore, the rotation angle of the image can be quickly determined.

更に、この発明の実施の形態によれば、記録媒体は、請求項4から請求項6のいずれか1項に記載のプログラムを記録したコンピュータ読み取り可能な記録媒体である。   Furthermore, according to an embodiment of the present invention, the recording medium is a computer-readable recording medium on which the program according to any one of claims 4 to 6 is recorded.

プログラムを記録媒体から読み出して実行することにより、判定手段は、表示部に表示された画像の回転角度を判定し、回転手段は、判定された画像の回転角度に基づいて、回転角度が0°になるように画像を回転し、送信手段は、回転された画像をサポート端末へ送信する。その結果、サポート端末は、端末装置から受信した画像をそのまま表示部に表示すれば、回転していない画像を表示部に表示できる。   By reading the program from the recording medium and executing the program, the determination unit determines the rotation angle of the image displayed on the display unit, and the rotation unit has a rotation angle of 0 ° based on the determined rotation angle of the image. The image is rotated so as to become, and the transmission means transmits the rotated image to the support terminal. As a result, the support terminal can display an unrotated image on the display unit by displaying the image received from the terminal device as it is on the display unit.

従って、画像をサポート端末の表示部に迅速に表示できる。すなわち、上述した処理遅延と同期遅延とを防止することによって、画像をサポート端末の表示部に迅速に表示できる。   Accordingly, the image can be quickly displayed on the display unit of the support terminal. That is, by preventing the processing delay and the synchronization delay described above, the image can be quickly displayed on the display unit of the support terminal.

画像をサポート端末の表示部に迅速に表示できる。すなわち、上述した処理遅延と同期遅延とを防止することによって、画像をサポート端末の表示部に迅速に表示できる。   Images can be quickly displayed on the display unit of the support terminal. That is, by preventing the processing delay and the synchronization delay described above, the image can be quickly displayed on the display unit of the support terminal.

この発明の実施の形態によるサポートシステムの構成を示す概略図である。It is the schematic which shows the structure of the support system by embodiment of this invention. 図1に示す端末装置の構成を示す概略図である。It is the schematic which shows the structure of the terminal device shown in FIG. 図1に示すサポート端末の構成を示す概略図である。It is the schematic which shows the structure of the support terminal shown in FIG. 絶対座標と相対座標との関係を示す概念図である。It is a conceptual diagram which shows the relationship between an absolute coordinate and a relative coordinate. 端末装置の各回転角度における頂点の絶対座標と相対座標との関係を端末装置の各回転角度に対応付けた対応表を示す図である。It is a figure which shows the correspondence table which matched the relationship between the absolute coordinate of a vertex in each rotation angle of a terminal device, and a relative coordinate with each rotation angle of a terminal device. 絶対座標と相対座標との別の関係を示す概念図である。It is a conceptual diagram which shows another relationship between an absolute coordinate and a relative coordinate. 端末装置の各回転角度における頂点の絶対座標と相対座標との関係を端末装置の各回転角度に対応付けた別の対応表を示す図である。It is a figure which shows another correspondence table which matched the relationship between the absolute coordinate of a vertex in each rotation angle of a terminal device, and a relative coordinate with each rotation angle of a terminal device. 端末装置の動作を説明するための図である。It is a figure for demonstrating operation | movement of a terminal device. 図1に示すサポートシステムの動作を説明するためのフローチャートである。It is a flowchart for demonstrating operation | movement of the support system shown in FIG. 図9に示すステップS9の詳細な動作を説明するためのフローチャートである。FIG. 10 is a flowchart for explaining detailed operation of step S9 shown in FIG. 9; FIG. 図1に示す端末装置の別の構成を示す概略図である。It is the schematic which shows another structure of the terminal device shown in FIG. 図9に示すステップS9の別の詳細な動作を説明するためのフローチャートである。10 is a flowchart for explaining another detailed operation of step S9 shown in FIG. 9.

本発明の実施の形態について図面を参照しながら詳細に説明する。なお、図中同一または相当部分には同一符号を付してその説明は繰返さない。   Embodiments of the present invention will be described in detail with reference to the drawings. In the drawings, the same or corresponding parts are denoted by the same reference numerals and description thereof will not be repeated.

図1は、この発明の実施の形態によるサポートシステムの構成を示す概略図である。図1を参照して、この発明の実施の形態によるサポートシステム10は、端末装置1〜4と、サポート端末5と、中継サーバ6と、ネットワーク7とを備える。   FIG. 1 is a schematic diagram showing a configuration of a support system according to an embodiment of the present invention. Referring to FIG. 1, a support system 10 according to an embodiment of the present invention includes terminal devices 1 to 4, a support terminal 5, a relay server 6, and a network 7.

端末装置1〜4の各々は、無線通信によって基地局(図示せず)を介してネットワーク7に接続される。サポート端末5は、有線ケーブル8を介してネットワーク7に接続される。中継サーバ6は、有線ケーブル9を介してネットワーク7に接続される。   Each of the terminal devices 1 to 4 is connected to the network 7 via a base station (not shown) by wireless communication. The support terminal 5 is connected to the network 7 via a wired cable 8. The relay server 6 is connected to the network 7 via a wired cable 9.

端末装置1〜4の各々は、例えば、スマートフォンからなる。そして、端末装置1〜4の各々は、サポート要求をネットワーク7および中継サーバ6を介してサポート端末5へ送信し、中継サーバ6およびネットワーク7を介してサポート端末5からサポートを受ける。   Each of the terminal devices 1 to 4 is composed of a smartphone, for example. Each of the terminal devices 1 to 4 transmits a support request to the support terminal 5 via the network 7 and the relay server 6 and receives support from the support terminal 5 via the relay server 6 and the network 7.

端末装置1〜4は、図1に示すように、様々な方向を向いている。即ち、端末装置1〜4のユーザが自己の端末装置(端末装置1〜4のいずれか)を縦方向および横方向のいずれの方向に向けて持つかによって、端末装置1〜4は、様々な方向を向く。   As illustrated in FIG. 1, the terminal devices 1 to 4 face various directions. That is, depending on whether the user of the terminal device 1 to 4 has his / her terminal device (any one of the terminal devices 1 to 4) in the vertical direction or the horizontal direction, the terminal devices 1 to 4 have various types. Turn to the direction.

サポート端末5は、端末装置1〜4をサポートするオペレータ用の端末であり、例えば、パーソナルコンピュータからなる。   The support terminal 5 is a terminal for an operator that supports the terminal devices 1 to 4, and includes, for example, a personal computer.

サポート端末5は、中継サーバ6を介して端末装置(端末装置1〜4のいずれか)からサポート要求を受信する。そして、サポート端末5は、その受信したサポート要求に応じて、中継サーバ6を介して端末装置(端末装置1〜4のいずれか)をサポートする。   The support terminal 5 receives a support request from a terminal device (any one of the terminal devices 1 to 4) via the relay server 6. The support terminal 5 supports the terminal device (any one of the terminal devices 1 to 4) via the relay server 6 in response to the received support request.

中継サーバ6は、端末装置1〜4とサポート端末5との間で行われる通信を中継する。   The relay server 6 relays communication performed between the terminal devices 1 to 4 and the support terminal 5.

上述したように、端末装置1〜4は、様々な方向を向いているので、端末装置1〜4が、サポート端末5からサポートを受けるときに、自己の表示部に表示された画像をそのまま中継サーバ6を介してサポート端末5へ送信し、サポート端末5が中継サーバ6を介して受信した画像をそのまま表示部に表示した場合、サポート端末5の表示部には、各種の方向を向いた画像が表示され、オペレータは、本来の方向から画像を見ることができない。   As described above, since the terminal devices 1 to 4 are directed in various directions, when the terminal devices 1 to 4 receive support from the support terminal 5, the images displayed on their display units are relayed as they are. When the image transmitted to the support terminal 5 via the server 6 and received by the support terminal 5 via the relay server 6 is displayed on the display unit as it is, images displayed in various directions are displayed on the display unit of the support terminal 5. Is displayed, and the operator cannot see the image from the original direction.

そこで、端末装置1〜4の各々は、後述する方法によって、端末装置(端末装置1〜4のいずれか)の回転角度を判定し、その判定した回転角度が0°になるように、表示部に表示された画像を回転させ、その回転させた画像をそのまま中継サーバ6を介してサポート端末5へ送信する。そして、サポート端末5は、中継サーバ6を介して受信した画像をそのまま表示部に表示する。   Therefore, each of the terminal devices 1 to 4 determines the rotation angle of the terminal device (any one of the terminal devices 1 to 4) by a method described later, and displays the display unit so that the determined rotation angle becomes 0 °. The image displayed on is rotated, and the rotated image is transmitted to the support terminal 5 via the relay server 6 as it is. Then, the support terminal 5 displays the image received via the relay server 6 as it is on the display unit.

これによって、サポート端末5は、オペレータが本来の方向から画像を見ることができるように、受信した画像を調整する必要がなくなり、画像を迅速に表示部に表示できる。   As a result, the support terminal 5 does not need to adjust the received image so that the operator can view the image from the original direction, and can quickly display the image on the display unit.

また、端末装置1〜4がそれぞれ異なる回転角度で回転されていても、サポート端末5は、端末装置1〜4のいずれからも回転角度が0°である画像を受信するので、端末装置1〜4の回転角度に関わらずに、受信した画像をそのまま表示部に表示するだけで、オペレータは、サポート端末5の表示部に表示された画像を本来の方向から見ることができる。   Further, even if the terminal devices 1 to 4 are rotated at different rotation angles, the support terminal 5 receives the image whose rotation angle is 0 ° from any of the terminal devices 1 to 4. Regardless of the rotation angle of 4, the operator can view the image displayed on the display unit of the support terminal 5 from the original direction only by displaying the received image on the display unit as it is.

つまり、オペレータは、サポートを受ける端末装置1〜4が回転しているかどうかを気にせずに、端末装置1〜4をサポートできる。   That is, the operator can support the terminal devices 1 to 4 without worrying about whether or not the terminal devices 1 to 4 receiving support are rotating.

図2は、図1に示す端末装置1の構成を示す概略図である。図2を参照して、端末装置1は、アンテナ11と、受信手段12と、表示手段13と、判定手段14と、表示部15と、回転手段16と、送信手段17と、受付手段18と、再生手段19と、スピーカ20とを含む。   FIG. 2 is a schematic diagram showing the configuration of the terminal device 1 shown in FIG. With reference to FIG. 2, the terminal device 1 includes an antenna 11, a receiving unit 12, a display unit 13, a determination unit 14, a display unit 15, a rotation unit 16, a transmission unit 17, and a reception unit 18. The reproduction means 19 and the speaker 20 are included.

受信手段12は、中継サーバ6、ネットワーク7およびアンテナ11を介してサポート端末5からサポート用の画像GSを受信し、その受信した画像GSを表示手段13へ出力する。   The receiving unit 12 receives the support image GS from the support terminal 5 via the relay server 6, the network 7, and the antenna 11, and outputs the received image GS to the display unit 13.

また、受信手段12は、中継サーバ6、ネットワーク7およびアンテナ11を介してサポート端末5から画像転送要求GSTRを受信し、その受信した画像転送要求GSTRを判定手段14へ出力する。   The receiving unit 12 receives the image transfer request GSTR from the support terminal 5 via the relay server 6, the network 7, and the antenna 11, and outputs the received image transfer request GSTR to the determining unit 14.

更に、受信手段12は、中継サーバ6、ネットワーク7およびアンテナ11を介してサポート端末5から音声情報AUDを受信し、その受信した音声情報AUDを再生手段19へ出力する。   Further, the receiving means 12 receives the audio information AUD from the support terminal 5 via the relay server 6, the network 7 and the antenna 11, and outputs the received audio information AUD to the reproducing means 19.

表示手段13は、画像GSを受信手段12から受け、その受けた画像GSを表示部15に表示する。この場合、表示手段13は、ストリーミングによって画像GSを表示部15に表示してもよい。   The display unit 13 receives the image GS from the receiving unit 12 and displays the received image GS on the display unit 15. In this case, the display unit 13 may display the image GS on the display unit 15 by streaming.

判定手段14は、画像転送要求GSTRを受信手段12から受け、その受けた画像転送要求GSTRに応じて、後述する方法によって、表示部15に表示された画像GSの回転角度RAを判定する。そして、判定手段14は、その判定した回転角度RAを回転手段16へ出力する。   The determination unit 14 receives the image transfer request GSTR from the reception unit 12 and determines the rotation angle RA of the image GS displayed on the display unit 15 by a method described later according to the received image transfer request GSTR. Then, the determination unit 14 outputs the determined rotation angle RA to the rotation unit 16.

表示部15は、表示手段13からの制御に従って画像GSを表示する。この場合、表示部15は、表示手段13からの制御に従ってストリーミングによって画像GSを表示してもよい。   The display unit 15 displays the image GS according to the control from the display unit 13. In this case, the display unit 15 may display the image GS by streaming according to the control from the display unit 13.

回転手段16は、判定手段14から回転角度RAを受けると、表示部15に表示された画像GSを取得し、判定手段14から受けた回転角度RAに基づいて、その取得した画像GSの回転角度が0°になるように画像GSを回転し、その回転した画像GS_Rを送信手段17へ出力する。   When the rotation unit 16 receives the rotation angle RA from the determination unit 14, the rotation unit 16 acquires the image GS displayed on the display unit 15, and based on the rotation angle RA received from the determination unit 14, the rotation angle of the acquired image GS. The image GS is rotated so that becomes 0 °, and the rotated image GS_R is output to the transmission means 17.

送信手段17は、受付手段18からサポート要求を受け、その受けたサポート要求をアンテナ11、ネットワーク7および中継サーバ6を介してサポート端末5へ送信する。   The transmission unit 17 receives a support request from the reception unit 18 and transmits the received support request to the support terminal 5 via the antenna 11, the network 7, and the relay server 6.

また、送信手段17は、画像GS_Rを回転手段16から受け、その受けた画像GS_Rをアンテナ11、ネットワーク7および中継サーバ6を介してサポート端末5へ送信する。   The transmission unit 17 receives the image GS_R from the rotation unit 16 and transmits the received image GS_R to the support terminal 5 via the antenna 11, the network 7, and the relay server 6.

受付手段18は、端末装置1のユーザからサポート要求を受け付け、その受け付けたサポート要求を送信手段17へ出力する。   The accepting means 18 accepts a support request from the user of the terminal device 1 and outputs the accepted support request to the transmitting means 17.

再生手段19は、音声情報AUDを受信手段12から受け、その受けた音声情報AUDを再生し、その再生した音声情報AUDをスピーカ20へ出力する。   The reproduction means 19 receives the audio information AUD from the reception means 12, reproduces the received audio information AUD, and outputs the reproduced audio information AUD to the speaker 20.

スピーカ20は、再生された音声情報AUDを再生手段19から受け、その受けた音声情報AUDを増幅して外部へ出力する。   The speaker 20 receives the reproduced audio information AUD from the reproducing means 19, amplifies the received audio information AUD, and outputs it to the outside.

なお、図1に示す端末装置2〜4の各々も、図2に示す端末装置1と同じ構成からなる。   Each of the terminal devices 2 to 4 shown in FIG. 1 has the same configuration as the terminal device 1 shown in FIG.

図3は、図1に示すサポート端末5の構成を示す概略図である。図3を参照して、サポート端末5は、受信手段51と、表示手段52と、表示部53と、サポート手段54と、マイク55と、送信手段56とを含む。   FIG. 3 is a schematic diagram showing the configuration of the support terminal 5 shown in FIG. Referring to FIG. 3, support terminal 5 includes a receiving unit 51, a display unit 52, a display unit 53, a support unit 54, a microphone 55, and a transmission unit 56.

受信手段51は、ネットワーク7および中継サーバ6を介して端末装置(端末装置1〜4のいずれか)からサポート要求を受信し、その受信したサポート要求を表示手段52およびサポート手段54へ出力する。   The receiving unit 51 receives a support request from a terminal device (any one of the terminal devices 1 to 4) via the network 7 and the relay server 6, and outputs the received support request to the display unit 52 and the support unit 54.

また、受信手段51は、ネットワーク7および中継サーバ6を介して端末装置(端末装置1〜4のいずれか)から画像GS_Rを受信し、その受信した画像GS_Rを表示手段52へ出力する。   The receiving unit 51 receives the image GS_R from the terminal device (any one of the terminal devices 1 to 4) via the network 7 and the relay server 6, and outputs the received image GS_R to the display unit 52.

表示手段52は、サポート要求を受信手段51から受け、その受けたサポート要求を表示部53に表示する。   The display unit 52 receives the support request from the receiving unit 51 and displays the received support request on the display unit 53.

また、表示手段52は、画像GS_Rを受信手段51から受け、その受けた画像GS_Rをそのまま表示部53に表示する。   The display unit 52 receives the image GS_R from the reception unit 51 and displays the received image GS_R on the display unit 53 as it is.

表示部53は、表示手段52からの制御に従ってサポート要求または画像GS_Rを表示する。   The display unit 53 displays the support request or the image GS_R according to the control from the display unit 52.

サポート手段54は、端末装置(端末装置1〜4のいずれか)をサポートするための画像GSを保持する。そして、サポート手段54は、サポート要求を受信手段51から受け、その受けたサポート要求に応じて、画像GSを送信手段56へ出力する。   The support means 54 holds an image GS for supporting a terminal device (any one of the terminal devices 1 to 4). Then, the support unit 54 receives the support request from the receiving unit 51 and outputs the image GS to the transmitting unit 56 in accordance with the received support request.

また、サポート手段54は、オペレータの音声情報AUDをマイク55から受け、その受けた音声情報AUDを送信手段56へ出力する。   Further, the support means 54 receives the operator's voice information AUD from the microphone 55 and outputs the received voice information AUD to the transmission means 56.

更に、サポート手段54は、端末装置(端末装置1〜4のいずれか)に対するサポート接続が開始されると、任意のタイミングで画像転送要求GSTRを生成し、その生成した画像転送要求GSTRを送信手段56へ出力する。   Further, when the support connection to the terminal device (one of the terminal devices 1 to 4) is started, the support unit 54 generates an image transfer request GSTR at an arbitrary timing, and transmits the generated image transfer request GSTR. To 56.

マイク55は、オペレータからの音声情報AUDを入力し、その入力した音声情報AUDをサポート手段54へ出力する。   The microphone 55 inputs the voice information AUD from the operator, and outputs the input voice information AUD to the support means 54.

送信手段56は、画像GSをサポート手段54から受け、その受けた画像GSを中継サーバ6およびネットワーク7を介して端末装置(端末装置1〜4のいずれか)へ送信する。   The transmission unit 56 receives the image GS from the support unit 54 and transmits the received image GS to the terminal device (any one of the terminal devices 1 to 4) via the relay server 6 and the network 7.

また、送信手段56は、音声情報AUDをサポート手段54から受け、その受けた音声情報AUDを中継サーバ6およびネットワーク7を介して端末装置(端末装置1〜4のいずれか)へ送信する。   The transmission unit 56 receives the voice information AUD from the support unit 54 and transmits the received voice information AUD to the terminal device (any one of the terminal devices 1 to 4) via the relay server 6 and the network 7.

更に、送信手段56は、画像転送要求GSTRをサポート手段54から受け、その受けた画像転送要求GSTRを中継サーバ6およびネットワーク7を介して端末装置(端末装置1〜4のいずれか)へ送信する。   Further, the transmission unit 56 receives the image transfer request GSTR from the support unit 54 and transmits the received image transfer request GSTR to the terminal device (any one of the terminal devices 1 to 4) via the relay server 6 and the network 7. .

図4は、絶対座標と相対座標との関係を示す概念図である。図4を参照して、表示部15は、長方形および正方形等の矩形形状を有する。そして、図4の紙面において、矩形形状の左上の頂点をA点とし、矩形形状の左下の頂点をB点とし、矩形形状の右上の頂点をC点とし、矩形形状の右下の頂点をD点とする。   FIG. 4 is a conceptual diagram showing the relationship between absolute coordinates and relative coordinates. Referring to FIG. 4, display unit 15 has a rectangular shape such as a rectangle and a square. On the paper surface of FIG. 4, the upper left vertex of the rectangular shape is point A, the lower left vertex of the rectangular shape is point B, the upper right vertex of the rectangular shape is point C, and the lower right vertex of the rectangular shape is D. Let it be a point.

図4の(a)を参照して、端末装置1の回転角度が0°である場合、絶対座標(X,Y)CRD_ABSの原点および相対座標(x,y)CRD_RELの原点をA点とする。その結果、A点の座標は、絶対座標CRD_ABSおよび相対座標CRD_RELにおいて、(0,0)となる。   Referring to (a) of FIG. 4, when the rotation angle of the terminal device 1 is 0 °, the origin of absolute coordinates (X, Y) CRD_ABS and the origin of relative coordinates (x, y) CRD_REL are A points. . As a result, the coordinates of the point A are (0, 0) in the absolute coordinates CRD_ABS and the relative coordinates CRD_REL.

表示部15の横方向の長さ(図4の紙面における左右方向)を”900”とし、表示部15の縦方向の長さ(図4の紙面における上下方向)を”1600”とする。そうすると、B点、C点およびD点の座標は、絶対座標CRD_ABSおよび相対座標CRD_RELにおいて、それぞれ、B(0,1600)、C(900,1600)およびD(900,0)となる。   The horizontal length of the display unit 15 (left and right direction on the paper surface of FIG. 4) is “900”, and the vertical length of the display unit 15 (vertical direction of the paper surface of FIG. 4) is “1600”. Then, the coordinates of the points B, C, and D are B (0, 1600), C (900, 1600), and D (900, 0) in the absolute coordinates CRD_ABS and the relative coordinates CRD_REL, respectively.

端末装置1を回転させたとき、相対座標CRD_RELの原点を、常に、図4の紙面上、左上の頂点とする。絶対座標CRD_ABSは、表示部15の頂点A,B,C,Dの位置を絶対的に表すものであるため、絶対座標CRD_ABSの原点は、端末装置1の回転に伴って回転する。   When the terminal apparatus 1 is rotated, the origin of the relative coordinates CRD_REL is always the top left vertex on the paper surface of FIG. Since the absolute coordinates CRD_ABS absolutely represent the positions of the vertices A, B, C, and D of the display unit 15, the origin of the absolute coordinates CRD_ABS rotates with the rotation of the terminal device 1.

図4の(b)を参照して、端末装置1を反時計方向へ90°回転させると、絶対座標CRD_ABSの原点(A点)は、左上の頂点から左下の頂点へ回転する。相対座標CRD_RELの原点は、左上の頂点のままである。   Referring to FIG. 4B, when the terminal device 1 is rotated 90 ° counterclockwise, the origin (point A) of the absolute coordinates CRD_ABS is rotated from the upper left vertex to the lower left vertex. The origin of the relative coordinates CRD_REL remains at the top left vertex.

その結果、相対座標CRD_RELでは、左上の頂点の座標は、(0,0)となり、左下の頂点の座標は、(0,900)となり、右上の頂点の座標は、(1600,0)となり、右下の頂点の座標は、(1600,900)となる。   As a result, in the relative coordinates CRD_REL, the coordinates of the upper left vertex are (0, 0), the coordinates of the lower left vertex are (0, 900), the coordinates of the upper right vertex are (1600, 0), The coordinates of the lower right vertex are (1600,900).

一方、絶対座標CRD_ABSでは、左上の頂点の座標は、(900,0)となり、左下の頂点の座標は、(0,0)となり、右上の頂点の座標は、(900,1600)となり、右下の頂点の座標は、(0,1600)となる。   On the other hand, in the absolute coordinates CRD_ABS, the coordinates of the upper left vertex are (900, 0), the coordinates of the lower left vertex are (0, 0), the coordinates of the upper right vertex are (900, 1600), and the right The coordinates of the lower vertex are (0, 1600).

図4の(c)を参照して、端末装置1を反時計方向へ180°回転させると、絶対座標CRD_ABSの原点(A点)は、左上の頂点から右下の頂点へ回転する。相対座標CRD_RELの原点は、左上の頂点のままである。   Referring to FIG. 4C, when the terminal device 1 is rotated 180 ° counterclockwise, the origin (point A) of the absolute coordinates CRD_ABS is rotated from the upper left vertex to the lower right vertex. The origin of the relative coordinates CRD_REL remains at the top left vertex.

その結果、相対座標CRD_RELでは、左上の頂点の座標は、(0,0)となり、左下の頂点の座標は、(0,1600)となり、右上の頂点の座標は、(900,0)となり、右下の頂点の座標は、(900,1600)となる。   As a result, in the relative coordinates CRD_REL, the coordinates of the upper left vertex are (0, 0), the coordinates of the lower left vertex are (0, 1600), and the coordinates of the upper right vertex are (900, 0). The coordinates of the lower right vertex are (900, 1600).

一方、絶対座標CRD_ABSでは、左上の頂点の座標は、(900,1600)となり、左下の頂点の座標は、(900,0)となり、右上の頂点の座標は、(0,1600)となり、右下の頂点の座標は、(0,0)となる。   On the other hand, in absolute coordinates CRD_ABS, the coordinates of the upper left vertex are (900, 1600), the coordinates of the lower left vertex are (900, 0), the coordinates of the upper right vertex are (0, 1600), and the right The coordinates of the lower vertex are (0, 0).

図4の(d)を参照して、端末装置1を反時計方向へ270°回転させると、絶対座標CRD_ABSの原点(A点)は、左上の頂点から右上の頂点へ回転する。相対座標CRD_RELの原点は、左上の頂点のままである。   Referring to FIG. 4D, when the terminal device 1 is rotated 270 ° counterclockwise, the origin (point A) of the absolute coordinates CRD_ABS is rotated from the upper left vertex to the upper right vertex. The origin of the relative coordinates CRD_REL remains at the top left vertex.

その結果、相対座標CRD_RELでは、左上の頂点の座標は、(0,0)となり、左下の頂点の座標は、(0,900)となり、右上の頂点の座標は、(1600,0)となり、右下の頂点の座標は、(1600,900)となる。   As a result, in the relative coordinates CRD_REL, the coordinates of the upper left vertex are (0, 0), the coordinates of the lower left vertex are (0, 900), the coordinates of the upper right vertex are (1600, 0), The coordinates of the lower right vertex are (1600,900).

一方、絶対座標CRD_ABSでは、左上の頂点の座標は、(0,1600)となり、左下の頂点の座標は、(900,1600)となり、右上の頂点の座標は、(0,0)となり、右下の頂点の座標は、(900,0)となる。   On the other hand, in absolute coordinates CRD_ABS, the coordinates of the upper left vertex are (0, 1600), the coordinates of the lower left vertex are (900, 1600), the coordinates of the upper right vertex are (0, 0), and the right The coordinates of the lower vertex are (900, 0).

図5は、端末装置1の各回転角度における頂点の絶対座標CRD_ABSと相対座標CRD_RELとの関係を端末装置1の各回転角度に対応付けた対応表を示す図である。   FIG. 5 is a diagram illustrating a correspondence table in which the relationship between the absolute coordinate CRD_ABS of the vertex and the relative coordinate CRD_REL at each rotation angle of the terminal device 1 is associated with each rotation angle of the terminal device 1.

図5を参照して、対応表TBL1は、回転角度と、頂点と、相対座標と、絶対座標とを含む。回転角度、頂点、相対座標および絶対座標は、相互に対応付けられる。   Referring to FIG. 5, correspondence table TBL1 includes a rotation angle, a vertex, a relative coordinate, and an absolute coordinate. The rotation angle, vertex, relative coordinate, and absolute coordinate are associated with each other.

端末装置1の回転角度が0°である場合、頂点の絶対座標CRD_ABSと相対座標CDR_RELとの関係は、関係RETN1になり、端末装置1を反時計方向へ90°回転させた場合、頂点の絶対座標CRD_ABSと相対座標CDR_RELとの関係は、関係RETN2になり、端末装置1を反時計方向へ180°回転させた場合、頂点の絶対座標CRD_ABSと相対座標CDR_RELとの関係は、関係RETN3になり、端末装置1を反時計方向へ270°回転させた場合、頂点の絶対座標CRD_ABSと相対座標CDR_RELとの関係は、関係RETN4になる。   When the rotation angle of the terminal device 1 is 0 °, the relationship between the absolute coordinate CRD_ABS of the vertex and the relative coordinate CDR_REL is the relationship RETN1, and when the terminal device 1 is rotated 90 ° counterclockwise, the absolute value of the vertex The relationship between the coordinates CRD_ABS and the relative coordinates CDR_REL is the relationship RETN2, and when the terminal device 1 is rotated 180 ° counterclockwise, the relationship between the absolute coordinates CRD_ABS of the vertex and the relative coordinates CDR_REL is the relationship RETN3, When the terminal device 1 is rotated 270 ° counterclockwise, the relationship between the vertex absolute coordinates CRD_ABS and the relative coordinates CDR_REL is the relationship RETN4.

従って、端末装置1の表示部15の頂点の絶対座標CRD_ABSと相対座標CRD_RELとを検出し、その検出した頂点の絶対座標CRD_ABSと相対座標CRD_RELとの関係に等しくなる絶対座標CRD_ABSと相対座標CRD_RELとの関係を関係RETN1〜RETN4から検出することによって、端末装置1の回転角度を判定することができる。   Therefore, the absolute coordinates CRD_ABS and the relative coordinates CRD_REL of the vertex of the display unit 15 of the terminal device 1 are detected, and the absolute coordinates CRD_ABS and the relative coordinates CRD_REL that are equal to the relationship between the detected absolute coordinates CRD_ABS and the relative coordinates CRD_REL of the detected vertex. Is detected from the relationships RETN1 to RETN4, the rotation angle of the terminal device 1 can be determined.

例えば、検出した頂点の絶対座標CRD_ABSと相対座標CRD_RELとの関係が関係RETN1に等しければ、端末装置1の回転角度は、0°であると判定でき、検出した頂点の絶対座標CRD_ABSと相対座標CRD_RELとの関係が関係RETN3に等しければ、端末装置1の回転角度は、180°であると判定できる。   For example, if the relationship between the absolute coordinates CRD_ABS of the detected vertex and the relative coordinates CRD_REL is equal to the relationship RETN1, the rotation angle of the terminal device 1 can be determined to be 0 °, and the absolute coordinates CRD_ABS of the detected vertex and the relative coordinates CRD_REL are determined. Is equal to the relationship RETN3, the rotation angle of the terminal device 1 can be determined to be 180 °.

端末装置2〜4の各々における絶対座標CRD_ABSと相対座標CRD_RELとの定義も、端末装置1における絶対座標CRD_ABSと相対座標CRD_RELとの定義と同じである。   The definition of the absolute coordinate CRD_ABS and the relative coordinate CRD_REL in each of the terminal devices 2 to 4 is the same as the definition of the absolute coordinate CRD_ABS and the relative coordinate CRD_REL in the terminal device 1.

端末装置1〜4が回転すれば、端末装置1〜4の表示部15に表示された画像GSも回転するので、表示部15に表示された画像GSの回転角度は、端末装置1〜4の回転角度に等しい。   If the terminal devices 1 to 4 are rotated, the image GS displayed on the display unit 15 of the terminal devices 1 to 4 is also rotated. Therefore, the rotation angle of the image GS displayed on the display unit 15 is that of the terminal devices 1 to 4. Equal to the rotation angle.

従って、端末装置1〜4の判定手段14は、対応表TBL1を保持しており、対応表TBL1を参照して、上述した方法によって、画像GSの回転角度を判定する。   Therefore, the determination means 14 of the terminal devices 1 to 4 holds the correspondence table TBL1, and refers to the correspondence table TBL1 to determine the rotation angle of the image GS by the method described above.

この場合、判定手段14は、絶対座標CRD_ABSの原点がA点であることを認識しており、相対座標CRD_RELの原点が表示部15の左上の頂点であることを認識しているので、端末装置1〜4の各回転角度において、絶対座標CRD_ABSおよび相対座標CRD_RELにおける左上の頂点、左下の頂点、右上の頂点および右下の頂点の座標を検出できる。   In this case, the determination unit 14 recognizes that the origin of the absolute coordinates CRD_ABS is the point A, and recognizes that the origin of the relative coordinates CRD_REL is the upper left vertex of the display unit 15. At each rotation angle of 1 to 4, the coordinates of the upper left vertex, the lower left vertex, the upper right vertex, and the lower right vertex in the absolute coordinate CRD_ABS and the relative coordinate CRD_REL can be detected.

対応表TBL1は、回転角度として、0°、90°、180°および270°を含み、0°、90°、180°および270°以外の回転角度を含まないが、その理由は、次のとおりである。   Correspondence table TBL1 includes 0 °, 90 °, 180 °, and 270 ° as rotation angles, and does not include rotation angles other than 0 °, 90 °, 180 °, and 270 ° for the following reasons. It is.

端末装置1〜4(スマートフォン)を0°〜90°の範囲で回転させた場合、表示部15に表示された画像GSの回転角度は、0°および90°のいずれかになり、端末装置1〜4(スマートフォン)を90°〜180°の範囲で回転させた場合、表示部15に表示された画像GSの回転角度は、90°および180°のいずれかになり、端末装置1〜4(スマートフォン)を180°〜270°の範囲で回転させた場合、表示部15に表示された画像GSの回転角度は、180°および270°のいずれかになり、端末装置1〜4(スマートフォン)を270°〜360°(=0°)の範囲で回転させた場合、表示部15に表示された画像GSの回転角度は、270°および360°(=0°)のいずれかになるので、対応表TBL1は、0°、90°、180°および270°以外の回転角度を含む必要がないからである。   When the terminal devices 1 to 4 (smartphones) are rotated in the range of 0 ° to 90 °, the rotation angle of the image GS displayed on the display unit 15 is either 0 ° or 90 °, and the terminal device 1 -4 (smartphone) is rotated in the range of 90 ° to 180 °, the rotation angle of the image GS displayed on the display unit 15 is either 90 ° or 180 °, and the terminal devices 1 to 4 ( When the smartphone is rotated in a range of 180 ° to 270 °, the rotation angle of the image GS displayed on the display unit 15 is either 180 ° or 270 °, and the terminal devices 1 to 4 (smartphone) are When rotated in the range of 270 ° to 360 ° (= 0 °), the rotation angle of the image GS displayed on the display unit 15 is either 270 ° or 360 ° (= 0 °). Table TBL1 is 0 °, 90 °, This is because it is not necessary to include rotation angles other than 180 ° and 270 °.

対応表TBL1においては、回転角度が0°である場合、左上の頂点の相対座標CRD_RELは、(0,0)となり、左上の頂点の絶対座標CRD_ABSは、(0,0)となる。   In the correspondence table TBL1, when the rotation angle is 0 °, the relative coordinate CRD_REL of the upper left vertex is (0, 0), and the absolute coordinate CRD_ABS of the upper left vertex is (0, 0).

また、回転角度が90°である場合、左上の頂点の相対座標CRD_RELは、(0,0)となり、左上の頂点の絶対座標CRD_ABSは、(900,0)となる。その結果、回転角度が90°である場合の左上の頂点の相対座標CRD_RELと絶対座標標CRD_ABSとの関係は、回転角度が0°である場合の左上の頂点の相対座標CRD_RELと絶対座標標CRD_ABSとの関係と異なる。   When the rotation angle is 90 °, the relative coordinate CRD_REL of the upper left vertex is (0, 0), and the absolute coordinate CRD_ABS of the upper left vertex is (900, 0). As a result, the relationship between the relative coordinates CRD_REL of the upper left vertex and the absolute coordinate mark CRD_ABS when the rotation angle is 90 ° is the relative coordinates CRD_REL and absolute coordinate mark CRD_ABS of the upper left vertex when the rotation angle is 0 °. And the relationship is different.

更に、回転角度が180°である場合、左上の頂点の相対座標CRD_RELは、(0,0)となり、左上の頂点の絶対座標CRD_ABSは、(900,1600)となる。その結果、回転角度が180°である場合の左上の頂点の相対座標CRD_RELと絶対座標CRD_ABSとの関係は、回転角度が0°である場合の左上の頂点の相対座標CRD_RELと絶対座標CRD_ABSとの関係と異なり、回転角度が90°である場合の左上の頂点の相対座標CRD_RELと絶対座標CRD_ABSとの関係とも異なる。   Further, when the rotation angle is 180 °, the relative coordinate CRD_REL of the upper left vertex is (0, 0), and the absolute coordinate CRD_ABS of the upper left vertex is (900, 1600). As a result, the relationship between the relative coordinates CRD_REL of the upper left vertex and the absolute coordinates CRD_ABS when the rotation angle is 180 ° is the relationship between the relative coordinates CRD_REL and absolute coordinates CRD_ABS of the upper left vertex when the rotation angle is 0 °. Unlike the relationship, the relationship between the relative coordinates CRD_REL and the absolute coordinates CRD_ABS of the upper left vertex when the rotation angle is 90 ° is also different.

更に、回転角度が270°である場合、左上の頂点の相対座標CRD_RELは、(0,0)となり、左上の頂点の絶対座標CRD_ABSは、(0,1600)となる。その結果、回転角度が270°である場合の左上の頂点の相対座標CRD_RELと絶対座標CRD_ABSとの関係は、回転角度が0°である場合の左上の頂点の相対座標CRD_RELと絶対座標CRD_ABSとの関係と異なり、回転角度が90°である場合の左上の頂点の相対座標CRD_RELと絶対座標CRD_ABSとの関係と異なり、回転角度が180°である場合の左上の頂点の相対座標CRD_RELと絶対座標CRD_ABSとの関係とも異なる。   Further, when the rotation angle is 270 °, the relative coordinate CRD_REL of the upper left vertex is (0, 0), and the absolute coordinate CRD_ABS of the upper left vertex is (0, 1600). As a result, the relationship between the relative coordinates CRD_REL of the upper left vertex and the absolute coordinate CRD_ABS when the rotation angle is 270 ° is the relationship between the relative coordinates CRD_REL and absolute coordinate CRD_ABS of the upper left vertex when the rotation angle is 0 °. Unlike the relationship, unlike the relationship between the relative coordinates CRD_REL of the upper left vertex when the rotation angle is 90 ° and the absolute coordinate CRD_ABS, the relative coordinates CRD_REL and absolute coordinate CRD_ABS of the upper left vertex when the rotation angle is 180 °. It is also different from the relationship.

このような関係は、左下の頂点の相対座標CRD_RELと絶対座標CRD_ABSとの関係、右上の頂点の相対座標CRD_RELと絶対座標CRD_ABSとの関係、および右下の頂点の相対座標CRD_RELと絶対座標CRD_ABSとの関係の各々についても成り立つ。   Such relationships include the relationship between the relative coordinates CRD_REL of the lower left vertex and the absolute coordinates CRD_ABS, the relationship between the relative coordinates CRD_REL of the upper right vertex and the absolute coordinates CRD_ABS, and the relative coordinates CRD_REL and absolute coordinates CRD_ABS of the lower right vertex. This holds true for each of the relationships.

その結果、左上の頂点の相対座標CRD_RELと絶対座標CRD_ABSとの関係のみを用いて画像GSの回転角度を判定でき、左下の頂点の相対座標CRD_RELと絶対座標CRD_ABSとの関係のみを用いて画像GSの回転角度を判定でき、右上の頂点の相対座標CRD_RELと絶対座標CRD_ABSとの関係のみを用いて画像GSの回転角度を判定でき、右下の頂点の相対座標CRD_RELと絶対座標CRD_ABSとの関係のみを用いて画像GSの回転角度を判定できる。   As a result, the rotation angle of the image GS can be determined using only the relationship between the relative coordinate CRD_REL of the upper left vertex and the absolute coordinate CRD_ABS, and the image GS using only the relationship between the relative coordinate CRD_REL of the lower left vertex and the absolute coordinate CRD_ABS. The rotation angle of the image GS can be determined using only the relationship between the relative coordinate CRD_REL of the upper right vertex and the absolute coordinate CRD_ABS, and only the relationship between the relative coordinate CRD_REL of the lower right vertex and the absolute coordinate CRD_ABS. Can be used to determine the rotation angle of the image GS.

また、左下の頂点の相対座標CRD_RELと絶対座標CRD_ABSとの関係、右上の頂点の相対座標CRD_RELと絶対座標CRD_ABSとの関係、および右下の頂点の相対座標CRD_RELと絶対座標CRD_ABSとの関係のうちの任意の2つまたは任意の3つの関係を用いて画像GSの回転角度を判定できる。   Of the relationship between the relative coordinate CRD_REL of the lower left vertex and the absolute coordinate CRD_ABS, the relationship of the relative coordinate CRD_REL of the upper right vertex and the absolute coordinate CRD_ABS, and the relationship of the relative coordinate CRD_REL of the lower right vertex and the absolute coordinate CRD_ABS The rotation angle of the image GS can be determined using any two or any three relationships.

即ち、左上の頂点の相対座標CRD_RELと絶対座標CRD_ABSとの関係、左下の頂点の相対座標CRD_RELと絶対座標CRD_ABSとの関係、右上の頂点の相対座標CRD_RELと絶対座標CRD_ABSとの関係、および右下の頂点の相対座標CRD_RELと絶対座標CRD_ABSとの関係のうちの少なくとも1つを用いて画像GSの回転角度を判定できる。   That is, the relationship between the relative coordinate CRD_REL of the upper left vertex and the absolute coordinate CRD_ABS, the relationship between the relative coordinate CRD_REL of the lower left vertex and the absolute coordinate CRD_ABS, the relationship between the relative coordinate CRD_REL of the upper right vertex and the absolute coordinate CRD_ABS, and the lower right The rotation angle of the image GS can be determined using at least one of the relationships between the relative coordinates CRD_REL of the vertices and the absolute coordinates CRD_ABS.

従って、この発明の実施の形態においては、判定手段14は、左上の頂点の相対座標CRD_RELと絶対座標CRD_ABSとの関係、左下の頂点の相対座標CRD_RELと絶対座標CRD_ABSとの関係、右上の頂点の相対座標CRD_RELと絶対座標CRD_ABSとの関係、および右下の頂点の相対座標CRD_RELと絶対座標CRD_ABSとの関係のうちの少なくとも1つを用いて画像GSの回転角度を判定する。   Therefore, in the embodiment of the present invention, the determination unit 14 determines the relationship between the relative coordinates CRD_REL of the upper left vertex and the absolute coordinates CRD_ABS, the relationship between the relative coordinates CRD_REL of the lower left vertex and the absolute coordinates CRD_ABS, and the upper right vertex. The rotation angle of the image GS is determined using at least one of the relationship between the relative coordinate CRD_REL and the absolute coordinate CRD_ABS and the relationship between the relative coordinate CRD_REL of the lower right vertex and the absolute coordinate CRD_ABS.

図6は、絶対座標と相対座標との別の関係を示す概念図である。図6を参照して、図6の紙面においても、矩形形状の左上の頂点をA点とし、矩形形状の左下の頂点をB点とし、矩形形状の右上の頂点をC点とし、矩形形状の右下の頂点をD点とする。   FIG. 6 is a conceptual diagram showing another relationship between absolute coordinates and relative coordinates. Referring to FIG. 6, also in the paper of FIG. 6, the upper left vertex of the rectangular shape is point A, the lower left vertex of the rectangular shape is point B, and the upper right vertex of the rectangular shape is point C. Let the lower right vertex be point D.

図6の(a)を参照して、端末装置1の回転角度が0°である場合、絶対座標(X,Y)CRD_ABSの原点をC点とし、相対座標(x,y)CRD_RELの原点をA点とする。また、端末装置1を回転させたとき、相対座標CRD_RELの原点を、常に、図6の紙面上、左上の頂点とする。更に、端末装置1を回転させたとき、絶対座標CRD_ABSの原点は、上述したように、端末装置1の回転に伴って回転する。   Referring to (a) of FIG. 6, when the rotation angle of the terminal device 1 is 0 °, the origin of the absolute coordinates (X, Y) CRD_ABS is the C point, and the origin of the relative coordinates (x, y) CRD_REL is the origin. Let it be point A. When the terminal device 1 is rotated, the origin of the relative coordinates CRD_REL is always the top left vertex on the paper surface of FIG. Furthermore, when the terminal device 1 is rotated, the origin of the absolute coordinates CRD_ABS rotates with the rotation of the terminal device 1 as described above.

その結果、A点の座標は、絶対座標CRD_ABSでは、(900,1600)となり、相対座標CRD_RELでは、(0,0)となる。また、B点の座標は、絶対座標CRD_ABSでは、(900,0)となり、相対座標CRD_RELでは、(0,1600)となる。更に、C点の座標は、絶対座標CRD_ABSでは、(0,0)となり、相対座標CRD_RELでは、(900,1600)となる。更に、D点の座標は、絶対座標CRD_ABSでは、(0,1600)となり、相対座標CRD_RELでは、(900,0)となる。   As a result, the coordinates of the point A are (900, 1600) in the absolute coordinates CRD_ABS and (0, 0) in the relative coordinates CRD_REL. Further, the coordinates of the point B are (900, 0) in the absolute coordinates CRD_ABS and (0, 1600) in the relative coordinates CRD_REL. Further, the coordinates of the point C are (0, 0) in the absolute coordinates CRD_ABS and (900, 1600) in the relative coordinates CRD_REL. Further, the coordinates of the point D are (0, 1600) in the absolute coordinates CRD_ABS and (900, 0) in the relative coordinates CRD_REL.

図6の(b)を参照して、端末装置1を反時計方向へ90°回転させると、絶対座標CRD_ABSの原点は、右下の頂点から右上の頂点へ回転する。相対座標CRD_RELの原点は、左上の頂点のままである。   Referring to FIG. 6B, when the terminal device 1 is rotated 90 ° counterclockwise, the origin of the absolute coordinates CRD_ABS is rotated from the lower right vertex to the upper right vertex. The origin of the relative coordinates CRD_REL remains at the top left vertex.

その結果、相対座標CRD_RELでは、左上の頂点の座標は、(0,0)となり、左下の頂点の座標は、(0,900)となり、右上の頂点の座標は、(1600,0)となり、右下の頂点の座標は、(1600,900)となる。   As a result, in the relative coordinates CRD_REL, the coordinates of the upper left vertex are (0, 0), the coordinates of the lower left vertex are (0, 900), the coordinates of the upper right vertex are (1600, 0), The coordinates of the lower right vertex are (1600,900).

一方、絶対座標CRD_ABSでは、左上の頂点の座標は、(0,1600)となり、左下の頂点の座標は、(900,1600)となり、右上の頂点の座標は、(0,0)となり、右下の頂点の座標は、(900,0)となる。   On the other hand, in absolute coordinates CRD_ABS, the coordinates of the upper left vertex are (0, 1600), the coordinates of the lower left vertex are (900, 1600), the coordinates of the upper right vertex are (0, 0), and the right The coordinates of the lower vertex are (900, 0).

図6の(c)を参照して、端末装置1を反時計方向へ180°回転させると、絶対座標CRD_ABSの原点は、右下の頂点から左上の頂点へ回転する。相対座標CRD_RELの原点は、左上の頂点のままである。   Referring to FIG. 6C, when the terminal device 1 is rotated 180 ° counterclockwise, the origin of the absolute coordinates CRD_ABS is rotated from the lower right vertex to the upper left vertex. The origin of the relative coordinates CRD_REL remains at the top left vertex.

その結果、相対座標CRD_RELおよび絶対座標CRD_ABSにおいて、左上の頂点の座標は、(0,0)となり、左下の頂点の座標は、(0,1600)となり、右上の頂点の座標は、(900,0)となり、右下の頂点の座標は、(900,1600)となる。   As a result, in the relative coordinates CRD_REL and absolute coordinates CRD_ABS, the coordinates of the upper left vertex are (0, 0), the coordinates of the lower left vertex are (0, 1600), and the coordinates of the upper right vertex are (900, 0), and the coordinates of the lower right vertex are (900, 1600).

図6の(d)を参照して、端末装置1を反時計方向へ270°回転させると、絶対座標CRD_ABSの原点は、右下の頂点から左下の頂点へ回転する。相対座標CRD_RELの原点は、左上の頂点のままである。   Referring to FIG. 6D, when the terminal device 1 is rotated 270 ° counterclockwise, the origin of the absolute coordinates CRD_ABS is rotated from the lower right vertex to the lower left vertex. The origin of the relative coordinates CRD_REL remains at the top left vertex.

その結果、相対座標CRD_RELでは、左上の頂点の座標は、(0,0)となり、左下の頂点の座標は、(0,900)となり、右上の頂点の座標は、(1600,0)となり、右下の頂点の座標は、(1600,900)となる。   As a result, in the relative coordinates CRD_REL, the coordinates of the upper left vertex are (0, 0), the coordinates of the lower left vertex are (0, 900), the coordinates of the upper right vertex are (1600, 0), The coordinates of the lower right vertex are (1600,900).

一方、絶対座標CRD_ABSでは、左上の頂点の座標は、(900,0)となり、左下の頂点の座標は、(0,0)となり、右上の頂点の座標は、(900,1600)となり、右下の頂点の座標は、(0,1600)となる。   On the other hand, in the absolute coordinates CRD_ABS, the coordinates of the upper left vertex are (900, 0), the coordinates of the lower left vertex are (0, 0), the coordinates of the upper right vertex are (900, 1600), and the right The coordinates of the lower vertex are (0, 1600).

図7は、端末装置1の各回転角度における頂点の絶対座標CRD_ABSと相対座標CRD_RELとの関係を端末装置1の各回転角度に対応付けた別の対応表を示す図である。   FIG. 7 is a diagram illustrating another correspondence table in which the relationship between the absolute coordinate CRD_ABS of the vertex and the relative coordinate CRD_REL at each rotation angle of the terminal device 1 is associated with each rotation angle of the terminal device 1.

図7を参照して、対応表TBL2は、回転角度と、頂点と、相対座標と、絶対座標とを含む。回転角度、頂点、相対座標および絶対座標は、相互に対応付けられる。   Referring to FIG. 7, correspondence table TBL2 includes a rotation angle, a vertex, a relative coordinate, and an absolute coordinate. The rotation angle, vertex, relative coordinate, and absolute coordinate are associated with each other.

端末装置1の回転角度が0°である場合、頂点の絶対座標CRD_ABSと相対座標CDR_RELとの関係は、関係RETN5になり、端末装置1を反時計方向へ90°回転させた場合、頂点の絶対座標CRD_ABSと相対座標CDR_RELとの関係は、関係RETN6になり、端末装置1を反時計方向へ180°回転させた場合、頂点の絶対座標CRD_ABSと相対座標CDR_RELとの関係は、関係RETN7になり、端末装置1を反時計方向へ270°回転させた場合、頂点の絶対座標CRD_ABSと相対座標CDR_RELとの関係は、関係RETN8になる。   When the rotation angle of the terminal device 1 is 0 °, the relationship between the absolute coordinate CRD_ABS of the vertex and the relative coordinate CDR_REL is the relationship RETN5, and when the terminal device 1 is rotated 90 ° counterclockwise, the absolute value of the vertex The relationship between the coordinates CRD_ABS and the relative coordinates CDR_REL is the relationship RETN6. When the terminal device 1 is rotated 180 ° counterclockwise, the relationship between the absolute coordinates CRD_ABS of the vertex and the relative coordinates CDR_REL is the relationship RETN7, When the terminal device 1 is rotated 270 ° counterclockwise, the relationship between the vertex absolute coordinates CRD_ABS and the relative coordinates CDR_REL is the relationship RETN8.

従って、端末装置1の表示部15の頂点の絶対座標CRD_ABSと相対座標CRD_RELとを検出し、その検出した頂点の絶対座標CRD_ABSと相対座標CRD_RELとの関係に等しくなる絶対座標CRD_ABSと相対座標CRD_RELとの関係を関係RETN5〜RETN8から検出することによって、端末装置1の回転角度を判定することができる。   Therefore, the absolute coordinates CRD_ABS and the relative coordinates CRD_REL of the vertex of the display unit 15 of the terminal device 1 are detected, and the absolute coordinates CRD_ABS and the relative coordinates CRD_REL that are equal to the relationship between the detected absolute coordinates CRD_ABS and the relative coordinates CRD_REL of the detected vertex. Is detected from the relationships RETN5 to RETN8, the rotation angle of the terminal device 1 can be determined.

例えば、検出した頂点の絶対座標CRD_ABSと相対座標CRD_RELとの関係が関係RETN6に等しければ、端末装置1の回転角度は、90°であると判定でき、検出した頂点の絶対座標CRD_ABSと相対座標CRD_RELとの関係が関係RETN8に等しければ、端末装置1の回転角度は、270°であると判定できる。   For example, if the relationship between the absolute coordinate CRD_ABS of the detected vertex and the relative coordinate CRD_REL is equal to the relationship RETN6, the rotation angle of the terminal device 1 can be determined to be 90 °, and the absolute coordinate CRD_ABS of the detected vertex and the relative coordinate CRD_REL are determined. Is equal to the relationship RETN8, the rotation angle of the terminal device 1 can be determined to be 270 °.

端末装置2〜4の各々における絶対座標CRD_ABSと相対座標CRD_RELとの定義も、端末装置1における絶対座標CRD_ABSと相対座標CRD_RELとの定義と同じである。   The definition of the absolute coordinate CRD_ABS and the relative coordinate CRD_REL in each of the terminal devices 2 to 4 is the same as the definition of the absolute coordinate CRD_ABS and the relative coordinate CRD_REL in the terminal device 1.

端末装置1〜4が回転すれば、端末装置1〜4の表示部15に表示された画像GSも回転するので、表示部15に表示された画像GSの回転角度は、端末装置1〜4の回転角度に等しい。   If the terminal devices 1 to 4 are rotated, the image GS displayed on the display unit 15 of the terminal devices 1 to 4 is also rotated. Therefore, the rotation angle of the image GS displayed on the display unit 15 is that of the terminal devices 1 to 4. Equal to the rotation angle.

従って、端末装置1〜4の判定手段14は、対応表TBL2を保持しており、対応表TBL2を参照して、上述した方法によって、画像GSの回転角度を判定してもよい。   Therefore, the determination means 14 of the terminal devices 1 to 4 holds the correspondence table TBL2, and may refer to the correspondence table TBL2 to determine the rotation angle of the image GS by the method described above.

この場合、判定手段14は、絶対座標CRD_ABSの原点がC点であることを認識しており、相対座標CRD_RELの原点が表示部15の左上の頂点であることを認識しているので、端末装置1〜4の各回転角度において、絶対座標CRD_ABSおよび相対座標CRD_RELにおける左上の頂点、左下の頂点、右上の頂点および右下の頂点の座標を検出できる。   In this case, the determination unit 14 recognizes that the origin of the absolute coordinates CRD_ABS is the point C, and recognizes that the origin of the relative coordinates CRD_REL is the upper left vertex of the display unit 15. At each rotation angle of 1 to 4, the coordinates of the upper left vertex, the lower left vertex, the upper right vertex, and the lower right vertex in the absolute coordinate CRD_ABS and the relative coordinate CRD_REL can be detected.

対応表TBL2は、回転角度として、0°、90°、180°および270°を含み、0°、90°、180°および270°以外の回転角度を含まないが、その理由は、上述した対応表TBL1が回転角度として、0°、90°、180°および270°を含み、0°、90°、180°および270°以外の回転角度を含まない理由と同じである。   Correspondence table TBL2 includes 0 °, 90 °, 180 ° and 270 ° as rotation angles, and does not include rotation angles other than 0 °, 90 °, 180 ° and 270 °, for the reason described above. Table TBL1 includes 0 °, 90 °, 180 °, and 270 ° as rotation angles, and is the same as the reason for not including rotation angles other than 0 °, 90 °, 180 °, and 270 °.

このように、端末装置1〜4の表示部15の頂点Cを絶対座標CRD_ABSの原点とし、表示部15の頂点Aを相対座標CRD_RELの原点とした場合も、端末装置1〜4の各回転角度における頂点の絶対座標CRD_ABSと相対座標CRD_RELとの関係を端末装置1〜4の各回転角度に対応付けた対応表TBL2に基づいて、画像GSの回転角度を判定できる。   Thus, even when the vertex C of the display unit 15 of the terminal devices 1 to 4 is the origin of the absolute coordinates CRD_ABS and the vertex A of the display unit 15 is the origin of the relative coordinates CRD_REL, each rotation angle of the terminal devices 1 to 4 The rotation angle of the image GS can be determined based on the correspondence table TBL2 in which the relationship between the absolute coordinate CRD_ABS of the vertex and the relative coordinate CRD_REL is associated with each rotation angle of the terminal devices 1 to 4.

なお、この発明の実施の形態においては、絶対座標CRD_ABSの原点を表示部15の頂点Bに設定してもよく、絶対座標CRD_ABSの原点を表示部15の頂点Dに設定してもよい。この場合も、上述した方法と同様にして、画像GSの回転角度を判定できる。   In the embodiment of the present invention, the origin of the absolute coordinate CRD_ABS may be set to the vertex B of the display unit 15, and the origin of the absolute coordinate CRD_ABS may be set to the vertex D of the display unit 15. Also in this case, the rotation angle of the image GS can be determined in the same manner as described above.

また、この発明の実施の形態においては、相対座標CRD_RELの原点を表示部15の頂点A以外の頂点B、頂点Cおよび頂点Dのいずれに設定してよい。この場合も、上述した方法と同様にして、画像GSの回転角度を判定できる。   In the embodiment of the present invention, the origin of the relative coordinates CRD_REL may be set to any one of the vertex B, the vertex C, and the vertex D other than the vertex A of the display unit 15. Also in this case, the rotation angle of the image GS can be determined in the same manner as described above.

つまり、この発明の実施の形態においては、絶対座標CRD_ABSおよび相対座標CRD_RELの原点を表示部15の頂点A、頂点B、頂点Cおよび頂点Dのいずれに設定してもよい。この場合、絶対座標CRD_ABSおよび相対座標CRD_RELの原点を同じ頂点に設定してもよく、相互に異なる頂点に設定してもよい。このように絶対座標CRD_ABSおよび相対座標CRD_RELの原点を設定しても、上述した方法と同様にして、画像GSの回転角度を判定できる。   That is, in the embodiment of the present invention, the origins of the absolute coordinate CRD_ABS and the relative coordinate CRD_REL may be set to any of the vertex A, vertex B, vertex C, and vertex D of the display unit 15. In this case, the origins of the absolute coordinate CRD_ABS and the relative coordinate CRD_REL may be set to the same vertex or may be set to different vertices. Even when the origins of the absolute coordinates CRD_ABS and the relative coordinates CRD_REL are set in this way, the rotation angle of the image GS can be determined in the same manner as described above.

図8は、端末装置1〜4の動作を説明するための図である。図8を参照して、端末装置1〜4は、反時計方向に90°回転している。このような状況において、端末装置1〜4の受信手段12は、サポート端末5から画像GSを受信し、その受信した画像GSを表示手段13へ出力する。   FIG. 8 is a diagram for explaining the operation of the terminal devices 1 to 4. Referring to FIG. 8, terminal devices 1 to 4 are rotated 90 ° counterclockwise. In such a situation, the receiving means 12 of the terminal devices 1 to 4 receives the image GS from the support terminal 5 and outputs the received image GS to the display means 13.

そして、端末装置1〜4の表示手段13は、受信手段12から画像GSを受け、その受けた画像GSを表示部15に表示する。この場合、表示手段13は、ストリーミングによって画像GSを表示部15に表示してもよい。   The display means 13 of the terminal devices 1 to 4 receives the image GS from the receiving means 12 and displays the received image GS on the display unit 15. In this case, the display unit 13 may display the image GS on the display unit 15 by streaming.

その結果、端末装置1〜4の表示部15に表示された画像GSは、反時計方向に90°回転している(図8の(a)参照)。   As a result, the image GS displayed on the display unit 15 of the terminal devices 1 to 4 is rotated by 90 ° counterclockwise (see FIG. 8A).

画像GSは、「ご希望のサポートをお選び下さい。」の文字情報30、「サポートA(1)」を示すボタン31、「サポートB(2)」を示すボタン32、・・・、「オペレータ(9)」を示すボタン39を含む。   The image GS includes character information 30 of “Please select your desired support.”, A button 31 indicating “support A (1)”, a button 32 indicating “support B (2)”,. (9) "button 39 is included.

このように、端末装置1〜4において、画像GSがストリーミングによって表示されているときに、受信手段12は、画像転送要求GSTRをサポート端末5から受信し、その受信した画像転送要求GSTRを判定手段14へ出力する。   As described above, when the image GS is displayed by streaming in the terminal devices 1 to 4, the receiving unit 12 receives the image transfer request GSTR from the support terminal 5 and determines the received image transfer request GSTR. 14 to output.

端末装置1〜4の判定手段14は、受信手段12からの画像転送要求GSTRに応じて、上述した方法によって、画像GSの回転角度RAが90°であると判定し、その判定した回転角度RA(=90°)を回転手段16へ出力する。   The determination unit 14 of the terminal devices 1 to 4 determines that the rotation angle RA of the image GS is 90 ° by the above-described method according to the image transfer request GSTR from the reception unit 12 and determines the determined rotation angle RA. (= 90 °) is output to the rotation means 16.

端末装置1〜4の回転手段16は、判定手段14から回転角度RA(=90°)を受けると、表示部15から画像GSを取得し、その取得した画像GSの回転角度RAが0°になるように画像GSを回転させ、画像GS_Rを得る(図8の(b)参照)。   Upon receiving the rotation angle RA (= 90 °) from the determination unit 14, the rotation unit 16 of the terminal devices 1 to 4 acquires the image GS from the display unit 15, and the rotation angle RA of the acquired image GS is 0 °. The image GS is rotated so that an image GS_R is obtained (see FIG. 8B).

そして、端末装置1〜4の回転手段16は、画像GS_Rを送信手段17へ出力する。送信手段17は、画像GS_Rを回転手段16から受け、その受けた画像GS_Rをアンテナ11、ネットワーク7および中継サーバ6を介してサポート端末5へ送信する。   Then, the rotation unit 16 of the terminal devices 1 to 4 outputs the image GS_R to the transmission unit 17. The transmission unit 17 receives the image GS_R from the rotation unit 16 and transmits the received image GS_R to the support terminal 5 via the antenna 11, the network 7 and the relay server 6.

サポート端末5の受信手段51は、画像GS_Rを受信し、その受信した画像GS_Rを表示手段52へ出力する。そして、サポート端末5の表示手段52は、画像GS_Rを受信手段51から受け、その受けた画像GS_Rをそのまま表示部53に表示する。その結果、表示部53は、回転角度RAが0°である画像GS_Rを表示する(図8の(c)参照)。   The receiving means 51 of the support terminal 5 receives the image GS_R and outputs the received image GS_R to the display means 52. Then, the display unit 52 of the support terminal 5 receives the image GS_R from the receiving unit 51 and displays the received image GS_R on the display unit 53 as it is. As a result, the display unit 53 displays an image GS_R having a rotation angle RA of 0 ° (see (c) in FIG. 8).

このように、端末装置1〜4の表示部15に表示された画像GSが反時計方向に90°回転していても、端末装置1〜4は、回転角度RAが0°になるように回転した画像GS_Rをサポート端末5へ送信し、サポート端末5の表示手段52は、受信した画像GS_Rをそのまま表示部53に表示する。   Thus, even if the image GS displayed on the display unit 15 of the terminal devices 1 to 4 is rotated 90 ° counterclockwise, the terminal devices 1 to 4 are rotated so that the rotation angle RA is 0 °. The image GS_R is transmitted to the support terminal 5, and the display means 52 of the support terminal 5 displays the received image GS_R on the display unit 53 as it is.

端末装置1〜4の表示部15に表示された画像GSが90°以外の回転角度RAに回転している場合も、端末装置1〜4は、同様にして、回転角度RAが0°になるように回転した画像GS_Rをサポート端末5へ送信し、サポート端末5の表示手段52は、受信した画像GS_Rをそのまま表示部53に表示する。   Even when the image GS displayed on the display unit 15 of the terminal devices 1 to 4 is rotated at a rotation angle RA other than 90 °, the terminal devices 1 to 4 similarly have a rotation angle RA of 0 °. The image GS_R rotated in this way is transmitted to the support terminal 5, and the display means 52 of the support terminal 5 displays the received image GS_R on the display unit 53 as it is.

従って、端末装置1〜4の表示部15に表示された画像GSが回転していても、サポート端末5の表示手段52および表示部53は、回転角度RAが0°である画像GS_Rを迅速に表示できる。その結果、オペレータは、本来の方向からサポート内容を示す画像を見ることができる。   Therefore, even if the image GS displayed on the display unit 15 of the terminal devices 1 to 4 is rotating, the display unit 52 and the display unit 53 of the support terminal 5 quickly display the image GS_R whose rotation angle RA is 0 °. Can be displayed. As a result, the operator can see an image showing the support content from the original direction.

図9は、図1に示すサポートシステム10の動作を説明するためのフローチャートである。   FIG. 9 is a flowchart for explaining the operation of the support system 10 shown in FIG.

図9を参照して、サポートシステム10の動作が開始されると、被サポート端末(端末装置1〜4のいずれか)は、サポート要求を送信する(ステップS1)。中継サーバ6は、被サポート端末からのサポート要求をサポート端末5へ中継し(ステップS2)、サポート端末5は、サポート要求を受信する(ステップS3)。   With reference to FIG. 9, when the operation of the support system 10 is started, the supported terminal (any one of the terminal devices 1 to 4) transmits a support request (step S1). The relay server 6 relays the support request from the supported terminal to the support terminal 5 (step S2), and the support terminal 5 receives the support request (step S3).

そして、被サポート端末、中継サーバ6およびサポート端末5は、サポート接続を開始し、接続を継続する(ステップS4)。   Then, the supported terminal, the relay server 6 and the support terminal 5 start the support connection and continue the connection (step S4).

その後、サポート端末5は、画像転送要求GSTRを生成し、その生成した画像転送要求GSTRを送信し(ステップS5)、中継サーバ6は、画像転送要求GSTRを中継する(ステップS6)。   Thereafter, the support terminal 5 generates an image transfer request GSTR, transmits the generated image transfer request GSTR (step S5), and the relay server 6 relays the image transfer request GSTR (step S6).

この場合、サポート端末5のサポート手段54は、画像GSを中継サーバ6を介して被サポート端末へ送信する。被サポート端末の受信手段12は、画像GSを受信し、その受信した画像GSを表示手段13へ出力する。そして、被サポート端末の表示手段13は、ストリーミングによって画像GSを表示部15に表示する。   In this case, the support means 54 of the support terminal 5 transmits the image GS to the supported terminal via the relay server 6. The receiving means 12 of the supported terminal receives the image GS and outputs the received image GS to the display means 13. Then, the display unit 13 of the supported terminal displays the image GS on the display unit 15 by streaming.

そして、被サポート端末の受信手段12は、画像転送要求GSTRを受信し(ステップS7)、その受信した画像転送要求GSTRを判定手段14へ出力する。   The receiving means 12 of the supported terminal receives the image transfer request GSTR (step S7), and outputs the received image transfer request GSTR to the determining means 14.

被サポート端末の判定手段14は、受信手段12から画像転送要求GSTRを受け、画像転送要求GSTRを承諾するか否かを判定する(ステップS8)。ステップS8において、画像転送要求GSTRを承諾すると判定されると、被サポート端末は、相対座標CRD_RELに沿うように画像GSを回転し、その回転した画像GS_Rを転送する(ステップS9)。   The supported terminal determining means 14 receives the image transfer request GSTR from the receiving means 12 and determines whether or not to accept the image transfer request GSTR (step S8). If it is determined in step S8 that the image transfer request GSTR is accepted, the supported terminal rotates the image GS along the relative coordinates CRD_REL, and transfers the rotated image GS_R (step S9).

ここで、「相対座標CRD_RELに沿うように画像GSを回転する」ことは、被サポート端末(端末装置1〜4のいずれか)の回転角度RAが0°であるときの画像GSになるように画像GSを回転することに相当する。上述したように、相対座標CRD_RELの原点は、回転角度RAが0°であるときの被サポート端末(端末装置1〜4のいずれか)の表示部15の左上の頂点、左下の頂点、右上の頂点、および右下の頂点のいずれかに設定されるので、そのように設定された相対座標CRD_RELに沿うように画像GSを回転すれば、その回転した画像GS_Rは、回転角度RAが0°であるときの画像になるからである。   Here, “rotate the image GS along the relative coordinates CRD_REL” is the image GS when the rotation angle RA of the supported terminal (one of the terminal devices 1 to 4) is 0 °. This corresponds to rotating the image GS. As described above, the origin of the relative coordinate CRD_REL is the top left vertex, bottom left vertex, top right corner of the display unit 15 of the supported terminal (any of the terminal devices 1 to 4) when the rotation angle RA is 0 °. Since it is set to one of the vertex and the lower right vertex, if the image GS is rotated along the relative coordinates CRD_REL thus set, the rotated image GS_R has a rotation angle RA of 0 °. It is because it becomes an image at a certain time.

ステップS9の後、中継サーバ6は、画像GS_Rを中継する(ステップS10)。そして、サポート端末5の受信手段51は、画像GS_Rを受信し(ステップS11)、その受信した画像GS_Rを表示手段52へ出力し、表示手段52は、受信手段51から受けた画像GS_Rをそのまま表示部53に表示する(ステップS12)。   After step S9, the relay server 6 relays the image GS_R (step S10). The receiving means 51 of the support terminal 5 receives the image GS_R (Step S11), outputs the received image GS_R to the display means 52, and the display means 52 displays the image GS_R received from the receiving means 51 as it is. The information is displayed on the unit 53 (step S12).

その後、被サポート端末、中継サーバ6およびサポート端末5は、サポート接続を継続し(ステップS13)、サポートが終了すると、サポート接続を終了する(ステップS14)。   Thereafter, the supported terminal, the relay server 6 and the support terminal 5 continue the support connection (step S13), and when the support ends, the support connection ends (step S14).

これによって、サポートシステム10の動作が終了する。   As a result, the operation of the support system 10 ends.

このように、被サポート端末(端末装置1〜4のいずれか)は、相対座標CRD_RELに沿うように画像GSを回転し、その回転した画像GS_Rを転送し、サポート端末5は、画像GS_Rを受信し、その受信した画像GS_Rをそのまま表示部53に表示する。従って、サポート端末5は、画像GS_Rを迅速に表示できる。   As described above, the supported terminal (any one of the terminal devices 1 to 4) rotates the image GS along the relative coordinates CRD_REL, transfers the rotated image GS_R, and the support terminal 5 receives the image GS_R. Then, the received image GS_R is displayed on the display unit 53 as it is. Therefore, the support terminal 5 can quickly display the image GS_R.

図10は、図9に示すステップS9の詳細な動作を説明するためのフローチャートである。   FIG. 10 is a flowchart for explaining the detailed operation of step S9 shown in FIG.

図10を参照して、図9に示すステップS8において、画像転送要求GSTRが承諾されたと判定されたとき、被サポート端末(端末装置1〜4のいずれか)の判定手段14は、対応表(対応表TBL1および対応表TBL2等)を参照して、上述した方法によって、端末装置(端末装置1〜4のいずれか)が回転したときの表示部15の矩形形状の頂点の位置を示す絶対座標CRD_ABSと相対座標CRD_RELとの関係に基づいて、表示部15に表示された画像GSの回転角度RAを判定する(ステップS91)。   Referring to FIG. 10, when it is determined in step S8 shown in FIG. 9 that the image transfer request GSTR has been accepted, the determination means 14 of the supported terminal (any of the terminal devices 1 to 4) uses the correspondence table ( Referring to the correspondence table TBL1 and the correspondence table TBL2), the absolute coordinates indicating the position of the vertex of the rectangular shape of the display unit 15 when the terminal device (any one of the terminal devices 1 to 4) is rotated by the method described above. Based on the relationship between CRD_ABS and relative coordinates CRD_REL, the rotation angle RA of the image GS displayed on the display unit 15 is determined (step S91).

そして、被サポート端末(端末装置1〜4のいずれか)の判定手段14は、判定した回転角度RAを回転手段16へ出力し、回転手段16は、判定結果(回転角度RA)に基づいて、表示部15に表示された画像GSの回転角度RAが0度になるように画像GSを回転させる(ステップS92)。   And the determination means 14 of the supported terminal (one of the terminal devices 1 to 4) outputs the determined rotation angle RA to the rotation means 16, and the rotation means 16 is based on the determination result (rotation angle RA). The image GS is rotated so that the rotation angle RA of the image GS displayed on the display unit 15 becomes 0 degrees (step S92).

その後、被サポート端末(端末装置1〜4のいずれか)の回転手段16は、ネットワーク7を介して、その回転した画像GS_Rを、端末装置(端末装置1〜4のいずれか)をサポートするサポート端末5へ送信する(ステップS93)。   Thereafter, the rotating means 16 of the supported terminal (any of the terminal devices 1 to 4) supports the rotated image GS_R via the network 7 to support the terminal device (any of the terminal devices 1 to 4). It transmits to the terminal 5 (step S93).

そして、一連の動作は、図9のステップS10へ移行する。   And a series of operation | movement transfers to step S10 of FIG.

なお、ステップS91においては、被サポート端末(端末装置1〜4のいずれか)の判定手段14は、表示部15の矩形形状の頂点の位置を示す絶対座標CRD_ABSおよび相対座標CRD_RELを検出すると、端末装置1〜4が回転したときの絶対座標CRD_ABSと相対座標CRD_RELとの関係に端末装置1〜4の回転角度RAを対応付けた対応表TBL1(またはTBL2)を参照して、検出した絶対座標CRD_ABSと相対座標CRD_RELとの関係に対応する角度を検出し、その検出した角度を当該端末装置の回転角度RAと判定してもよい。   In step S91, when the determination unit 14 of the supported terminal (one of the terminal devices 1 to 4) detects the absolute coordinate CRD_ABS and the relative coordinate CRD_REL indicating the position of the vertex of the rectangular shape of the display unit 15, The absolute coordinate CRD_ABS detected by referring to the correspondence table TBL1 (or TBL2) in which the rotation angle RA of the terminal devices 1 to 4 is associated with the relationship between the absolute coordinate CRD_ABS and the relative coordinate CRD_REL when the devices 1 to 4 are rotated. And the relative coordinate CRD_REL may be detected, and the detected angle may be determined as the rotation angle RA of the terminal device.

このように、端末装置1〜4が回転したときの絶対座標CRD_ABSと相対座標CRD_RELとの関係を用いることによって、表示部15に表示された画像GSの回転角度RAを判定でき、その判定結果に基づいて、回転角度RAが0°になるように画像GSを回転させ、その回転させた画像GS_Rをサポート端末5へ送信できる。   Thus, by using the relationship between the absolute coordinate CRD_ABS and the relative coordinate CRD_REL when the terminal devices 1 to 4 are rotated, the rotation angle RA of the image GS displayed on the display unit 15 can be determined, and the determination result Based on this, the image GS can be rotated so that the rotation angle RA becomes 0 °, and the rotated image GS_R can be transmitted to the support terminal 5.

従って、サポート端末5は、端末装置1〜4から受信した画像GS_Rを表示部53にそのまま表示すればよく、画像GS_Rを迅速に表示部53に表示できる。   Therefore, the support terminal 5 may display the image GS_R received from the terminal devices 1 to 4 on the display unit 53 as it is, and can display the image GS_R on the display unit 53 quickly.

図11は、図1に示す端末装置1の別の構成を示す概略図である。この発明の実施の形態による端末装置1は、図11に示す端末装置1Aであってもよい。   FIG. 11 is a schematic diagram illustrating another configuration of the terminal device 1 illustrated in FIG. 1. The terminal device 1 according to the embodiment of the present invention may be a terminal device 1A shown in FIG.

図11を参照して、端末装置1Aは、端末装置1の判定手段14を削除し、受信手段12を受信手段12Aに代え、回転手段16を回転手段16Aに代えたものであり、その他は、端末装置1と同じである。   Referring to FIG. 11, terminal apparatus 1A deletes determination means 14 of terminal apparatus 1, replaces receiving means 12 with receiving means 12A, and rotates rotating means 16 with rotating means 16A. It is the same as the terminal device 1.

受信手段12Aは、中継サーバ6、ネットワーク7およびアンテナ11を介してサポート端末5からサポート用の画像GSを受信し、その受信した画像GSを表示手段13および回転手段16Aへ出力する。   The receiving unit 12A receives the support image GS from the support terminal 5 via the relay server 6, the network 7, and the antenna 11, and outputs the received image GS to the display unit 13 and the rotation unit 16A.

また、受信手段12Aは、中継サーバ6、ネットワーク7およびアンテナ11を介してサポート端末5から画像転送要求GSTRを受信し、その受信した画像転送要求GSTRを回転手段16Aへ出力する。   The receiving unit 12A receives the image transfer request GSTR from the support terminal 5 via the relay server 6, the network 7, and the antenna 11, and outputs the received image transfer request GSTR to the rotating unit 16A.

受信手段12Aは、その他、受信手段12と同じ機能を果たす。   The receiving unit 12A performs the same functions as the receiving unit 12 in addition.

回転手段16Aは、端末装置1AのOS(Operating System)からAPI(Application Program Interface)を介して画像回転情報を受ける。   The rotation unit 16A receives image rotation information from an OS (Operating System) of the terminal device 1A via an API (Application Program Interface).

また、回転手段16Aは、受信手段12から画像転送要求GSTRおよび画像GSを受ける。   The rotating unit 16A receives the image transfer request GSTR and the image GS from the receiving unit 12.

そして、回転手段16Aは、画像転送要求GSTRに応じて、画像回転情報に基づいて、回転角度が0°になるように画像GSを回転し、その回転した画像GS_Rを送信手段17へ出力する。   In response to the image transfer request GSTR, the rotation unit 16A rotates the image GS so that the rotation angle becomes 0 ° based on the image rotation information, and outputs the rotated image GS_R to the transmission unit 17.

なお、図1に示す端末装置2〜4の各々も、図11に示す端末装置1Aからなる。   In addition, each of the terminal devices 2-4 shown in FIG. 1 also consists of the terminal device 1A shown in FIG.

図12は、図9に示すステップS9の別の詳細な動作を説明するためのフローチャートである。   FIG. 12 is a flowchart for explaining another detailed operation of step S9 shown in FIG.

図12に示すフローチャートは、図10に示すフローチャートのステップS91を削除し、ステップS92をステップS92に代えたものであり、その他は、図10に示すフローチャートと同じである。   The flowchart shown in FIG. 12 is the same as the flowchart shown in FIG. 10 except that step S91 of the flowchart shown in FIG. 10 is deleted and step S92 is replaced with step S92.

図12を参照して、図9に示すステップS8において、画像転送要求GSTRが承諾されたと判定されたとき、被サポート端末(端末装置1〜4のいずれか)の回転手段16Aは、OSから受けた画像回転情報に基づいて、表示部15に表示される画像の回転角度が0°になるように画像GSを回転させる(ステップS92A)。そして、被サポート端末(端末装置1〜4のいずれか)の回転手段16Aは、その回転した画像GS_Rを送信手段17へ出力する。その後、上述したステップS93が実行され、一連の動作は、図9のステップS10へ移行する。   Referring to FIG. 12, when it is determined in step S8 shown in FIG. 9 that the image transfer request GSTR has been accepted, the rotating means 16A of the supported terminal (any one of the terminal devices 1 to 4) receives from the OS. Based on the image rotation information, the image GS is rotated so that the rotation angle of the image displayed on the display unit 15 becomes 0 ° (step S92A). Then, the rotation unit 16 </ b> A of the supported terminal (any one of the terminal devices 1 to 4) outputs the rotated image GS_R to the transmission unit 17. Then, step S93 mentioned above is performed and a series of operation | movement transfers to step S10 of FIG.

端末装置1〜4が端末装置1Aからなる場合、サポートシステム10の動作は、図9および図12に示すフローチャートに従って実行される。   When the terminal devices 1 to 4 include the terminal device 1A, the operation of the support system 10 is executed according to the flowcharts shown in FIGS.

そして、端末装置1〜4(端末装置1A)は、OSから受けた画像回転情報に基づいて、表示部15に表示される画像の回転角度が0°になるように画像GSを回転させ、その回転させた画像GS_Rを中継サーバ6を介してサポート端末5へ送信する。   Then, the terminal devices 1 to 4 (terminal device 1A) rotate the image GS so that the rotation angle of the image displayed on the display unit 15 becomes 0 ° based on the image rotation information received from the OS, The rotated image GS_R is transmitted to the support terminal 5 via the relay server 6.

サポート端末5は、端末装置1〜4(端末装置1A)から受信した画像GS_Rをそのまま表示部53に表示する。   The support terminal 5 displays the image GS_R received from the terminal devices 1 to 4 (terminal device 1A) on the display unit 53 as it is.

従って、画像をサポート端末の表示部に迅速に表示できる。   Accordingly, the image can be quickly displayed on the display unit of the support terminal.

上述した端末装置1〜4,1Aの動作は、ソフトウェアによって実現されてもよい。この場合、端末装置1〜4は、ROM(Read Only Memory)と、RAM(Random Access Memory)と、CPU(Central Processing Unit)とを備える。   The operations of the terminal devices 1 to 4 and 1A described above may be realized by software. In this case, the terminal devices 1 to 4 include a ROM (Read Only Memory), a RAM (Random Access Memory), and a CPU (Central Processing Unit).

そして、ROMは、図10に示すステップS91〜ステップS93を備えるプログラムProg_Aまたは図12に示すステップS92A,S93を備えるプログラムProg_Bを記憶する。   The ROM stores a program Prog_A including steps S91 to S93 illustrated in FIG. 10 or a program Prog_B including steps S92A and S93 illustrated in FIG.

CPUは、ROMからプログラムProg_Aを読み出して実行し、上述したように、端末装置1〜4は、表示部15に表示された画像GSの回転角度RAを判定し、その判定した回転角度RAに基づいて、回転角度RAが0°になるように画像GSを回転させ、その回転させた画像GS_Rをサポート端末5へ送信する。   The CPU reads and executes the program Prog_A from the ROM, and as described above, the terminal devices 1 to 4 determine the rotation angle RA of the image GS displayed on the display unit 15, and based on the determined rotation angle RA. Then, the image GS is rotated so that the rotation angle RA becomes 0 °, and the rotated image GS_R is transmitted to the support terminal 5.

この場合、RAMは、対応表TBL1,TBL2を記憶するために用いられる。   In this case, the RAM is used to store the correspondence tables TBL1 and TBL2.

また、CPUは、ROMからプログラムProg_Bを読み出して実行し、上述したように、端末装置1〜4(=端末装置1A)は、画像回転情報に基づいて、表示部15に表示される画像GSの回転角度RAが0°になるように画像GSを回転させ、その回転させた画像GS_Rをサポート端末5へ送信する。   Further, the CPU reads the program Prog_B from the ROM and executes the program Prog_B, and as described above, the terminal devices 1 to 4 (= terminal device 1A) can display the image GS displayed on the display unit 15 based on the image rotation information. The image GS is rotated so that the rotation angle RA becomes 0 °, and the rotated image GS_R is transmitted to the support terminal 5.

プログラムProg_A,Prog_Bは、CDおよびDVD等の記録媒体に記録されて流通してもよい。プログラムProg_A,Prog_Bを記録した記録媒体がコンピュータに装着されると、コンピュータは、記録媒体からプログラムProg_A,Prog_Bを読み出して実行する。これによって、端末装置1〜4は、表示部15に表示された画像GSの回転角度RAを判定し、その判定した回転角度RAに基づいて、回転角度RAが0°になるように画像GSを回転させ、その回転させた画像GS_Rをサポート端末5へ送信する。また、端末装置1〜4(=端末装置1A)は、画像回転情報に基づいて、表示部15に表示される画像GSの回転角度RAが0°になるように画像GSを回転させ、その回転させた画像GS_Rをサポート端末5へ送信する。   The programs Prog_A and Prog_B may be recorded and distributed on a recording medium such as a CD and a DVD. When a recording medium on which the programs Prog_A and Prog_B are recorded is loaded on the computer, the computer reads the programs Prog_A and Prog_B from the recording medium and executes them. Thereby, the terminal devices 1 to 4 determine the rotation angle RA of the image GS displayed on the display unit 15, and based on the determined rotation angle RA, display the image GS so that the rotation angle RA becomes 0 °. The rotated image GS_R is transmitted to the support terminal 5. Further, the terminal devices 1 to 4 (= terminal device 1A) rotate the image GS so that the rotation angle RA of the image GS displayed on the display unit 15 becomes 0 ° based on the image rotation information, and rotate the image GS. The made image GS_R is transmitted to the support terminal 5.

従って、プログラムProg_A,Prog_Bを記録した記録媒体は、コンピュータ読み取り可能な記録媒体である。   Therefore, the recording medium on which the programs Prog_A and Prog_B are recorded is a computer-readable recording medium.

上記においては、判定手段14は、対応表TBL1,TBL2を参照して、画像GSの回転角度RAを判定すると説明したが、この発明の実施の形態においては、これに限らず、判定手段14は、対応表TBL1,TBL2を参照せずに画像GSの回転角度RAを判定してもよい。例えば、判定手段14は、絶対座標CRD_ABSの原点と相対座標CRD_RELの原点とを設定し、その設定した絶対座標CRD_ABSの原点と相対座標CRD_RELの原点との間の関係を検出することにより、画像GSの回転角度RAを判定できる。より具体的には、絶対座標CRD_ABSの原点と相対座標CRD_RELの原点とを左上の頂点に設定した場合、絶対座標CRD_ABSの原点が左下の頂点へ回転すれば、端末装置1〜4が反時計方向に90°回転したことになり、絶対座標CRD_ABSの原点が右下の頂点へ回転すれば、端末装置1〜4が反時計方向に180°回転したことになり、絶対座標CRD_ABSの原点が右上の頂点へ回転すれば、端末装置1〜4が反時計方向に270°回転したことになり、絶対座標CRD_ABSの原点が左上の頂点のままであれば、端末装置1〜4の回転角度RAは、0°になる。従って、判定手段14は、絶対座標CRD_ABSの原点の位置と相対座標CRD_RELの原点の位置との関係を検出することによって画像GSの回転角度RAを判定できる。   In the above description, it has been described that the determination unit 14 determines the rotation angle RA of the image GS with reference to the correspondence tables TBL1 and TBL2, but in the embodiment of the present invention, the determination unit 14 is not limited thereto. The rotation angle RA of the image GS may be determined without referring to the correspondence tables TBL1 and TBL2. For example, the determination unit 14 sets the origin of the absolute coordinates CRD_ABS and the origin of the relative coordinates CRD_REL, and detects the relationship between the set origin of the absolute coordinates CRD_ABS and the origin of the relative coordinates CRD_REL, thereby detecting the image GS. Can be determined. More specifically, when the origin of the absolute coordinates CRD_ABS and the origin of the relative coordinates CRD_REL are set to the upper left vertex, if the origin of the absolute coordinates CRD_ABS rotates to the lower left vertex, the terminal devices 1 to 4 are counterclockwise. If the origin of the absolute coordinates CRD_ABS is rotated to the lower right vertex, the terminal devices 1 to 4 are rotated 180 degrees counterclockwise, and the origin of the absolute coordinates CRD_ABS is If rotating to the top, the terminal devices 1 to 4 have rotated 270 ° counterclockwise. If the origin of the absolute coordinates CRD_ABS remains at the top left vertex, the rotation angle RA of the terminal devices 1 to 4 is 0 °. Therefore, the determination unit 14 can determine the rotation angle RA of the image GS by detecting the relationship between the position of the origin of the absolute coordinates CRD_ABS and the position of the origin of the relative coordinates CRD_REL.

これは、図4および図6に示すように、端末装置1〜4が回転しても、相対座標CRD_RELの原点の位置は、常に、左上の頂点にあり、絶対座標CRD_ABSの原点の位置は、端末装置1〜4の回転に伴って変化していることからも明らかである。   As shown in FIGS. 4 and 6, even if the terminal devices 1 to 4 are rotated, the position of the origin of the relative coordinates CRD_REL is always at the upper left vertex, and the position of the origin of the absolute coordinates CRD_ABS is It is also clear from the fact that it changes with the rotation of the terminal devices 1 to 4.

そして、このような回転角度RAの判定方法は、絶対座標CRD_ABSの原点の位置と相対座標CRD_RELの原点の位置とを左上の頂点、左下の頂点、右上の頂点および右下の頂点のいずれかに任意に設定した場合も、同様にして、使用可能である。   Then, such a determination method of the rotation angle RA is such that the position of the origin of the absolute coordinate CRD_ABS and the position of the origin of the relative coordinate CRD_REL is set to one of the upper left vertex, the lower left vertex, the upper right vertex, and the lower right vertex. Even if it is arbitrarily set, it can be used in the same manner.

従って、判定手段14は、対応表TBL1,TBL2を参照しなくても、画像GSの回転角度RAを判定できる。   Therefore, the determination unit 14 can determine the rotation angle RA of the image GS without referring to the correspondence tables TBL1 and TBL2.

また、上記においては、端末装置1〜4の回転角度RA(=画像GSの回転角度)は、反時計方向への回転角度であると説明したが、この発明の実施の形態においては、端末装置1〜4の回転角度RA(=画像GSの回転角度)は、時計方向への回転角度であってもよい。   In the above description, the rotation angle RA (= the rotation angle of the image GS) of the terminal devices 1 to 4 has been described as being a counterclockwise rotation angle. However, in the embodiment of the present invention, the terminal device The rotation angle RA of 1 to 4 (= the rotation angle of the image GS) may be a clockwise rotation angle.

更に、上記においては、判定手段14は、画像転送要求GSTRをサポート端末5から受信すると、画像GSの回転角度RAを判定すると説明したが、この発明の実施の形態においては、これに限らず、判定手段14は、端末装置1〜4とサポート端末5との間でサポート接続が開始された後に、自発的に、画像GSの回転角度RAを判定するようにしてもよい。この場合、判定手段14は、一定の周期ごとに、または任意のタイミングで画像GSの回転角度RAを判定するようにしてもよい。   Further, in the above description, it has been described that the determination unit 14 determines the rotation angle RA of the image GS when the image transfer request GSTR is received from the support terminal 5, but the embodiment of the present invention is not limited thereto. The determination unit 14 may spontaneously determine the rotation angle RA of the image GS after the support connection is started between the terminal devices 1 to 4 and the support terminal 5. In this case, the determination unit 14 may determine the rotation angle RA of the image GS at regular intervals or at an arbitrary timing.

更に、上記においては、判定手段14は、ストリーミングによって表示された画像GSの回転角度RAを判定すると説明したが、この発明の実施の形態においては、これに限らず、判定手段14は、ストリーミングによって表示された画像GS以外の画像GSの回転角度RAを判定してもよい。   Further, in the above description, the determination unit 14 has been described as determining the rotation angle RA of the image GS displayed by streaming. However, in the embodiment of the present invention, the determination unit 14 is not limited to this, and the determination unit 14 is not limited to streaming. The rotation angle RA of the image GS other than the displayed image GS may be determined.

更に、上記においては、端末装置1〜4の送信手段17は、画像GS_Rを中継サーバ6を介してサポート端末5へ送信すると説明したが、この発明の実施の形態においては、これに限らず、端末装置1〜4の送信手段17は、画像GS_Rをサポート端末5へ直接送信してもよい。これによって、サポート端末5は、画像GS_Rを表示部53に迅速に表示できる。   Furthermore, in the above description, the transmission means 17 of the terminal devices 1 to 4 has been described as transmitting the image GS_R to the support terminal 5 via the relay server 6, but in the embodiment of the present invention, the present invention is not limited thereto. The transmission means 17 of the terminal devices 1 to 4 may directly transmit the image GS_R to the support terminal 5. As a result, the support terminal 5 can quickly display the image GS_R on the display unit 53.

上述した判定手段14による画像GSの回転角度の判定結果は、画像回転情報に相当する。   The determination result of the rotation angle of the image GS by the determination unit 14 described above corresponds to image rotation information.

従って、上述した実施の形態によれば、この発明の実施の形態による端末装置は、矩形形状を有し、画像を表示する表示部と、画像回転情報に基づいて、表示部に表示される画像の回転角度が0°になるように画像を回転させる回転手段と、回転手段によって回転された画像を、ネットワークを介して当該端末装置をサポートするサポート端末へ送信する送信手段とを備えていればよい。   Therefore, according to the above-described embodiment, the terminal device according to the embodiment of the present invention has a rectangular shape, and an image displayed on the display unit based on the display unit that displays the image and the image rotation information. A rotation means for rotating the image so that the rotation angle of the image becomes 0 °, and a transmission means for transmitting the image rotated by the rotation means to a support terminal that supports the terminal device via a network. Good.

また、この発明の実施の形態によるコンピュータに実行させるためのプログラムは、端末装置の表示部に表示された画像の操作をコンピュータに実行させるためのプログラムであって、回転手段が、画像回転情報に基づいて、表示部に表示される画像の回転角度が0°になるように画像を回転させる第1のステップと、送信手段が、第1のステップにおいて回転された画像を、ネットワークを介して端末装置をサポートするサポート端末へ送信する第2のステップとをコンピュータに実行させるためのプログラムであればよい。   Further, a program for causing a computer to execute according to an embodiment of the present invention is a program for causing a computer to perform an operation on an image displayed on a display unit of a terminal device. Based on the first step of rotating the image so that the rotation angle of the image displayed on the display unit becomes 0 °, and the transmission means send the image rotated in the first step to the terminal via the network. What is necessary is just a program for making a computer perform the 2nd step transmitted to the support terminal which supports an apparatus.

更に、この発明の実施の形態によるサポートシステムは、被サポート端末と、ネットワークを介して被サポート端末をサポートするサポート端末とを備え、被サポート端末は、上記の端末装置からなり、サポート端末は、被サポート端末から受信した画像をそのまま表示部に表示すればよい。   Furthermore, the support system according to the embodiment of the present invention includes a supported terminal and a support terminal that supports the supported terminal via a network, and the supported terminal includes the terminal device described above. The image received from the supported terminal may be displayed as it is on the display unit.

更に、この発明の実施の形態による記録媒体は、上記のプログラムProg_A,Prog_Bを記録したコンピュータ読み取り可能な記録媒体であればよい。   Furthermore, the recording medium according to the embodiment of the present invention may be a computer-readable recording medium that records the above programs Prog_A and Prog_B.

上述したように、この発明の実施の形態によれば、画像を迅速に表示できる。ここで、「迅速に表示できる」について詳しく説明する。特許文献1に記載のように、画像情報と、画像情報の向きを示す識別子とをリモート端末へ送信する構成では、リモート端末において画像の方向を調整して表示する場合の処理遅延が発生することに加え、サポートされる端末で画像を回転するタイミングとリモート端末において画像の方向を調整するタイミングとのずれが発生する。特許文献1には、サポートされる端末で画像を回転するタイミングとリモート端末において画像の方向を調整するタイミングとの同期を取る構成が記載されていないが、特許文献1に記載の画像情報と識別子とをリモート端末へ送信する構成では、サポートされる端末で画像を回転するタイミングとリモート端末において画像の方向を調整するタイミングとの同期を取るための時間による遅延である同期遅延が発生する。   As described above, according to the embodiment of the present invention, an image can be quickly displayed. Here, “can be displayed quickly” will be described in detail. As described in Patent Document 1, in a configuration in which image information and an identifier indicating the direction of image information are transmitted to a remote terminal, a processing delay occurs when the image is adjusted and displayed on the remote terminal. In addition, there is a difference between the timing of rotating the image at the supported terminal and the timing of adjusting the image direction at the remote terminal. Patent Document 1 does not describe a configuration that synchronizes the timing of rotating an image at a supported terminal and the timing of adjusting the direction of the image at a remote terminal, but the image information and identifier described in Patent Document 1 are not described. Is transmitted to the remote terminal, a synchronization delay, which is a delay due to time for synchronizing the timing of rotating the image at the supported terminal and the timing of adjusting the direction of the image at the remote terminal, occurs.

しかし、この発明の実施の形態においては、上述したように、端末装置が、画像の回転角度が0°になるように画像を回転してサポート端末へ送信する構成を採用しているので、サポート端末は、端末装置から受信した画像をそのまま表示すればよい。その結果、サポートされる端末装置で画像を回転するタイミングとサポート端末において画像の方向を調整するタイミングとの同期を取る必要がない。従って、サポート端末における画像調整による処理遅延に加え、同期を取るために発生する同期遅延を防止することによって、画像をサポート端末の表示部に迅速に表示できる。   However, in the embodiment of the present invention, as described above, the terminal device employs a configuration in which the image is rotated and transmitted to the support terminal so that the image rotation angle is 0 °. The terminal may display the image received from the terminal device as it is. As a result, there is no need to synchronize the timing of rotating the image with the supported terminal device and the timing of adjusting the image direction with the support terminal. Therefore, in addition to the processing delay due to the image adjustment in the support terminal, the image can be quickly displayed on the display unit of the support terminal by preventing the synchronization delay generated for synchronization.

今回開示された実施の形態はすべての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は、上記した実施の形態の説明ではなくて特許請求の範囲によって示され、特許請求の範囲と均等の意味および範囲内でのすべての変更が含まれることが意図される。   The embodiment disclosed this time should be considered as illustrative in all points and not restrictive. The scope of the present invention is shown not by the above description of the embodiments but by the scope of claims for patent, and is intended to include meanings equivalent to the scope of claims for patent and all modifications within the scope.

この発明は、端末装置、それを備えたサポートシステム、およびコンピュータに実行させるためのプログラムに適用される。   The present invention is applied to a terminal device, a support system including the terminal device, and a program to be executed by a computer.

1〜4,1A 端末装置、5 サポート端末、6 中継サーバ、7 ネットワーク、8,9 有線ケーブル、10 サポートシステム、11 アンテナ、12,12A,51 受信手段、13,52 表示手段、14,53 判定手段、15 表示部、16,16A 回転手段、17,56 送信手段、18 受付手段、19 再生手段、20 スピーカ、54 サポート手段、55 マイク。   1-4, 1A terminal device, 5 support terminal, 6 relay server, 7 network, 8, 9 wired cable, 10 support system, 11 antenna, 12, 12A, 51 receiving means, 13, 52 display means, 14, 53 judgment Means, 15 Display, 16, 16A Rotating means, 17, 56 Transmitting means, 18 Accepting means, 19 Reproducing means, 20 Speaker, 54 Support means, 55 Microphone.

Claims (7)

矩形形状を有し、画像を表示する表示部と、
画像回転情報に基づいて、前記表示部に表示される画像の回転角度が0°になるように画像を回転させる回転手段と、
前記回転手段によって回転された画像を、ネットワークを介して当該端末装置をサポートするサポート端末へ送信する送信手段とを備える端末装置。
A display unit having a rectangular shape and displaying an image;
Rotating means for rotating the image based on the image rotation information so that the rotation angle of the image displayed on the display unit is 0 °;
A terminal device comprising: a transmission unit that transmits an image rotated by the rotation unit to a support terminal that supports the terminal device via a network.
当該端末装置が回転したときの前記矩形形状の頂点の位置を表す絶対座標と相対座標との関係に基づいて、前記表示部に表示された画像の回転角度を判定する判定手段を更に備え、
前記回転手段は、前記判定手段による判定結果に基づいて、前記表示部に表示された画像の回転角度が0°になるように画像を回転させる、請求項1に記載の端末装置。
A determination unit for determining a rotation angle of an image displayed on the display unit based on a relationship between an absolute coordinate and a relative coordinate representing a position of a vertex of the rectangular shape when the terminal device is rotated;
The terminal device according to claim 1, wherein the rotation unit rotates the image so that a rotation angle of the image displayed on the display unit is 0 ° based on a determination result by the determination unit.
被サポート端末と、
ネットワークを介して前記被サポート端末をサポートするサポート端末とを備え、
前記被サポート端末は、請求項1または請求項2に記載の端末装置からなり、
前記サポート端末は、前記被サポート端末から受信した画像をそのまま表示部に表示する、サポートシステム。
A supported terminal,
A support terminal that supports the supported terminal via a network;
The supported terminal comprises the terminal device according to claim 1 or claim 2,
The support system displays the image received from the supported terminal as it is on a display unit.
端末装置の表示部に表示される画像の操作をコンピュータに実行させるためのプログラムであって、
回転手段が、画像回転情報に基づいて、前記表示部に表示される画像の回転角度が0°になるように画像を回転させる第1のステップと、
送信手段が、前記第1のステップにおいて回転された画像を、ネットワークを介して前記端末装置をサポートするサポート端末へ送信する第2のステップとをコンピュータに実行させるためのプログラム。
A program for causing a computer to operate an image displayed on a display unit of a terminal device,
A first step of rotating the image based on the image rotation information so that the rotation angle of the image displayed on the display unit is 0 °;
A program for causing a computer to execute a second step in which a transmission unit transmits the image rotated in the first step to a support terminal that supports the terminal device via a network.
判定手段が、前記端末装置が回転したときの前記表示部の矩形形状の頂点の位置を表す絶対座標と相対座標との関係に基づいて、前記表示部に表示された画像の回転角度を判定する第3のステップを更にコンピュータに実行させ、
前記回転手段は、前記第1のステップにおいて、前記第3のステップにおける判定結果に基づいて、前記表示部に表示された画像の回転角度が0°になるように画像を回転させる、請求項4に記載のコンピュータに実行させるためのプログラム。
A determination unit determines a rotation angle of an image displayed on the display unit based on a relationship between an absolute coordinate representing a position of a vertex of a rectangular shape of the display unit when the terminal device is rotated and a relative coordinate. Let the computer perform the third step further,
The rotation means rotates the image in the first step so that the rotation angle of the image displayed on the display unit is 0 ° based on the determination result in the third step. A program to be executed by the computer described in 1.
前記判定手段は、前記第3のステップにおいて、前記サポート端末からの画像転送要求に応じて、前記画像の回転角度を判定する、請求項5に記載のコンピュータに実行させるためのプログラム。   The program for causing a computer to execute according to claim 5, wherein the determination unit determines the rotation angle of the image in response to an image transfer request from the support terminal in the third step. 前記画像は、ストリーミングによって前記表示部に表示される画像である、請求項4から請求項6のいずれか1項に記載のコンピュータに実行させるためのプログラム。   The program for causing a computer to execute the image according to any one of claims 4 to 6, wherein the image is an image displayed on the display unit by streaming.
JP2016142363A 2016-07-20 2016-07-20 Terminal device, support system equipped with the same, and program to be executed by computer Pending JP2018013912A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2016142363A JP2018013912A (en) 2016-07-20 2016-07-20 Terminal device, support system equipped with the same, and program to be executed by computer

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016142363A JP2018013912A (en) 2016-07-20 2016-07-20 Terminal device, support system equipped with the same, and program to be executed by computer

Publications (1)

Publication Number Publication Date
JP2018013912A true JP2018013912A (en) 2018-01-25

Family

ID=61019409

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016142363A Pending JP2018013912A (en) 2016-07-20 2016-07-20 Terminal device, support system equipped with the same, and program to be executed by computer

Country Status (1)

Country Link
JP (1) JP2018013912A (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112114919A (en) * 2020-09-11 2020-12-22 珠海格力电器股份有限公司 Screen rotation display optimization method and device

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112114919A (en) * 2020-09-11 2020-12-22 珠海格力电器股份有限公司 Screen rotation display optimization method and device
CN112114919B (en) * 2020-09-11 2021-09-24 珠海格力电器股份有限公司 Screen rotation display optimization method and device

Similar Documents

Publication Publication Date Title
US20230037595A1 (en) Image management system, image management method, and computer program product
JP6798019B2 (en) Panorama image display control method, device and storage medium
US10389938B2 (en) Device and method for panoramic image processing
WO2018107604A1 (en) Method and system for controlling display content in multiple display device environment and mobile terminal
US8495495B2 (en) Information processing apparatus, bookmark setting method, and program
US9565241B2 (en) Control method and control apparatus for apparatus including short range wireless communication module
TW201710877A (en) Method of sharing display image on multiple screens and associated communication terminal
KR102229927B1 (en) Multi-Screen System, Picture Partition Server and Picture Processing Method thereof, Divided Picture Terminal and Multi-Screen Control Method thereof
US10310796B2 (en) Dual display with pointer controlled by a remote device
KR20150033442A (en) System and method for sharing object based on knocking input
US20150365248A1 (en) Device Selection Method and Apparatus
JP2015114424A (en) Electronic equipment, display device, method, and program
JP2014112766A (en) Electronic apparatus, control method, and control program
JP2018013912A (en) Terminal device, support system equipped with the same, and program to be executed by computer
JPWO2020138258A1 (en) Information processing equipment, information processing methods and information processing programs
JP2014175736A (en) Relay device and relay method
US20170127120A1 (en) User terminal and control method therefor
JP2017108356A (en) Image management system, image management method and program
JP2012177769A (en) Cooperative display system, cooperative display method, and portable terminal
JP2019071095A (en) Information processor and information processing method
JP6711118B2 (en) Image management system, program and information terminal
JP2019036787A (en) Information processing apparatus, video distribution method, and video distribution program
JP6793515B2 (en) Content provision system, content server, mobile terminal device, content provision method, and program
JP2016127423A (en) Synchronization method of screen display, display processing device, and display processing program
JP2015002516A (en) Information processing apparatus, conference terminal, control method of the same, and program