JP2021140256A - Processing control program, processing control method, and processing control device - Google Patents
Processing control program, processing control method, and processing control device Download PDFInfo
- Publication number
- JP2021140256A JP2021140256A JP2020035144A JP2020035144A JP2021140256A JP 2021140256 A JP2021140256 A JP 2021140256A JP 2020035144 A JP2020035144 A JP 2020035144A JP 2020035144 A JP2020035144 A JP 2020035144A JP 2021140256 A JP2021140256 A JP 2021140256A
- Authority
- JP
- Japan
- Prior art keywords
- image
- display
- displayed
- processing control
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Digital Computer Display Output (AREA)
- Controls And Circuits For Display Device (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
Description
本発明は、処理制御プログラム、処理制御方法、および、処理制御装置に関する。 The present invention relates to a processing control program, a processing control method, and a processing control device.
従来、複数の端末装置のそれぞれの処理に基づく画面を、１台の表示装置に表示させ、当該表示装置に表示された画面の選択操作によって、選択された画面に対応する端末装置を操作する技術が知られている（例えば、特許文献１，２参照）。 Conventionally, a technique of displaying a screen based on each process of a plurality of terminal devices on one display device and operating a terminal device corresponding to the selected screen by a screen selection operation displayed on the display device. Is known (see, for example, Patent Documents 1 and 2).
特許文献１の技術では、１台のワイヤレスディスプレイに、複数のパソコンの画面を一覧表示させる。そして、ユーザにより、一覧表示の画面から特定のパソコンの画面の選択操作が行われると、当該パソコンに対する操作が行なわれる。 In the technique of Patent Document 1, one wireless display displays a list of screens of a plurality of personal computers. Then, when the user performs a screen selection operation of a specific personal computer from the list display screen, the operation for the personal computer is performed.
特許文献２の技術では、管理者端末は、複数のクライアント端末からの操作情報を当該管理者端末の表示装置に一覧表示させる。そして、ユーザにより、管理者端末の表示装置の画面から特定のクライアント端末の選択操作が行われると、管理者端末は、当該クライアント端末に対する遠隔操作を行う。
In the technique of
しかしながら、特許文献１，２に記載のような技術では、複数の端末装置に対して同じ処理を実施させるためには、端末装置の台数と同じ回数の選択操作が必要になる。
However, in the techniques described in
また、特許文献１には、ワイヤレスディスプレイに複数のパソコンを同時に操作する共通操作用の画面を表示させ、一斉初期化などの同じ操作を同時に行うことも記載されている。しかし、操作の結果、各パソコンの画面がどのように変化したかを個別に確認する方法については開示も示唆もされていない。 Further, Patent Document 1 also describes that a screen for common operation for operating a plurality of personal computers at the same time is displayed on a wireless display, and the same operation such as simultaneous initialization is performed at the same time. However, neither disclosure nor suggestion has been made regarding a method for individually confirming how the screen of each personal computer has changed as a result of the operation.
本発明は、複数のコンピュータソフトウェアに対して同じ処理を行わせ、それぞれの結果を確認する作業を容易かつ効率的に行うことができる処理制御プログラム、処理制御方法、および、処理制御装置を提供することを目的とする。 The present invention provides a processing control program, a processing control method, and a processing control device capable of causing a plurality of computer software to perform the same processing and easily and efficiently performing the work of confirming the results of each. The purpose is.
上記目的を達成するために、本発明の処理制御プログラムは、コンピュータに、複数のコンピュータソフトウェアによりそれぞれ生成された互いに対応する内容の各表示画像の複製画像を、１つの画面に同時に表示させる複製画像表示制御手順と、前記１つの画面に表示された複数の複製画像のうちいずれか１つの複製画像に対する操作を受け付け、受け付けた操作を前記各表示画像において実行することを前記複数のコンピュータソフトウェアに対して指示する操作指示手順と、前記複数のコンピュータソフトウェアに対して指示をした結果、更新された前記各表示画像の複製画像を、前記１つの画面に同時に表示させる更新画像表示制御手順と、を実行させる。 In order to achieve the above object, the processing control program of the present invention causes a computer to simultaneously display a duplicate image of each display image having corresponding contents generated by a plurality of computer software on one screen. The display control procedure and the operation for any one of the plurality of duplicated images displayed on the one screen are accepted, and the accepted operation is executed on each of the displayed images for the plurality of computer software. The operation instruction procedure for instructing the software and the update image display control procedure for simultaneously displaying the duplicated image of each display image updated as a result of instructing the plurality of computer software on the one screen are executed. Let me.
本発明の処理制御方法は、コンピュータが、複数のコンピュータソフトウェアによりそれぞれ生成された互いに対応する内容の各表示画像の複製画像を、１つの画面に同時に表示させる複製画像表示制御手順と、前記１つの画面に表示された複数の複製画像のうちいずれか１つの複製画像に対する操作を受け付け、受け付けた操作を前記各表示画像において実行することを前記複数のコンピュータソフトウェアに対して指示する操作指示手順と、前記複数のコンピュータソフトウェアに対して指示をした結果、更新された前記各表示画像の複製画像を、前記１つの画面に同時に表示させる更新画像表示制御手順と、を実行する。 The processing control method of the present invention includes a duplicate image display control procedure in which a computer simultaneously displays duplicate images of each display image having contents corresponding to each other generated by a plurality of computer software on one screen, and the above-mentioned one. An operation instruction procedure for accepting an operation for any one of a plurality of duplicated images displayed on the screen and instructing the plurality of computer software to execute the accepted operation on each of the displayed images, and an operation instruction procedure. As a result of instructing the plurality of computer software, the updated image display control procedure for simultaneously displaying the updated duplicate image of each display image on the one screen is executed.
本発明の処理制御装置は、複数のコンピュータソフトウェアによりそれぞれ生成された互いに対応する内容の各表示画像の複製画像を、１つの画面に同時に表示させる複製画像表示制御部と、前記１つの画面に表示された複数の複製画像のうちいずれか１つの複製画像に対する操作を受け付け、受け付けた操作を前記各表示画像において実行することを前記複数のコンピュータソフトウェアに対して指示する操作指示部と、を備え、前記複製画像表示制御部は、前記複数のコンピュータソフトウェアに対して指示をした結果、更新された前記各表示画像の複製画像を、前記１つの画面に同時に表示させる。 The processing control device of the present invention includes a duplicate image display control unit that simultaneously displays duplicate images of each display image having corresponding contents generated by a plurality of computer software on one screen, and displays on the one screen. It is provided with an operation instruction unit that accepts an operation on any one of the plurality of duplicated images and instructs the plurality of computer software to execute the accepted operation on each of the displayed images. As a result of instructing the plurality of computer software, the duplicate image display control unit simultaneously displays the updated duplicate image of each display image on the one screen.
本発明の処理制御プログラム、処理制御方法、および、処理制御装置によれば、複数のコンピュータソフトウェアに対して同じ処理を行わせ、それぞれの結果を確認する作業を容易かつ効率的に行うことができる。 According to the processing control program, the processing control method, and the processing control device of the present invention, it is possible to easily and efficiently perform the work of causing a plurality of computer software to perform the same processing and confirming the results of each. ..
［実施の形態］
以下、本発明の一実施の形態について、図面を参照しながら説明する。
[Embodiment]
Hereinafter, an embodiment of the present invention will be described with reference to the drawings.
〔第１の実施の形態〕
＜処理制御システムの構成＞
まず、本発明の第１の実施の形態に係る処理制御システムの構成について説明する。図１は、第１の実施の形態に係る処理制御システムの概略構成ブロック図である。図２は、処理制御システムを構成する端末装置に画像が表示されている状態を示す模式図である。図３は、処理制御システムを構成する処理制御装置の表示部に複製画像が表示されている状態を示す模式図である。
[First Embodiment]
<Configuration of processing control system>
First, the configuration of the processing control system according to the first embodiment of the present invention will be described. FIG. 1 is a schematic block diagram of a processing control system according to the first embodiment. FIG. 2 is a schematic view showing a state in which an image is displayed on a terminal device constituting a processing control system. FIG. 3 is a schematic view showing a state in which a duplicate image is displayed on the display unit of the processing control device constituting the processing control system.
図１に示す処理制御システム１は、複数の端末装置２と、処理制御装置３と、を備えている。なお、第１の実施の形態では、４台の端末装置２を備える構成について例示するが、端末装置２の台数は複数であれば４台でなくてもよい。
The processing control system 1 shown in FIG. 1 includes a plurality of
端末装置２は、スマートフォンやゲーム機、タブレット端末、パーソナルコンピュータなどの装置である。端末装置２は、端末通信部２１と、端末入力部２２と、端末表示部２３と、端末記憶部２４と、端末処理部２５と、を備えている。
The
端末通信部２１は、有線通信または無線通信により処理制御装置３と通信を行う通信デバイスである。
The
端末入力部２２は、キーボードやマウスなどの入力デバイスである。なお、端末入力部２２を端末表示部２３に設けられたタッチパネルで構成してもよい。
The
端末表示部２３は、ディスプレイなどの表示デバイスである。
The
端末記憶部２４は、端末装置２が行う各種処理に必要な情報や、端末装置２が生成した情報や、端末装置２の外部から取得した情報などを記憶するメモリなどの記憶デバイスである。
The
端末処理部２５は、プロセッサが端末記憶部２４に記憶されたコンピュータプログラムを実行することによって実現される機能部である。端末処理部２５は、端末入力部２２の入力操作に基づいて、一般的な端末装置が行う各種処理を行う。例えば、端末処理部２５は、端末記憶部２４に記憶されたウェブブラウザソフトウェアを実行する。また、端末処理部２５は、処理制御装置３からの指示に基づく処理を行う。
The
処理制御装置３は、スマートフォンやタブレット端末、パーソナルコンピュータなどの装置である。処理制御装置３は、通信部３１と、入力部３２と、表示部３３と、記憶部３４と、制御部３５と、を備えている。
The
通信部３１、入力部３２、および、表示部３３は、端末通信部２１、端末入力部２２、および、端末表示部２３とそれぞれ同様の構成を有している。記憶部３４は、処理制御装置３が行う各種処理に必要な情報や、処理制御装置３が生成した情報や、処理制御装置３の外部から取得した情報などを記憶するメモリなどの記憶デバイスである。
The
制御部３５は、プロセッサが記憶部３４に記憶された処理制御プログラムを実行することによって実現される機能部である。制御部３５は、表示サイズ検出部３５１と、表示画像指示部３５２と、複製画像表示制御部３５３と、操作指示部３５４と、を備えている。
The
表示サイズ検出部３５１は、処理制御装置３に接続された端末装置２における端末表示部２３の画面２３１（図２参照）の解像度（画面２３１の横方向の画素数と縦方向の画素数）を検出する。
The display
表示画像指示部３５２は、処理制御装置３に接続された各端末装置２に対して、互いに対応する内容の表示画像を生成して、それぞれの端末表示部２３にその表示画像を表示するように指示する。この指示に基づいて、各端末装置２の端末処理部２５は、図２に示すように、端末表示部２３の画面２３１に互いに対応する内容の表示画像Ｄ０を表示させる。
The display
互いに対応する内容の表示画像とは、同一内容の画像、または、各端末表示部２３の画面２３１に表示される情報の量が全く同一ではないが、例えば、ウェブブラウザによって表示される同一のＵＲＬ（Uniform Resource Locator）のウェブサイトの画像や、同一のゲームソフトウェアによって表示される同じ場面の画像などのことである。
The display images of the contents corresponding to each other are not exactly the same as the images of the same contents or the amount of information displayed on the
各端末装置２の画面２３１のサイズやアスペクト比が異なる場合には、互いに対応する内容の表示画像Ｄ０でも、表示画像の一部が表示されないなど、画面２３１に表示される情報の量が異なる場合がある。
When the size and aspect ratio of the
複製画像表示制御部３５３は、図３に示すように、複数の端末装置２にそれぞれ表示された互いに対応する内容の表示画像Ｄ０の複製画像Ｄ１を、１台の表示部３３の画面３３１に同時に表示させる。複製画像表示制御部３５３は、各複製画像Ｄ１を、各表示画像Ｄ０のアスペクト比と同じアスペクト比で表示させる。
As shown in FIG. 3, the duplicate image
操作指示部３５４は、表示部３３に表示された複数の複製画像Ｄ１のうちいずれか１つの複製画像Ｄ１（以下、「操作画像Ｄ２」という）に対する操作を検出すると、検出した操作と同じ操作を行うことを複数の端末装置２に対して指示する。
When the
＜処理制御システムの動作＞
次に、処理制御システムの動作について説明する。図４は、１つの複製画像に対して行われた操作と同じ操作を行うことを複数の端末装置に対して指示をする処理制御のフローチャートである。図５は、処理制御における操作指示位置演算処理のフローチャートである。なお、第１の実施の形態では、操作画像Ｄ２に対する操作が、例えば、操作画像Ｄ２のボタンの押下操作、ハイパーリンクの選択操作である場合について説明する。
<Operation of processing control system>
Next, the operation of the processing control system will be described. FIG. 4 is a flowchart of processing control for instructing a plurality of terminal devices to perform the same operation as that performed on one duplicate image. FIG. 5 is a flowchart of the operation instruction position calculation process in the process control. In the first embodiment, a case where the operation on the operation image D2 is, for example, a button pressing operation on the operation image D2 or a hyperlink selection operation will be described.
まず、処理制御システム１のユーザは、４台の端末装置２と、処理制御装置３とを、各端末装置２と処理制御装置３との間で各種情報を送受信可能に接続する。ユーザが処理制御装置３の入力部３２を操作して処理制御プログラムを起動すると、表示サイズ検出部３５１は、処理制御装置３に接続された端末装置２のうち、複数の端末装置２を制御対象として選択する旨をユーザに促す画像を表示部３３に表示させる。
First, the user of the processing control system 1 connects the four
表示サイズ検出部３５１は、ユーザによる複数の端末装置２を選択する旨の操作が行われると、図４に示すように、当該選択された各端末装置２の画面２３１の解像度を検出する（ステップＳ１）。
When the user performs an operation to select a plurality of
例えば、表示サイズ検出部３５１は、各端末装置２に画面２３１の解像度に関する情報を処理制御装置３に送信するように要求する。そして、表示サイズ検出部３５１は、各端末装置２の端末処理部２５から解像度に関する情報を取得し、各画面２３１の解像度を検出する。
For example, the display
次に、表示画像指示部３５２は、各端末装置２に対して、互いに対応する内容の画像を表示するように指示する（ステップＳ２）。例えば、表示画像指示部３５２は、特定のＵＲＬの情報を各端末装置２に送信し、当該ＵＲＬに対応するウェブサイトの画像を端末表示部２３で表示するように指示する。この指示によって、各端末装置２の端末表示部２３には、図２に示すように、互いに対応する内容の表示画像Ｄ０が表示される。
Next, the display
この後、複製画像表示制御部３５３は、各端末装置２に対し、端末表示部２３の表示画像Ｄ０を処理制御装置３に送信するように指示する（ステップＳ３）。そして、複製画像表示制御部３５３は、図３に示すように、各端末装置２から取得した表示画像Ｄ０の複製画像Ｄ１を表示部３３に表示させる、いわゆるミラーリングを行う（ステップＳ４）。
After that, the duplicate image
この後、操作指示部３５４は、処理制御を終了する旨の操作がユーザにより行われたか否かを判定する（ステップＳ５）。操作指示部３５４は、上記操作が行われたと判定した場合（ステップＳ５：Ｙｅｓ）、処理を終了する。
After that, the
一方、操作指示部３５４は、上記操作が行われていないと判定した場合（ステップＳ５：Ｎｏ）、複数の複製画像Ｄ１のうちの操作画像Ｄ２に対する操作、例えば図３に示すように、カーソルＣを所定の位置に位置させた状態において、マウスのボタンの押下操作がユーザによって行われたことを検出すると（ステップＳ６）、操作位置Ｑ１（図３に黒い丸で示す）を特定する（ステップＳ７）。そして、操作指示部３５４は、操作指示位置演算処理を行う（ステップＳ８）。
On the other hand, when the
ここで、図５を参照して、操作指示位置演算処理について詳しく説明する。図５に示す操作指示位置演算処理において、操作指示部３５４は、図３に示すように、操作画像Ｄ２における第１の直交座標系での操作位置Ｑ１の座標を算出する（ステップＳ１１）。例えば、第１の直交座標系とは、矩形状の操作画像Ｄ２における左上の角を原点Ｐ０、原点Ｐ０から右方向に延びる操作画像Ｄ２の上辺と重なる軸をＸ軸（第１の軸）、原点Ｐ０から下方向に延びる操作画像Ｄ２の左辺と重なる軸をＹ軸（第２の軸）とする座標系である。
Here, the operation instruction position calculation process will be described in detail with reference to FIG. In the operation instruction position calculation process shown in FIG. 5, the
また、第１の直交座標系においては、Ｘ軸およびＹ軸の単位長さを、Ｘ軸およびＹ軸にそれぞれ重なる上辺および左辺の長さと同じ長さに設定する。この場合、操作画像Ｄ２の右上、左下、右下のそれぞれの角Ｐ１，Ｐ２，Ｐ３の座標は、（１，０），（０，１），（１，１）となる。 Further, in the first Cartesian coordinate system, the unit lengths of the X-axis and the Y-axis are set to the same lengths as the lengths of the upper side and the left side that overlap the X-axis and the Y-axis, respectively. In this case, the coordinates of the upper right, lower left, and lower right corners P1, P2, and P3 of the operation image D2 are (1,0), (0,1), and (1,1).
次に、操作指示部３５４は、操作位置Ｑ１の座標の情報と、各複製画像Ｄ１に対応する端末表示部２３の画面２３１の解像度の情報と、に基づいて、各端末装置２における操作指示位置Ｍ１の座標を算出する（ステップＳ１２）。
Next, the
例えば、図２に示すように、操作指示部３５４は、第２の直交座標系における操作指示位置Ｍ１の座標を算出する。第２の直交座標系とは、端末装置２の画面２３１の左上の角を原点Ｏ、原点Ｏから右方向に延びる表示画像Ｄ０の上辺と重なる軸をＸ軸（第１の軸）、原点Ｏから下方向に延びる表示画像Ｄ０の左辺と重なる軸をＹ軸（第２の軸）とした座標系である。
For example, as shown in FIG. 2, the
なお、第１の直交座標系は、操作画像Ｄ２における右上の角を原点、原点から左方向に延びる操作画像Ｄ２の上辺と重なる軸をＸ軸、原点から下方向に延びる操作画像Ｄ２の右辺と重なる軸をＹ軸、左上、右下、左下のそれぞれの角の座標を（１，０），（０，１），（１，１）とする座標系であってもよい。 In the first Cartesian coordinate system, the upper right corner of the operation image D2 is the origin, the axis overlapping the upper side of the operation image D2 extending to the left from the origin is the X axis, and the right side of the operation image D2 extending downward from the origin. It may be a coordinate system in which the overlapping axes are the Y-axis and the coordinates of the upper left, lower right, and lower left corners are (1,0), (0,1), and (1,1).
この場合、第２の直交座標系は、端末装置２の画面２３１の右上の角を原点、原点から左方向に延びる表示画像Ｄ０の上辺と重なる軸をＸ軸、原点Ｏから下方向に延びる表示画像Ｄ０の右辺と重なる軸をＹ軸とした座標系となる。
In this case, in the second Cartesian coordinate system, the upper right corner of the
第２の直交座標系における原点Ｏの位置は、第１の直交座標系の原点Ｐ０と同じ角の位置である。そして、操作指示部３５４は、画面２３１における横方向の解像度をＲＸ、縦方向の解像度をＲＹ、第１の直交座標系における操作位置Ｑ１の座標を（ＸＱ，ＹＱ）とした場合、第２の座標系における操作指示位置Ｍ１の座標を以下のように算出する。
操作指示位置Ｍ１のＸ座標＝ＸＱ×ＲＸ
操作指示位置Ｍ１のＹ座標＝ＹＱ×ＲＹ
The position of the origin O in the second Cartesian coordinate system is the position of the same angle as the origin P0 in the first Cartesian coordinate system. Then, the
X coordinate of operation instruction position M1 = X Q x R X
Y coordinate of operation instruction position M1 = Y Q x RY
なお、本明細書および図面において、各画面２３１の横方向および縦方向の解像度を、それぞれ同じ記号「ＲＸ」、「ＲＹ」で示しているが、各画面２３１の横方向および縦方向の解像度が互いに異なる場合がある。
In the present specification and drawings, the horizontal and vertical resolutions of the
その場合、上記式において、操作指示位置Ｍ１のＸ座標およびＹ座標は、各画面２３１の実際の横方向および縦方向の解像度の値を用いて算出される。
In that case, in the above equation, the X coordinate and the Y coordinate of the operation instruction position M1 are calculated using the actual horizontal and vertical resolution values of each
上記演算処理の後、図４に示すように、操作指示部３５４は、各端末装置２に対して、操作指示位置Ｍ１の座標の情報と操作画像Ｄ２に対して行われた操作の内容の情報とを含む操作指示情報を送信し、端末表示部２３の画面２３１の操作指示位置Ｍ１において、操作画像Ｄ２に対して行われた操作と同じ操作を行うことを指示する（ステップＳ９）。
After the above arithmetic processing, as shown in FIG. 4, the
この指示を受けた各端末装置２の端末処理部２５は、画面２３１の第２の直交座標系における操作指示位置Ｍ１を特定し、操作指示位置Ｍ１において、操作画像Ｄ２に対して行われた操作と同じ操作を行う。
Upon receiving this instruction, the
例えば、操作画像Ｄ２に対する操作が所定のハイパーリンクの選択操作の場合、各端末装置２が操作指示位置Ｍ１における操作を行うと、各端末装置２の表示画像Ｄ０が、ハイパーリンクにより指定された同一の参照先の画像に切り替わる。つまり、各端末装置２に対して、同じ操作が行われる。
For example, when the operation on the operation image D2 is a predetermined hyperlink selection operation, when each
その後、操作指示部３５４は、各端末装置２に対し、表示画像Ｄ０を処理制御装置３に送信するように指示し（ステップＳ３）、ステップＳ４以降の処理を行う。これにより、更新された各表示画像Ｄ０の複製画像Ｄ１が表示部３３に表示される。
After that, the
＜第１の実施の形態の作用効果＞
処理制御装置３は、複数の端末装置２の端末表示部２３に表示された互いに対応する内容の表示画像Ｄ０の複製画像Ｄ１を、表示部３３の１つの画面３３１に同時に表示させる。そして、処理制御装置３は、複数の複製画像Ｄ１のうちいずれか１つの操作画像Ｄ２に対する操作を受け付けると、受け付けた操作と同一の操作を行うことを複数の端末装置２に対して指示する。その後、処理制御装置３は、複数の端末装置２に対して指示をした結果、更新された表示画像Ｄ０を複数の端末装置２からそれぞれ取得して、複製画像Ｄ１として表示部３３に同時に表示させる。
<Action and effect of the first embodiment>
The
このため、ユーザは、表示部３３に同時に表示された複数の複製画像Ｄ１のうちいずれか１つに対する操作を行うだけの簡単な方法で、複数の端末装置２に対して同じ処理を行わせることができる。
Therefore, the user causes the plurality of
また、各端末表示部２３の画面２３１のサイズやアスペクト比が異なる場合、各端末表示部２３に互いに対応する内容の表示画像Ｄ０を表示させても、端末表示部２３に表示される情報の量が異なる場合がある。
Further, when the size and aspect ratio of the
そのような場合でも、ユーザは、表示部３３に同時に表示された複数の複製画像Ｄ１によって、各端末表示部２３の表示の差異を容易に確認することができる。このような複数の端末装置２に対する確認を１人のユーザで行うことができるため、人件費の増加を抑制したり、人員確保を容易に行うことができる。
Even in such a case, the user can easily confirm the difference in the display of each
また、処理制御装置３が、各端末装置２に対して対応する内容の表示画像Ｄ０を表示するように指示し、その結果、表示部３３に同時に表示された表示画像Ｄ０の複製画像Ｄ１において、各端末表示部２３の表示の差異を容易に確認することができるため、ユーザの確認作業の負荷を低減できる。
Further, the
〔第２の実施の形態〕
＜処理制御装置の構成＞
次に、本発明の第２の実施の形態について説明する。まず、第２の実施の形態に係る処理制御装置の構成について説明する。図６は、第２の実施の形態に係る処理制御装置の概略構成ブロック図である。図７Ａは、処理制御装置の第１の表示部に表示画像が表示されている状態を示す模式図である。図７Ｂは、処理制御装置の第２の表示部に第１の表示部の表示画像の複製画像が表示されている状態を示す模式図である。
[Second Embodiment]
<Configuration of processing control device>
Next, a second embodiment of the present invention will be described. First, the configuration of the processing control device according to the second embodiment will be described. FIG. 6 is a schematic block diagram of the processing control device according to the second embodiment. FIG. 7A is a schematic view showing a state in which a display image is displayed on the first display unit of the processing control device. FIG. 7B is a schematic view showing a state in which a duplicate image of the display image of the first display unit is displayed on the second display unit of the processing control device.
図６に示す処理制御装置４は、第１の実施の形態の処理制御装置３と同様のスマートフォンやタブレット端末、パーソナルコンピュータなどの装置である。処理制御装置４は、入力部４１と、第１の表示部４２と、第２の表示部４３と、記憶部４４と、複数のウェブブラウザ処理部４５と、制御部４６と、を備えている。なお、第２の実施の形態では、処理制御装置４が２つのウェブブラウザ処理部４５を備える構成を例示するが、３つ以上のウェブブラウザ処理部４５を備えていてもよい。
The processing control device 4 shown in FIG. 6 is a device such as a smartphone, a tablet terminal, or a personal computer similar to the
入力部４１および記憶部４４は、それぞれ第１の実施の形態の入力部３２および記憶部３４と同様の構成を有し、第１の表示部４２および第２の表示部４３は、第１の実施の形態の表示部３３と同様の構成を有している。
The
ウェブブラウザ処理部４５は、プロセッサが記憶部４４に記憶された互いに異なる複数のウェブブラウザソフトウェアを実行することによって実現される機能部である。ウェブブラウザ処理部４５は、ユーザによる入力部４１の操作や、制御部４６の指示に基づいて、図７Ａに示すように、第１の表示部４２の第１の画面４２１に、ウェブブラウザＷを表示させる。
The web
制御部４６は、上記プロセッサが記憶部４４に記憶された処理制御プログラムを実行することによって実現される機能部である。制御部４６は、表示サイズ検出部４６１と、表示画像指示部４６２と、複製画像表示制御部４６３と、操作指示部４６４と、を備えている。
The
表示サイズ検出部４６１は、各ウェブブラウザ処理部４５が第１の表示部４２の第１の画面４２１に表示させたウェブブラウザＷのサイズ（画像の横方向の画素数と縦方向の画素数）を検出する。
The display
表示画像指示部４６２は、各ウェブブラウザ処理部４５に対して、それぞれのウェブブラウザＷで同一のＵＲＬのウェブサイトの画像を第１の表示部４２に表示するように指示する。
The display
この指示に基づいて、各ウェブブラウザ処理部４５は、図７Ａに示すように、第１の画面４２１の各ウェブブラウザＷに互いに対応する内容の表示画像Ｄ１０を表示する。各ウェブブラウザＷのサイズが異なる場合には、互いに対応する内容の表示画像Ｄ１０でも、ウェブブラウザＷに表示される情報の量が異なる場合がある。
Based on this instruction, each web
複製画像表示制御部４６３は、図７Ｂに示すように、各ウェブブラウザＷにそれぞれ表示された互いに対応する内容の表示画像Ｄ１０の複製画像Ｄ１１を、１台の第２の表示部４３の第２の画面４３１に同時に表示させる。複製画像表示制御部４６３は、各複製画像Ｄ１１を、各表示画像Ｄ１０のアスペクト比と同じアスペクト比で表示させる。
As shown in FIG. 7B, the duplicate image
操作指示部４６４は、第２の表示部４３に表示された複数の複製画像Ｄ１１のうちいずれか１つの操作画像Ｄ１２に対する操作を検出すると、検出した操作と同じ操作を行うことを各ウェブブラウザ処理部４５に対して指示する。
When the
＜処理制御装置の動作＞
次に、処理制御装置の動作について説明する。図８は、１つの複製画像に対して行われた操作と同じ操作を行うことを複数の端末装置に対して指示をする処理制御のフローチャートである。なお、以下では、第１の実施の形態と同様の処理については、説明を簡略化したり省略したりする。また、操作画像Ｄ１２に対する操作が、例えば、操作画像Ｄ１２のボタンの押下操作、ハイパーリンクの選択操作である場合について説明する。
<Operation of processing control device>
Next, the operation of the processing control device will be described. FIG. 8 is a flow chart of process control for instructing a plurality of terminal devices to perform the same operation as that performed on one duplicate image. In the following, the description of the same processing as that of the first embodiment will be simplified or omitted. Further, a case where the operation on the operation image D12 is, for example, a button pressing operation of the operation image D12 and a hyperlink selection operation will be described.
まず、処理制御装置４の各ウェブブラウザ処理部４５は、ユーザによる入力部４１の操作に基づいて、第１の表示部４２の第１の画面４２１にウェブブラウザＷを表示させる。ユーザが処理制御プログラムを起動すると、表示サイズ検出部４６１は、図８に示すように、各ウェブブラウザＷのサイズを検出する（ステップＳ２１）。
First, each web
次に、表示画像指示部４６２は、各ウェブブラウザ処理部４５に対して、それぞれのウェブブラウザＷに互いに対応する内容の画像を表示するように指示する（ステップＳ２２）。例えば、表示画像指示部４６２は、特定のＵＲＬのウェブサイトの画像を各ウェブブラウザＷで表示するように指示する。
Next, the display
この指示によって、各ウェブブラウザＷには、図７Ａに示すように、互いに対応する内容の表示画像Ｄ１０が表示される。この後、複製画像表示制御部４６３は、各ウェブブラウザＷの表示画像Ｄ１０の複製画像Ｄ１１を第２の表示部４３の第２の画面４３１に表示させる、いわゆるミラーリングを行う（ステップＳ２３）。
By this instruction, as shown in FIG. 7A, each web browser W displays a display image D10 having contents corresponding to each other. After that, the duplicate image
この後、操作指示部４６４は、ユーザによる処理制御を終了する旨の操作が行われたか否かを判定し（ステップＳ５）、上記操作が行われたと判定した場合（ステップＳ５：Ｙｅｓ）、処理を終了する。
After that, the
一方、操作指示部４６４は、上記操作が行われていないと判定した場合（ステップＳ５：Ｎｏ）、複数の複製画像Ｄ１１のうちの操作画像Ｄ１２に対する操作がユーザによって行われたことを検出すると（ステップＳ６）、操作位置Ｑ１を特定する（ステップＳ７）。そして、操作指示部４６４は、図５に示す第１の実施の形態と同様の操作指示位置演算処理を行う（ステップＳ８）。
On the other hand, when the
この操作指示位置演算処理では、操作指示部４６４は、操作画像Ｄ１２における第１の直交座標系での操作位置Ｑ１の座標を算出する（ステップＳ１１）。第１の直交座標系は、第１の実施の形態で説明した第１の直交座標系と同様のものである。
In this operation instruction position calculation process, the
そして、操作指示部４６４は、操作位置Ｑ１の座標の情報と、各複製画像Ｄ１１に対応するウェブブラウザＷのサイズの情報と、に基づいて、各ウェブブラウザＷにおける操作指示位置Ｍ１の座標を算出する（ステップＳ１２）。
Then, the
例えば、操作指示部４６４は、図７Ａに示すような原点Ｏ、Ｘ軸およびＹ軸で構成される第２の直交座標系において、ウェブブラウザＷにおける横方向の画素数をＲＸ、縦方向の画素数をＲＹ、第１の直交座標系における操作位置Ｑ１の座標を（ＸＱ，ＹＱ）とした場合、第２の座標系における操作指示位置Ｍ１の座標を第１の実施の形態と同様の式で算出する。
For example, the
上記演算処理の後、図８に示すように、操作指示部４６４は、第１の表示部４２における各ウェブブラウザＷの表示画像Ｄ１０の操作指示位置Ｍ１において、操作画像Ｄ１２に対して行われた操作と同じ操作を行うことを、各ウェブブラウザ処理部４５に対して指示する（ステップＳ２４）。
After the above arithmetic processing, as shown in FIG. 8, the
この指示を受けたウェブブラウザ処理部４５は、ウェブブラウザＷにおける第２の直交座標系での操作指示位置Ｍ１を特定し、操作指示位置Ｍ１において、操作画像Ｄ１２に対して行われた操作と同じ操作を行う。
Upon receiving this instruction, the web
例えば、操作画像Ｄ１２に対する操作が所定のハイパーリンクの選択操作の場合、各ウェブブラウザ処理部４５が操作指示位置Ｍ１における操作を行うと、第１の表示部４２における各ウェブブラウザＷの表示画像Ｄ１０が、ハイパーリンクにより指定された同一の参照先の画像に切り替わる。つまり、各ウェブブラウザＷに対して、同じ操作が行われる。
For example, when the operation on the operation image D12 is a predetermined hyperlink selection operation, when each web
その後、複製画像表示制御部４６３は、各ウェブブラウザＷの更新された表示画像Ｄ１０の複製画像Ｄ１１を第２の表示部４３の第２の画面４３１に表示させ（ステップＳ２３）、ステップＳ５以降の処理を行う。これにより、更新された各表示画像Ｄ１０の複製画像Ｄ１１が表示部３３に表示される。
After that, the duplicate image
＜第２の実施の形態の作用効果＞
処理制御装置４は、第１の表示部４２の複数のウェブブラウザＷに表示された互いに対応する内容の表示画像Ｄ１０の複製画像Ｄ１１を、第２の表示部４３の１つの第２の画面４３１に同時に表示させる。そして、処理制御装置４は、複数の複製画像Ｄ１１のうちいずれか１つの操作画像Ｄ１２に対する操作を受け付けると、受け付けた操作と同一の操作を行うことを複数のウェブブラウザ処理部４５に対して指示する。その後、処理制御装置４は、複数のウェブブラウザ処理部４５に対して指示をした結果、更新された表示画像Ｄ１０を複製画像Ｄ１１として第２の表示部４３に同時に表示させる。
<Action and effect of the second embodiment>
The processing control device 4 displays the duplicate image D11 of the display image D10 having the contents corresponding to each other displayed on the plurality of web browsers W of the
このため、ユーザは、第２の表示部４３に同時に表示された複数の複製画像Ｄ１１のうちいずれか１つの操作画像Ｄ１２に対する操作を行うだけの簡単な方法で、複数のウェブブラウザ処理部４５に対して同じ処理を行わせることができる。ユーザは、操作画像Ｄ１２に対する操作の結果、各ウェブブラウザＷの表示がどのように変化したのかを容易に確認することができる。
Therefore, the user can simply perform an operation on the operation image D12 of any one of the plurality of duplicate images D11 displayed on the
［変形例］
本発明は、これまでに説明した実施の形態に示されたものに限られないことは言うまでも無く、その趣旨を逸脱しない範囲内で、種々の変形を加えることができる。
[Modification example]
Needless to say, the present invention is not limited to those shown in the embodiments described above, and various modifications can be made without departing from the spirit of the present invention.
〔変形例１〕
例えば、第１の実施の形態の処理制御システムにおいて、以下のような処理を行ってもよい。図９Ａは、本発明の変形例１に係る処理制御装置の表示部に端末表示部の表示画像の複製画像が表示されている状態を示す模式図である。図９Ｂは、端末表示部に表示画像が表示されている状態を示す模式図である。
[Modification 1]
For example, in the processing control system of the first embodiment, the following processing may be performed. FIG. 9A is a schematic view showing a state in which a duplicate image of the display image of the terminal display unit is displayed on the display unit of the processing control device according to the first modification of the present invention. FIG. 9B is a schematic view showing a state in which a display image is displayed on the terminal display unit.
操作指示部３５４は、図５に示した操作指示位置演算処理において、図９Ａに示すように、複製画像Ｄ１における右下の角を原点Ｐ０とした第１の直交座標系を用いてもよい。
In the operation instruction position calculation process shown in FIG. 5, the
この場合、第１の直交座標系は、原点Ｐ０から左方向に延びる複製画像Ｄ１の下辺と重なる軸をＸ軸（第１の軸）、原点Ｐ０から上方向に延びる複製画像Ｄ１の右辺と重なる軸をＹ軸（第２の軸）、左下、右上、左上のそれぞれの角Ｐ１，Ｐ２，Ｐ３の座標を（１，０），（０，１），（１，１）とする第１の直交座標系を用いる。 In this case, in the first Cartesian coordinate system, the axis overlapping the lower side of the duplicate image D1 extending to the left from the origin P0 overlaps with the X axis (first axis) and the right side of the duplicate image D1 extending upward from the origin P0. The first axis is the Y axis (second axis), and the coordinates of the lower left, upper right, and upper left corners P1, P2, and P3 are (1,0), (0,1), and (1,1). Use a Cartesian coordinate system.
なお、操作指示部３５４は、左下の角を原点、原点から右方向に延びる複製画像Ｄ１の下辺と重なる軸をＸ軸、原点から上方向に延びる複製画像Ｄ１の左辺と重なる軸をＹ軸、右下、左上、右上のそれぞれの角の座標を（１，０），（０，１），（１，１）とする座標系であってもよい。
In the
そして、操作指示部３５４は、当該第１の直交座標系において、図５に示したステップＳ１１，Ｓ１２の処理を行い、図９Ｂに示すような各端末装置２の画面２３１における操作指示位置Ｍ１の座標を算出する。
Then, the
そして、操作指示部３５４は、図４に示したステップＳ９の処理を行い、各端末装置２の端末表示部２３に表示された画面２３１における第２の直交座標系での操作指示位置Ｍ１において、操作画像Ｄ２に対して行われた操作と同じ操作を行うことを指示する。この場合、第２の直交座標系は、端末装置２の画面２３１の右下の角を原点、原点から左方向に延びる表示画像Ｄ０の下辺と重なる軸をＸ軸、原点Ｏから上方向に延びる表示画像Ｄ０の右辺と重なる軸をＹ軸とした座標系となる。
Then, the
このような構成にすれば、各端末装置２の縦の長さが異なる複数の表示画像Ｄ０において、表示画像Ｄ０の下部に表示されるボタンなどを押下する操作を行う場合に、各端末装置２の表示画像Ｄ０における操作指示位置Ｍ１のずれを抑制することができ、複数の端末装置２に対して同じ処理を行わせることができる。
With such a configuration, in a plurality of display images D0 having different vertical lengths of the
〔変形例２〕
第１の実施の形態の処理制御システムにおいて、以下のような処理を行ってもよい。図１０Ａは、第１の実施の形態の処理制御を行った場合における処理制御装置の表示部に複製画像が表示されている状態を示す模式図である。図１０Ｂは、第１の実施の形態の処理制御を行った場合における端末表示部に表示画像が表示されている状態を示す模式図である。
[Modification 2]
In the processing control system of the first embodiment, the following processing may be performed. FIG. 10A is a schematic view showing a state in which a duplicate image is displayed on the display unit of the processing control device when the processing control of the first embodiment is performed. FIG. 10B is a schematic view showing a state in which a display image is displayed on the terminal display unit when the processing control of the first embodiment is performed.
また、図１１Ａは、本発明の変形例２の処理制御を行った場合における処理制御装置の表示部に複製画像が表示されている状態を示す模式図である。図１１Ｂは、変形例２の処理制御を行った場合における端末表示部に表示画像が表示されている状態を示す模式図である。 Further, FIG. 11A is a schematic view showing a state in which a duplicate image is displayed on the display unit of the processing control device when the processing control of the second modification of the present invention is performed. FIG. 11B is a schematic diagram showing a state in which a display image is displayed on the terminal display unit when the processing control of the second modification is performed.
図１０Ａに示すように、横方向の長さに対する縦方向の長さの比率が大きい操作画像Ｄ２が操作された場合、第１の実施の形態のような操作指示位置演算処理を行うと、以下のような状況が発生するおそれがある。 As shown in FIG. 10A, when the operation image D2 in which the ratio of the length in the vertical direction to the length in the horizontal direction is large is operated, the operation instruction position calculation process as in the first embodiment is performed as follows. Such a situation may occur.
すなわち、図１０Ｂに示すように、操作画像Ｄ２に対応する表示画像Ｄ０の操作指示位置Ｍ１は、操作位置Ｑ１からずれないが、操作画像Ｄ２以外の複製画像Ｄ１に対応する表示画像Ｄ０の操作指示位置Ｍ１は、操作位置Ｑ１から大きくずれてしまい、各端末装置２に対して、同じ処理を行わせることができないおそれがある。そこで、このような状況の発生を抑制するために、操作指示部３５４は、以下のような操作指示位置演算処理を行ってもよい。
That is, as shown in FIG. 10B, the operation instruction position M1 of the display image D0 corresponding to the operation image D2 does not deviate from the operation position Q1, but the operation instruction of the display image D0 corresponding to the duplicate image D1 other than the operation image D2. The position M1 may deviate significantly from the operation position Q1 and the
操作指示部３５４は、図５に示した操作指示位置演算処理において、図１１Ａに示すような第１の直交座標系を用いてもよい。
The
この第１の直交座標系は、第１の実施の形態と同じ原点Ｐ０、Ｘ軸およびＹ軸を有するとともに、操作画像Ｄ２における右上の角Ｐ４の座標を（１，０）、Ｙ軸上（操作画像Ｄ２の左辺上）における原点Ｐ０から上辺と同じ長さＬだけ離れた点Ｐ５の座標を（０，１）とする直交座標系である。つまり、第１の直交座標系では、Ｘ軸とＹ軸とに同じ長さの単位で座標値が付与される。 This first Cartesian coordinate system has the same origin P0, X-axis, and Y-axis as in the first embodiment, and the coordinates of the upper right corner P4 in the operation image D2 are (1,0) on the Y-axis ( It is a Cartesian coordinate system in which the coordinates of the point P5 separated from the origin P0 on the left side of the operation image D2 by the same length L as the upper side are (0,1). That is, in the first Cartesian coordinate system, coordinate values are assigned to the X-axis and the Y-axis in units of the same length.
次に、操作指示部３５４は、当該第１の直交座標系に基づいて、図５に示したステップＳ１１，Ｓ１２の処理を行い、図１１Ｂに示すような各端末装置２における操作指示位置Ｍ１の座標を算出する。
Next, the
このとき、操作指示部３５４は、第１の実施の形態と同様に、端末表示部２３の画面２３１における横方向および縦方向の解像度をそれぞれＲＸおよびＲＹ、第１の基準座標系における操作位置Ｑ１の座標を（ＸＱ，ＹＱ）とした場合、第２の座標系における操作指示位置Ｍ１の座標を以下のように算出する。
操作指示位置Ｍ１のＸ座標＝ＸＱ×ＲＸ
操作指示位置Ｍ１のＹ座標＝ＹＱ×ＲＸ
At this time, the
X coordinate of operation instruction position M1 = X Q x R X
Y coordinate of operation instruction position M1 = Y Q x RX
つまり、操作指示部３５４は、操作指示位置Ｍ１のＹ座標を求めるときに、第１の実施の形態では、操作位置Ｑ１のＹ座標（ＹＱ）と画面２３１の縦方向の解像度（ＲＹ）とを乗じたのに対し、図１１Ｂに示す例では、操作位置Ｑ１のＹ座標（ＹＱ）と画面２３１の横方向の解像度（ＲＸ）とを乗じる。
That is, when the
そして、操作指示部３５４は、図４に示したステップＳ９の処理を行い、各端末装置２に対して、第１の実施の形態と同じ第２の直交座標系での操作指示位置Ｍ１において、操作画像Ｄ２に対して行われた操作と同じ操作を行うことを指示する。
Then, the
このような構成にすれば、図１１Ｂに示すように、横方向の長さに対する縦方向の長さの比率が大きい操作画像Ｄ２が操作された場合でも、各端末装置２の表示画像Ｄ０における操作指示位置Ｍ１のずれを小さくすることができ、複数の端末装置２に対して同じ処理を行わせることができる。
With such a configuration, as shown in FIG. 11B, even when the operation image D2 in which the ratio of the length in the vertical direction to the length in the horizontal direction is large is operated, the operation in the display image D0 of each
〔変形例３〕
また、第１の実施の形態の処理制御システムにおいて、操作画像に対する操作が、テキストボックスに対する入力操作の場合、操作指示部３５４は、以下のような処理制御を行ってもよい。
[Modification 3]
Further, in the processing control system of the first embodiment, when the operation on the operation image is an input operation on the text box, the
操作画像におけるテキストボックスに対する入力操作が行われる場面としては、例えば、所定のウェブサイトを利用するためのユーザ名、ＩＤ、パスワードを入力したり、所定のウェブサイトや単語の意味を検索したりする場面がある。図１２は、本発明の変形例３に係る処理制御のフローチャートである。図１３Ａは、処理制御装置の表示部にテキストボックを有する複製画像が表示されている状態を示す模式図である。図１３Ｂは、処理制御装置の表示部にテキスト入力ダイアログが表示されている状態を示す模式図である。 Examples of scenes in which an input operation is performed on a text box in an operation image include inputting a user name, ID, and password for using a predetermined website, or searching for the meaning of a predetermined website or word. There is a scene. FIG. 12 is a flowchart of processing control according to the third modification of the present invention. FIG. 13A is a schematic view showing a state in which a duplicate image having a text box is displayed on the display unit of the processing control device. FIG. 13B is a schematic view showing a state in which a text input dialog is displayed on the display unit of the processing control device.
処理制御装置３は、図１２に示すように、図４に示したステップＳ１〜Ｓ６の処理と同様の処理を行う。例えば、処理制御装置３は、各端末装置２にユーザ名およびパスワードを入力するための表示画像を表示するよう指示し、図１３Ａに示すような、各端末装置２から取得した表示画像の複製画像を表示部３３の画面３３１に表示させる。
As shown in FIG. 12, the
操作指示部３５４は、複数の複製画像Ｄ２１のうちの１つである操作画像Ｄ２２のテキストボックスＤ２２１内の領域に、カーソルＣを位置させた状態において、マウスのボタンの押下操作がユーザによって行われたことを検出すると、カーソルＣの位置を操作位置Ｑ１として特定した後（ステップＳ７）、図１３Ｂに示すようなテキスト入力ダイアログＤ３１を表示部３３に表示させる（ステップＳ３１）。
In the
テキスト入力ダイアログＤ３１の表示位置は、複製画像Ｄ２１と重ならないことが好ましいが、重なっていてもよい。そして、操作指示部３５４は、ユーザによる入力部３２の操作によってテキスト入力ダイアログＤ３１のテキストボックスＤ３１１にテキストが入力されて、入力完了ボタンＤ３１２が押下されると、当該テキストを認識し（ステップＳ３２）、第１の実施の形態と同様の操作指示位置演算処理を行う（ステップＳ８）。
The display position of the text input dialog D31 preferably does not overlap with the duplicate image D21, but may overlap. Then, the
操作指示部３５４は、操作指示位置演算処理を行った後、各端末装置２に対して、操作指示位置Ｍ１の座標の情報およびテキスト入力ダイアログＤ３１に入力されたテキストの情報を含む操作指示情報を送信し、端末表示部２３における操作指示位置において、テキスト入力ダイアログＤ３１に入力されたテキストを入力することを指示する（ステップＳ３３）。
After performing the operation instruction position calculation process, the
指示を受けた各端末装置２の端末処理部２５は、端末表示部２３の画面２３１の第２の直交座標系における操作指示位置を特定し、操作指示位置において、表示画像のテキストボックス（テキストボックスＤ２２１と同じ構成のテキストボックス）にテキストを入力する。
The
このような構成にすれば、ユーザは、表示部３３に同時に表示された複数の複製画像Ｄ２１のうちいずれか１つに対する操作を行うだけの簡単な方法で、複数の端末装置２に対して同じテキスト入力処理を行わせることができる。
With such a configuration, the user can simply perform an operation on any one of the plurality of duplicate images D21 displayed on the
〔その他の変形例〕
変形例１〜３の構成を、可能な範囲において第２の実施の形態の処理制御装置に適用してもよい。
[Other variants]
The configurations of Modifications 1 to 3 may be applied to the processing control device of the second embodiment to the extent possible.
第１の実施の形態において、端末表示部２３に表示される例えばウェブブラウザ（以下、「メイン画像」という）のサイズが端末表示部２３の画面２３１のサイズよりも小さい場合には、メイン画像の周りに背景画像などの別の画像が表示されることになる。
In the first embodiment, when the size of, for example, a web browser (hereinafter referred to as "main image") displayed on the
そして、ある端末装置２では、端末表示部２３に表示されるメイン画像のサイズと端末表示部２３の画面２３１のサイズとが同じだが（メイン画像が端末表示部２３の画面２３１全体に表示されるが）、他の端末装置では、端末表示部２３に表示されるメイン画像のサイズが端末表示部２３の画面２３１のサイズよりも小さいという状況が発生する可能性がある。
Then, in a certain
このような状況下でも、複数の端末装置２に対して同じ処理を行わせるために、表示サイズ検出部３５１が、端末装置２の端末表示部２３に表示されるメイン画像のサイズ（例えば、横方向の画素数と縦方向の画素数）を検出してもよい。
Even under such a situation, in order to cause a plurality of
この場合、表示画像指示部３５２が、各端末装置２に対して、互いに対応する内容の画像を表示するように指示した後に、表示サイズ検出部３５１が、各端末装置２に端末表示部２３に表示されるメイン画像のサイズに関する情報を処理制御装置３に送信するように要求する。そして、表示サイズ検出部３５１は、各端末装置２の端末処理部２５からメイン画像のサイズに関する情報を取得し、各メイン画像のサイズを検出する。
In this case, after the display
その後、操作指示部３５４は、上述の操作指示位置演算処理において、「端末表示部２３の画面２３１の解像度」を「端末表示部２３のメイン画像のサイズ」と読み替えた処理を行う。そして、操作指示部３５４は、各端末装置２に対して、操作指示位置Ｍ１の座標の情報と操作画像Ｄ２に対して行われた操作の内容の情報とを含む操作指示情報を送信し、端末表示部２３のメイン画像の操作指示位置Ｍ１において、操作画像Ｄ２に対して行われた操作と同じ操作を行うことを指示する。
After that, the
このような構成にすれば、処理制御装置３は、端末表示部２３に表示されるメイン画像のサイズが端末表示部２３の画面２３１のサイズよりも小さい場合でも、複数の端末装置２に対して同じ処理を行わせることができる。
With such a configuration, the
また、第１の直交座標系における原点Ｐ０の位置をユーザの操作によって設定できるようにしてもよい。また、操作画像Ｄ２，Ｄ１２における操作位置Ｑ１の位置に応じて、操作指示部３５４，４６４が原点Ｐ０を設定するようにしてもよい。さらに、原点Ｐ０の位置は、操作画像Ｄ２，Ｄ１２の中心など、操作画像Ｄ２，Ｄ１２の中のいずれの位置に設定されていてもよいし、設定できるようにしてもよい。
Further, the position of the origin P0 in the first Cartesian coordinate system may be set by the user's operation. Further, the
例えば、操作指示部３５４，４６４は、周知の画像処理によって操作画像Ｄ２，Ｄ１２の外縁を特定し、操作位置Ｑ１が操作画像Ｄ２，Ｄ１２における左上の領域の場合、原点Ｐ０を左上の角に設定し、操作位置Ｑ１が操作画像Ｄ２，Ｄ１２における右下の領域の場合、原点Ｐ０を右下の角に設定してもよい。
For example, the
また、第２の実施の形態において、ウェブブラウザＷの表示画像Ｄ１０を第１の表示部４２に表示させ、複製画像Ｄ１１を第２の表示部４３に表示させたが、処理制御装置４に第２の表示部４３を設けずに、ウェブブラウザＷの表示画像Ｄ１０および複製画像Ｄ１１を第１の表示部４２に表示させてもよい。
Further, in the second embodiment, the display image D10 of the web browser W is displayed on the
処理制御装置３，４の入力部３２，４１がタッチパネルの場合には、処理制御装置３，４は、操作画像Ｄ２，Ｄ１２に対するタップ操作やスワイプ操作を検出し、検出したタップ操作やスワイプ操作を端末装置２やウェブブラウザ処理部４５に指示してもよい。
When the
以上、本発明に係る実施の形態について図面を参照して詳述してきたが、上述した各装置の機能は、コンピュータプログラムにより実現され得る。 Although the embodiments according to the present invention have been described in detail with reference to the drawings, the functions of the above-described devices can be realized by a computer program.
上述した各装置の機能をプログラムにより実現するコンピュータは、キーボードやマウス、タッチパッドなどの入力装置、ディスプレイやスピーカなどの出力装置、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、ハードディスク装置やＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）などの記憶装置、ＤＶＤ−ＲＯＭ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｋ Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）やＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）メモリなどの記録媒体から情報を読み取る読取装置、ネットワークを介して通信を行うネットワークカードなどを備え、各部はバスにより接続される。 Computers that programmatically realize the functions of each of the above devices include input devices such as keyboards, mice, and touch pads, output devices such as displays and speakers, CPUs (Central Processing Units), ROMs (Read Only Memory), and RAMs (Random). Access Memory), hard disk device, storage device such as SSD (Solid State Drive), reading device such as DVD-ROM (Digital Versaille Disk Read Only Memory), USB (Universal Serial Bus) memory, and other recording media. It is equipped with a network card that communicates via a bus, and each part is connected by a bus.
そして、読取装置は、上記各装置の機能を実現するためのプログラムを記録した記録媒体からそのプログラムを読み取り、記憶装置に記憶させる。あるいは、ネットワークカードが、ネットワークに接続されたサーバ装置と通信を行い、サーバ装置からダウンロードした上記各装置の機能を実現するためのプログラムを記憶装置に記憶させる。 Then, the reading device reads the program from the recording medium on which the program for realizing the function of each of the above devices is recorded, and stores the program in the storage device. Alternatively, the network card communicates with the server device connected to the network, and stores the program downloaded from the server device for realizing the function of each device in the storage device.
そして、ＣＰＵが、記憶装置に記憶されたプログラムをＲＡＭにコピーし、そのプログラムに含まれる命令をＲＡＭから順次読み出して実行することにより、上記各装置の機能が実現される。 Then, the CPU copies the program stored in the storage device to the RAM, sequentially reads the instructions included in the program from the RAM, and executes the program, whereby the functions of the devices are realized.
本発明は、処理制御プログラム、処理制御方法、および、処理制御装置に適用できる。 The present invention can be applied to a processing control program, a processing control method, and a processing control device.
１ 処理制御システム
２ 端末装置
３，４ 処理制御装置
２１ 端末通信部
２２ 端末入力部
２３ 端末表示部
２４ 端末記憶部
２５ 端末処理部
３１ 通信部
３２，４１ 入力部
３３ 表示部
３４ 記憶部
３５，４６ 制御部
４２ 第１の表示部
４３ 第２の表示部
４４ 記憶部
４５ ウェブブラウザ処理部
２３１，３３１ 画面
３５１，４６１ 表示サイズ検出部
３５２，４６２ 表示画像指示部
３５３，４６３ 複製画像表示制御部
３５４，４６４ 操作指示部
４２１ 第１の画面
４３１ 第２の画面
Ｃ カーソル
Ｄ０，Ｄ１０ 表示画像
Ｄ１，Ｄ１１，Ｄ２１ 複製画像
Ｄ２，Ｄ１２，Ｄ２２ 操作画像
Ｄ２２１，Ｄ３１１ テキストボックス
Ｄ３１ テキスト入力ダイアログ
Ｄ３１２ 入力完了ボタン
Ｍ１ 操作指示位置
Ｏ，Ｐ０ 原点
Ｐ１，Ｐ２，Ｐ３，Ｐ４ 角
Ｐ５ 点
Ｑ１ 操作位置
Ｗ ウェブブラウザ
1
Claims (9)
複数のコンピュータソフトウェアによりそれぞれ生成された互いに対応する内容の各表示画像の複製画像を、１つの画面に同時に表示させる複製画像表示制御手順と、
前記１つの画面に表示された複数の複製画像のうちいずれか１つの複製画像に対する操作を受け付け、受け付けた操作を前記各表示画像において実行することを前記複数のコンピュータソフトウェアに対して指示する操作指示手順と、
前記複数のコンピュータソフトウェアに対して指示をした結果、更新された前記各表示画像の複製画像を、前記１つの画面に同時に表示させる更新画像表示制御手順と、
を実行させる処理制御プログラム。 On the computer
A duplicate image display control procedure for simultaneously displaying duplicate images of each display image with contents corresponding to each other generated by a plurality of computer software on one screen, and
An operation instruction that accepts an operation on any one of the plurality of duplicated images displayed on the one screen and instructs the plurality of computer software to execute the accepted operation on each of the displayed images. Procedure and
An updated image display control procedure for simultaneously displaying a duplicate image of each of the displayed images updated as a result of instructing the plurality of computer software on the one screen.
A processing control program that executes.
請求項１に記載の処理制御プログラム。 The plurality of computer software is web browser software executed on a plurality of terminal devices, respectively.
The processing control program according to claim 1.
請求項１に記載の処理制御プログラム。 The plurality of computer software is different plurality of web browser software executed by the computer.
The processing control program according to claim 1.
前記操作指示手順では、前記いずれか１つの複製画像において前記操作がなされた前記直交座標系における位置の座標と前記各表示画像の上辺の長さとに応じて、前記各表示画像の前記直交座標系において前記操作を実行する位置の座標が決定される、
請求項１または２に記載の処理制御プログラム。 A first image in which any one of the duplicated images and each of the displayed images is a rectangular image, the origin is a predetermined position in the one of the duplicated images and each of the displayed images, and the image extends in the horizontal direction. It consists of an axis and a second axis that is perpendicular to the first axis and has a positive downward direction, and coordinate values are given to the first axis and the second axis in units of the same length. When a Cartesian coordinate system is used
In the operation instruction procedure, the orthogonal coordinate system of each displayed image is determined according to the coordinates of the position in the orthogonal coordinate system in which the operation is performed in the duplicated image and the length of the upper side of each displayed image. The coordinates of the position where the operation is executed are determined in
The processing control program according to claim 1 or 2.
請求項４に記載の処理制御プログラム。 The origin is one of the upper corners of each of the duplicate image and each display image.
The processing control program according to claim 4.
請求項４に記載の処理制御プログラム。 The processing control program according to claim 4, wherein one corner of the lower part of each of the duplicate image and each display image is the origin.
請求項１から５のいずれか一項に記載の処理制御プログラム。 In the operation instruction procedure, any one of a button pressing operation displayed on the duplicate image, a hyperlink selection operation displayed on the duplicate image, and a text input operation in the text box displayed on the duplicate image is performed. Detect one operation,
The processing control program according to any one of claims 1 to 5.
複数のコンピュータソフトウェアによりそれぞれ生成された互いに対応する内容の各表示画像の複製画像を、１つの画面に同時に表示させる複製画像表示制御手順と、
前記１つの画面に表示された複数の複製画像のうちいずれか１つの複製画像に対する操作を受け付け、受け付けた操作を前記各表示画像において実行することを前記複数のコンピュータソフトウェアに対して指示する操作指示手順と、
前記複数のコンピュータソフトウェアに対して指示をした結果、更新された前記各表示画像の複製画像を、前記１つの画面に同時に表示させる更新画像表示制御手順と、
を実行する処理制御方法。 The computer
A duplicate image display control procedure for simultaneously displaying duplicate images of each display image with contents corresponding to each other generated by a plurality of computer software on one screen, and
An operation instruction that accepts an operation on any one of the plurality of duplicated images displayed on the one screen and instructs the plurality of computer software to execute the accepted operation on each of the displayed images. Procedure and
An updated image display control procedure for simultaneously displaying a duplicate image of each of the displayed images updated as a result of instructing the plurality of computer software on the one screen.
Processing control method to execute.
前記１つの画面に表示された複数の複製画像のうちいずれか１つの複製画像に対する操作を受け付け、受け付けた操作を前記各表示画像において実行することを前記複数のコンピュータソフトウェアに対して指示する操作指示部と、を備え、
前記複製画像表示制御部は、前記複数のコンピュータソフトウェアに対して指示をした結果、更新された前記各表示画像の複製画像を、前記１つの画面に同時に表示させる、
を備える処理制御装置。 A duplicate image display control unit that simultaneously displays duplicate images of each display image with contents corresponding to each other generated by a plurality of computer software on one screen.
An operation instruction that accepts an operation on any one of the plurality of duplicated images displayed on the one screen and instructs the plurality of computer software to execute the accepted operation on each of the displayed images. With a department,
As a result of instructing the plurality of computer software, the duplicate image display control unit simultaneously displays the updated duplicate image of each display image on the one screen.
A processing control device comprising.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2020035144A JP6818282B1 (en) | 2020-03-02 | 2020-03-02 | Processing control program, processing control method, and processing control device |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2020035144A JP6818282B1 (en) | 2020-03-02 | 2020-03-02 | Processing control program, processing control method, and processing control device |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP6818282B1 JP6818282B1 (en) | 2021-01-20 |
| JP2021140256A true JP2021140256A (en) | 2021-09-16 |
Family
ID=74164701
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2020035144A Active JP6818282B1 (en) | 2020-03-02 | 2020-03-02 | Processing control program, processing control method, and processing control device |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6818282B1 (en) |
Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2003030121A (en) * | 2001-07-17 | 2003-01-31 | Hitachi Commun Syst Inc | Web sharing system and communication terminal of web sharing system |
| JP2014529153A (en) * | 2011-09-27 | 2014-10-30 | アマゾン テクノロジーズ インコーポレーテッド | Historical browsing session management |
-
2020
- 2020-03-02 JP JP2020035144A patent/JP6818282B1/en active Active
Patent Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2003030121A (en) * | 2001-07-17 | 2003-01-31 | Hitachi Commun Syst Inc | Web sharing system and communication terminal of web sharing system |
| JP2014529153A (en) * | 2011-09-27 | 2014-10-30 | アマゾン テクノロジーズ インコーポレーテッド | Historical browsing session management |
Also Published As
| Publication number | Publication date |
|---|---|
| JP6818282B1 (en) | 2021-01-20 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US7369099B2 (en) | Multi-display control system and image display apparatus | |
| CN109683841B (en) | Control display method and computing device in multi-display environment | |
| JPH11249782A (en) | Terminal equipment having plural windows, window display method and recording medium recording window display control program | |
| JP6786272B2 (en) | Image processing device, its control method, and computer program | |
| WO2019188532A1 (en) | Display system and program | |
| US9870142B2 (en) | Displaying device which can receive pinch out operation | |
| JP2005208991A (en) | Position information output device and signal processing method | |
| JP6818282B1 (en) | Processing control program, processing control method, and processing control device | |
| JPH1124841A (en) | Information processing device and method, and storage medium | |
| JP6028375B2 (en) | Touch panel device and program. | |
| JP5115457B2 (en) | Cursor movement control method, apparatus, and program | |
| CN113064567A (en) | Multi-screen-based control method and device | |
| JP5786542B2 (en) | Formula input device and program | |
| CN112306428A (en) | Information processing apparatus, information processing method, and computer-readable medium | |
| JPH0293920A (en) | Input device | |
| JP7130988B2 (en) | Information processing device and program | |
| JP3045905B2 (en) | Character drawing device | |
| JP2020064506A (en) | Display device, image processing device, and program | |
| JP2013229002A (en) | Information terminal, input object display method, and input object display program | |
| JP2011008633A (en) | Information processor and electronic file operation program | |
| JP5706206B2 (en) | POS register and POS register processing program | |
| JP6954045B2 (en) | Image processing system, user interface provision method, and computer program | |
| JP2013187589A (en) | Image display device, display system, and portable terminal | |
| JP7184619B2 (en) | Information processing device, control program, and control method | |
| JPH07146754A (en) | Remote information processor |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200304 |
|
| A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20200304 |
|
| A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20200325 |
|
| RD01 | Notification of change of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7426 Effective date: 20200415 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20200416 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200630 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20201201 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20201216 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6818282 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |