JP6625178B2 - Multi-display, control method and program - Google Patents

Multi-display, control method and program Download PDF

Info

Publication number
JP6625178B2
JP6625178B2 JP2018160839A JP2018160839A JP6625178B2 JP 6625178 B2 JP6625178 B2 JP 6625178B2 JP 2018160839 A JP2018160839 A JP 2018160839A JP 2018160839 A JP2018160839 A JP 2018160839A JP 6625178 B2 JP6625178 B2 JP 6625178B2
Authority
JP
Japan
Prior art keywords
display
touch
display device
effective
coordinate
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018160839A
Other languages
Japanese (ja)
Other versions
JP2018195346A (en
Inventor
大樹 芳野
大樹 芳野
岩崎 弘治
弘治 岩崎
守 高谷
守 高谷
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Priority to JP2018160839A priority Critical patent/JP6625178B2/en
Publication of JP2018195346A publication Critical patent/JP2018195346A/en
Application granted granted Critical
Publication of JP6625178B2 publication Critical patent/JP6625178B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Digital Computer Display Output (AREA)
  • Controls And Circuits For Display Device (AREA)

Description

本発明は、マルチディスプレイ等に関する。   The present invention relates to a multi-display and the like.

静電容量タッチパネル等の近接物体の位置を検出可能な入力装置を備えたディスプレイ装置は、教室やオフィスの電子黒板/IWB(Interactive Whiteboard)として使用されているばかりでなく、デジタルサイネージや、駅や空港での案内板、地域共同体でのコミュニケーションツールとして利用されつつある。1台のディスプレイで表示できる情報には限りがあるため、近年は複数のディスプレイを1枚のディスプレイに見立てたマルチディスプレイ構成で用いられる場合がある。   Display devices equipped with an input device capable of detecting the position of a nearby object, such as a capacitive touch panel, are used not only as electronic blackboards / interactive whiteboards (IWBs) in classrooms and offices, but also in digital signage, stations and the like. They are being used as information boards at airports and as communication tools in local communities. Since information that can be displayed on one display is limited, in recent years, a plurality of displays may be used as a single display in a multi-display configuration.

例えば、複数の表示装置と、これらを制御しマルチディスプレイ構成で1枚のディスプレイを形成させるホストコンピュータ(以降ホストと記載する)と、を有する表示システムを考える。   For example, consider a display system that includes a plurality of display devices and a host computer (hereinafter, referred to as a host) that controls them and forms one display in a multi-display configuration.

図11は、従来のマルチディスプレイの表示システムを示す説明図である。
この表示システムは、表示装置100a,100bと、これらを表示制御するホスト200とを備える構成である。
FIG. 11 is an explanatory diagram showing a conventional multi-display system.
This display system is configured to include display devices 100a and 100b and a host 200 that controls display of these devices.

表示装置100a,100bは、液晶パネルなどからなる表示部の上面にタッチセンサを備えたタッチパネルを有する構成である。表示装置100a,100bは横方向に隣接して配置されている。表示部には、表示を可能とする有効表示領域が存在する。図11に示すように、同じ表示装置を2台横並びにして一画面とした場合、1つのディスプレイの解像度がFull−HD(1920×1080)であると、表示装置100aの有効表示領域は(0,0)〜(1919,1079)までの座標範囲を持ち、表示装置100bの有効表示領域は(1920,0)〜(3839,1079)までの座標範囲を持つ。そして、Windows(登録商標)8、Android(登録商標)、iOS(登録商標)などのタッチに対応したOSを使用する際、有効表示領域の外側からのタッチ動作(スワイプ等)を認識する必要があるため、タッチセンサの有効領域は、液晶パネルの有効表示領域内だけでなく有効表示領域外にも存在している。   Each of the display devices 100a and 100b has a configuration in which a touch panel provided with a touch sensor is provided on an upper surface of a display unit such as a liquid crystal panel. The display devices 100a and 100b are arranged adjacent to each other in the horizontal direction. The display unit has an effective display area that enables display. As shown in FIG. 11, when two identical display devices are arranged side by side to form one screen, if the resolution of one display is Full-HD (1920 × 1080), the effective display area of the display device 100a is (0 , 0) to (1919, 1079), and the effective display area of the display device 100b has a coordinate range from (1920, 0) to (3839, 1079). When using an OS that supports touch, such as Windows (registered trademark) 8, Android (registered trademark), and iOS (registered trademark), it is necessary to recognize a touch operation (swipe or the like) from outside the effective display area. Therefore, the effective area of the touch sensor exists not only within the effective display area of the liquid crystal panel but also outside the effective display area.

ホスト200は、表示装置100a,100bの画面にユーザがタッチしたタッチ認識信号を受信して、それに基づいて映像信号を生成して表示装置100a,100bを合せて一画面とする画像を表示させる。   The host 200 receives a touch recognition signal of the user touching the screens of the display devices 100a and 100b, generates a video signal based on the signal, and causes the display devices 100a and 100b to display an image as one screen.

シングルディスプレイ構成時では、表示面の上下左右端のタッチセンサが表示装置の有効表示領域外に配置されている場合においても、ホスト200に返すタッチ認識結果の座標値は一つの画面表示に対する入力データとしてクリップされるため、各種操作に影響を及ぼさない。つまり、タッチ操作に応じた画像表示の場合に、タッチ操作の座標は、有効表示領域のエッジ境界の座標値を越えることはない。   In the single display configuration, even when the touch sensors at the upper, lower, left, and right ends of the display surface are arranged outside the effective display area of the display device, the coordinate values of the touch recognition result returned to the host 200 are input data for one screen display. It does not affect various operations. That is, in the case of displaying an image according to a touch operation, the coordinates of the touch operation do not exceed the coordinate values of the edge boundaries of the effective display area.

一方、これらの表示装置を複数並べたマルチディスプレイ構成の場合、ホストは、これらを合せて一つの画面表示に対する入力座標として認識する。図11のように2つの表示装置100a,100bを1枚の画面と見立て(解像度:3840×1080)表示する場合、表示装置100aの右端をタッチすると、有効表示領域外であった場合も、タッチセンサの有効領域は存在するため、有効座標として出力してしまう。この時のX座標は1920以上となるため、ホスト200側からは、表示装置100a(X=0〜1919)ではなく、表示装置100b(X=1920〜3839)にタッチされたと判断してしまうため、結果としてタッチ結果を表示装置100bに反映してしまい問題となっていた。   On the other hand, in the case of a multi-display configuration in which a plurality of these display devices are arranged, the host recognizes them as input coordinates for one screen display. As shown in FIG. 11, when the two display devices 100a and 100b are displayed as one screen (resolution: 3840 × 1080), if the right end of the display device 100a is touched, the touch is performed even if the display device is outside the effective display area. Since the effective area of the sensor exists, it is output as effective coordinates. Since the X coordinate at this time is 1920 or more, the host 200 determines that the display device 100b (X = 1920 to 3839) is touched instead of the display device 100a (X = 0 to 1919). As a result, the touch result is reflected on the display device 100b, which is a problem.

つまり、図11に示すように、表示装置100a,100bの有効表示領域外のタッチセンサ領域は、隣接する表示装置の座標と重複してしまう。すなわち、表示装置100aの右端は、X座標が1919を越えて存在する。また表示装置100bの左端は、1920未満の座標が存在する。従って、例えば、図に示すように、ユーザが表示装置100aに対してスワイプ操作で右端まで画像aを表示させた場合、表示装置100bの左端にも重複する座標が存在するため、重複画像aが表示されてしまう。ユーザが表示装置100bに対してスワイプ操作で左端から画像bを表示させた場合、表示装置100aの右端にも重複する座標が存在するため、重複画像bが表示されてしまう。   That is, as shown in FIG. 11, the touch sensor area outside the effective display area of the display devices 100a and 100b overlaps the coordinates of the adjacent display device. That is, the right end of the display device 100a has an X coordinate exceeding 1919. The left end of the display device 100b has coordinates smaller than 1920. Therefore, for example, as shown in the drawing, when the user causes the display device 100a to display the image a to the right end by swiping, the overlapping image a is present because the left end of the display device 100b also has overlapping coordinates. Will be displayed. When the user causes the display device 100b to display the image b from the left end by a swipe operation, the duplicated image b is displayed because the right end of the display device 100a also has overlapping coordinates.

特許文献1には、マルチディスプレイシステムに複数のタッチパネルを取り付けた場合にも統合的に操作できるようにする例が開示されている。ここではマルチディスプレイに備えられたタッチパネルの座標をOSが認識可能な仮想座標に割り付けることが提案されている。   Patent Literature 1 discloses an example in which a multi-display system can be operated in an integrated manner even when a plurality of touch panels are attached. Here, it has been proposed to assign the coordinates of a touch panel provided on a multi-display to virtual coordinates recognizable by an OS.

特開平11−161426号公報JP-A-11-161426

しかしながら、特許文献1にて示されている内容では、上述のようにタッチパネルを用いた場合に起こる重複座標の出力による重複画像表示に対処ができない。   However, the content disclosed in Patent Document 1 cannot cope with the display of the overlapping image due to the output of the overlapping coordinates which occurs when the touch panel is used as described above.

本発明は、斯かる実情に鑑み、マルチディスプレイ構成で一画面とする場合、隣接するディスプレイの境界付近にタッチ操作されても、他方の隣り合うディスプレイにタッチ結果が反映されないようにして、シングルディスプレイ構成時と同様の操作体系を実現できるマルチディスプレイ等を提供することを目的とするものである。   The present invention has been made in view of the above-described circumstances. It is an object of the present invention to provide a multi-display or the like that can realize the same operation system as in the configuration.

本発明のマルチディスプレイは、
情報を有効表示領域に表示する表示パネルを備えた表示装置を複数配置したマルチディスプレイであって、
前記表示パネルの有効表示領域よりも広い領域へのタッチを検出可能に設けられたタッチセンサと、
隣接する表示装置間に位置する有効表示領域外へのタッチが検出された場合、当該タッチを検出した表示装置のタッチとして出力する制御部と、
を備えることを特徴とする。
The multi-display of the present invention
A multi-display in which a plurality of display devices having a display panel that displays information in an effective display area are arranged,
A touch sensor provided so as to be able to detect a touch to an area wider than the effective display area of the display panel,
When a touch outside the effective display area located between the adjacent display devices is detected, a control unit that outputs the touch as a touch of the detected display device,
It is characterized by having.

本発明の制御方法は、
情報を有効領域に表示する表示パネルを備えた表示装置を複数配置したマルチディスプレイにおける表示制御方法であって、
前記表示パネルの有効表示領域よりも広い領域へのタッチを検出するタッチ検出ステップと、
隣接する表示装置間に位置する有効表示領域外へのタッチが検出された場合、当該タッチを検出した表示装置のタッチとして出力する制御ステップと、
を含むことを特徴とする。
The control method of the present invention includes:
A display control method in a multi-display in which a plurality of display devices including a display panel that displays information in an effective area is arranged,
A touch detection step of detecting a touch on an area larger than the effective display area of the display panel,
When a touch outside the effective display area located between adjacent display devices is detected, a control step of outputting the touch as a touch of the detected display device,
It is characterized by including.

本発明のプログラムは、コンピュータに、前記表示制御方法のステップを実行させるためのプログラムである。   A program according to the present invention is a program for causing a computer to execute the steps of the display control method.

本発明によれば、入力装置を備えた表示装置を複数並べたマルチディスプレイ構成において、複数の表示装置を1画面と見立て、表示装置間の有効表示領域外のタッチ座標を、有効表示領域の境界位置にクリップすることにより、隣接する表示装置にタッチ結果が反映されないようにすることが可能となり、マルチディスプレイ構成時でもシングルディスプレイ時と同様の操作体系を提供できる。   According to the present invention, in a multi-display configuration in which a plurality of display devices each including an input device are arranged, the plurality of display devices are regarded as one screen, and touch coordinates outside the effective display region between the display devices are defined as boundaries of the effective display region. By clipping to the position, it is possible to prevent the touch result from being reflected on an adjacent display device, and it is possible to provide the same operation system as in a single display even in a multi-display configuration.

本発明の第1の実施形態におけるマルチディスプレイの表示システムを示す説明図である。FIG. 1 is an explanatory diagram illustrating a display system of a multi-display according to a first embodiment of the present invention. 第1の実施形態における表示システムを示すブロック図である。FIG. 2 is a block diagram illustrating a display system according to the first embodiment. 第1の実施形態におけるクリップ処理の概念図である。It is a conceptual diagram of the clip processing in 1st Embodiment. 第1の実施形態における座標を求める処理の一例を示すフローチャートである。5 is a flowchart illustrating an example of a process for obtaining coordinates according to the first embodiment. 4つの表示装置を配置した場合の最大座標とXY方向の配置数を示す説明図である。FIG. 9 is an explanatory diagram showing the maximum coordinates and the number of arrangements in the XY directions when four display devices are arranged. 本発明の第2の実施形態におけるマルチディスプレイの表示システムを示す説明図である。It is an explanatory view showing a display system of a multi-display in a second embodiment of the present invention. 第2の実施形態における表示システムを示すブロック図である。It is a block diagram showing a display system in a 2nd embodiment. 第2の実施形態におけるクリップ処理の概念図である。It is a conceptual diagram of the clip processing in 2nd Embodiment. 第2の実施形態おけるクリップ処理を示すフローチャートである。It is a flow chart which shows clip processing in a 2nd embodiment. 第2の実施形態におけるデバイスIDとディスプレイの構成情報の例を示す説明図である。FIG. 14 is an explanatory diagram illustrating an example of a device ID and display configuration information according to the second embodiment. 従来のマルチディスプレイの表示システムを示す説明図である。It is an explanatory view showing a display system of a conventional multi-display.

以下、本発明の実施の形態を添付図面を参照して説明する。   Hereinafter, embodiments of the present invention will be described with reference to the accompanying drawings.

<第1の実施形態>
図1は、本発明の第1の実施形態におけるマルチディスプレイの表示システムを示す説明図である。図2は、第1の実施形態における表示システムを示すブロック図である。
<First embodiment>
FIG. 1 is an explanatory diagram illustrating a display system of a multi-display according to the first embodiment of the present invention. FIG. 2 is a block diagram illustrating the display system according to the first embodiment.

図1の表示システムは、図11の従来の表示システムと同様に、表示装置10(10a,10b)と、これらを表示制御するホスト30とを備える構成である。この例では、表示装置を2つ配置しているが、これに限るわけではない。図では、各表示装置の構成部の符号にa,bを付して区別するが、機能は同じものである。   The display system of FIG. 1 has a configuration including a display device 10 (10a, 10b) and a host 30 that controls the display of the display devices 10 (10a, 10b), similarly to the conventional display system of FIG. In this example, two display devices are arranged, but the present invention is not limited to this. In the figure, a and b are attached to the reference numerals of the components of each display device to distinguish them, but the functions are the same.

表示装置(ディスプレイ)10(10a,10b)は、図に示した従来の表示装置と同じものであり、液晶パネルなどからなる表示部の上面にタッチセンサを備えたタッチパネルを有する構成で、サイズと解像度(1920×1080)が同じである。表示装置10aは、表示装置10bと隣接するエッジ(右端)が、表示部12aの有効表示領域より外側の座標をホスト30にそのまま出力しない構成になっており、表示装置10bも同様に、表示装置10aと隣接するエッジ(左端)が、表示部12bの有効表示領域より外側の座標をホスト30にそのまま出力しない構成としている。これにより、互いに隣接するエッジをタッチされた場合でも、ホスト30が他方の隣り合うディスプレイにタッチ結果を反映表示させないようにすることができる(詳しくは後述する)。   The display device (display) 10 (10a, 10b) is the same as the conventional display device shown in the figure, and has a configuration having a touch panel provided with a touch sensor on the upper surface of a display unit such as a liquid crystal panel. The resolution (1920 × 1080) is the same. The display device 10a has a configuration in which an edge (right end) adjacent to the display device 10b does not output coordinates outside the effective display area of the display unit 12a to the host 30 as it is. The edge (left end) adjacent to 10a does not directly output coordinates outside the effective display area of the display unit 12b to the host 30. Thus, even when edges adjacent to each other are touched, it is possible to prevent the host 30 from reflecting and displaying the touch result on the other adjacent display (details will be described later).

表示装置10(10a,10b)の表示部12(12a,12b)は、情報を画面に表示することによりユーザに与える為のもので、例えば液晶表示、EL表示等の平面形状からなる。   The display unit 12 (12a, 12b) of the display device 10 (10a, 10b) is for giving information to a user by displaying it on a screen, and has a planar shape such as a liquid crystal display or an EL display.

表示部12(12a,12b)の上面に設けられたタッチセンサ11(11a,11b)は、静電容量センサであり、面状に複数本のマトリックス状に配置された線から、近接する物体との間との静電容量を検出することにより物体の位置を検出可能なセンサである。図1に示すように、表示装置10aの有効表示領域は(0,0)〜(1919,1079)までの座標範囲を持ち、表示装置10bの有効表示領域は(1920,0)〜(3839,1079)までの座標範囲を持つ。   The touch sensor 11 (11a, 11b) provided on the upper surface of the display unit 12 (12a, 12b) is a capacitance sensor, and a touch sensor 11 (11a, 11b) is provided with a plurality of lines arranged in a matrix in a planar manner. This is a sensor that can detect the position of an object by detecting the capacitance between the sensor and the object. As shown in FIG. 1, the effective display area of the display device 10a has a coordinate range from (0, 0) to (1919, 1079), and the effective display area of the display device 10b has (1920, 0) to (3839, 1079).

なお、タッチセンサは静電容量センサだけに限定されるわけではなく、例えば抵抗膜方式のセンサでも構わない。   Note that the touch sensor is not limited to the capacitance sensor, and may be, for example, a resistive sensor.

表示装置10(10a,10b)の主制御部20(20a,20b)は、タッチ操作制御部であり、制御部(駆動/容量値受信部)21(21a,21b)、容量変化検知部22(22a,22b)、タッチ認識処理部23(23a,23b)、クリップ処理部24(24a,24b)、を備える。   The main control unit 20 (20a, 20b) of the display device 10 (10a, 10b) is a touch operation control unit, and includes a control unit (drive / capacity value receiving unit) 21 (21a, 21b) and a capacitance change detection unit 22 ( 22a, 22b), a touch recognition processing unit 23 (23a, 23b), and a clip processing unit 24 (24a, 24b).

制御部(駆動/容量値受信部)21(21a,21b)は、タッチセンサ11(11a,11b)を駆動し、その結果より静電容量値を受信する。
容量変化検知部22(22a,22b)は、容量値の変化からタッチ操作を検出する。
The control unit (drive / capacitance value receiving unit) 21 (21a, 21b) drives the touch sensor 11 (11a, 11b), and receives a capacitance value from the result.
The capacitance change detection unit 22 (22a, 22b) detects a touch operation from a change in the capacitance value.

タッチ認識処理部23(23a,23b)は、容量変化により、タッチ操作を行ったペン先や指先の位置を判定し、メニュー位置であればメニュー操作の処理を、そうではない時には描画処理を行う。   The touch recognition processing unit 23 (23a, 23b) determines the position of the pen tip or fingertip on which the touch operation has been performed based on the change in the capacity, and performs the menu operation processing if it is a menu position, and performs the drawing processing if it is not. .

クリップ処理部24(24a,24b)は、ホスト30のマルチディスプレイ制御部31から受信した表示装置の構成情報(詳しくは後述)に基づき、隣接する表示装置がある側の有効表示領域のエッジを判定し、有効表示領域外のタッチ座標を該エッジの境界位置でクリップする処理を行う。有効表示領域内のタッチ座標は検出した座標のまま出力する。   The clip processing unit 24 (24a, 24b) determines the edge of the effective display area on the side where the adjacent display device is located, based on the configuration information of the display device received from the multi-display control unit 31 of the host 30 (described in detail later). Then, a process of clipping the touch coordinates outside the effective display area at the boundary position of the edge is performed. Touch coordinates in the effective display area are output as detected coordinates.

ホスト30は、表示装置10からのタッチ認識信号を、有線あるいは無線によるネットワークにより受信し、それに基づいて表示装置10の表示部12を一つの画面とする映像信号を送信する表示制御部分である。ホスト30は、マルチディスプレイ制御部31、描画情報生成部32、駆動部33を備える構成である。   The host 30 is a display control unit that receives a touch recognition signal from the display device 10 via a wired or wireless network and transmits a video signal using the display unit 12 of the display device 10 as one screen based on the signal. The host 30 includes a multi-display control unit 31, a drawing information generating unit 32, and a driving unit 33.

マルチディスプレイ制御部31は、現在のディスプレイの構成情報(X,Y方向の構成数と個別配置数:詳しくは後述)を管理しており、その構成情報を表示装置10のクリップ処理部24に伝える。   The multi-display control unit 31 manages the current configuration information of the display (the number of components in the X and Y directions and the number of individual arrangements: details will be described later), and transmits the configuration information to the clip processing unit 24 of the display device 10. .

描画情報生成部32は、内部に図示していない記憶部を備え、記憶部には、手書きされた情報、表示方向、グラフ情報等の描画情報と、一時的に描画情報にオーバーラップして表示するメニュー情報とを別レイヤーにて保持している。そして、表示装置10のタッチ認識処理部23のメニュー処理、描画処理の判定に基づき、表示装置10の表示部12に表示する内容を記憶している記憶部の内容を更新する様に制御を行っている。   The drawing information generation unit 32 includes a storage unit (not shown) therein, and the storage unit temporarily displays the drawing information such as handwritten information, display direction, and graph information so as to overlap the drawing information. Menu information to be stored is stored in a separate layer. Then, based on the determination of the menu process and the drawing process of the touch recognition processing unit 23 of the display device 10, control is performed so as to update the content of the storage unit that stores the content to be displayed on the display unit 12 of the display device 10. ing.

駆動部33は、描画情報生成部32内の記憶部に記憶された情報に基づき表示部12を駆動し、それらを一画面として情報を表示部12に表示する。   The driving unit 33 drives the display unit 12 based on the information stored in the storage unit in the drawing information generation unit 32, and displays the information on the display unit 12 as one screen.

主制御部20は表示装置10に備えられ、マルチディスプレイ制御部31、描画情報生成部32、駆動部33はホスト30に備えられており、これらをまとめて、情報表示制御装置40とする。なお、情報表示制御装置40は、一つの装置とし、表示装置10は単なるモニター機能しかないものでもよい。   The main control unit 20 is provided in the display device 10, and the multi-display control unit 31, the drawing information generation unit 32, and the driving unit 33 are provided in the host 30. These are collectively referred to as an information display control device 40. The information display control device 40 may be one device, and the display device 10 may have only a simple monitoring function.

図3は第1の実施形態におけるクリップ処理の概念図である。図3では、一つの表示部の有効表示領域に、他の表示部の有効表示領域を一つ追加して、一画面とする例を示している。   FIG. 3 is a conceptual diagram of the clip processing in the first embodiment. FIG. 3 illustrates an example in which one effective display area of another display unit is added to the effective display area of one display unit to form one screen.

図3(a)は左側の表示装置10aの表示部12aにおける有効表示領域13aに、表示装置10bの表示部12bにおける有効表示領域13bを追加して一画面とすることを示している。表示部12aの有効表示領域13aの外側の上、下及び左端の部分は、有効表示領域外の部分であり、座標が有効表示領域の境界位置でクリップされる部分である。同様に、表示部12aの右端の領域(斜線部分)14aは、有効表示領域の外側の部分として同様にクリップされるべき箇所であるが、2枚のディスプレイを1枚と見立てた場合、この右端は、端とみなされなくなるため、従来ではクリップされない領域となっていた。そのため、例えば、表示部12aのタッチセンサの有効領域が有効表示領域13aから7.53mm外側にある場合、本処理がなければ、60インチディスプレイで約11画素分の座標が存在することになる。タッチ操作した部分を画像として表示する場合、右側の領域14aでのタッチ座標は、表示部12aにおいて、X=1919を越えて存在することになる。このため、隣接する他方の表示部12bでは、表示部12aにおけるX=1920より大きいタッチ操作部分がタッチ結果として反映されて表示されてしまう。そこで、本実施形態では、表示装置10aの主制御部20aは、この部分14aでのタッチ座標をクリップし、X座標をX=1919としてホスト30に出力する。   FIG. 3A shows that the effective display area 13b of the display unit 12b of the display device 10b is added to the effective display area 13a of the display unit 12a of the left display device 10a to form one screen. The upper, lower, and left ends outside the effective display area 13a of the display unit 12a are parts outside the effective display area, and are parts whose coordinates are clipped at a boundary position of the effective display area. Similarly, the right end region (hatched portion) 14a of the display unit 12a is a portion to be similarly clipped as a portion outside the effective display region, but when two displays are regarded as one, this right end region is Is no longer regarded as an end, and thus has conventionally been an area that is not clipped. Therefore, for example, when the effective area of the touch sensor of the display unit 12a is outside the effective display area 13a by 7.53 mm, without this processing, the coordinates of about 11 pixels exist on the 60-inch display. When the touch-operated portion is displayed as an image, the touch coordinates in the right area 14a exceed X = 1919 on the display unit 12a. For this reason, on the other adjacent display unit 12b, a touch operation portion larger than X = 1920 on the display unit 12a is reflected and displayed as a touch result. Therefore, in the present embodiment, the main control unit 20a of the display device 10a clips the touch coordinates at the portion 14a and outputs the X coordinates to the host 30 as X = 1919.

図3(b)は右側の表示装置10bの表示部12bにおける有効表示領域13bに、表示装置10aの表示部12aにおける有効表示領域13aを追加して一画面とすることを示している。表示部12bの有効表示領域13bの外側の上、下及び右端の部分は、有効表示領域外の部分であり、座標がクリップされる部分である。同様に、表示部12bの左端の領域(斜線部分)14bは、有効表示領域の外側の部分として同様にクリップされるべき箇所であるが、2枚のディスプレイを1枚と見立てた場合、この左端は、端とみなされなくなるため、従来ではクリップされない領域となっていた。そのため、例えば、表示部12bのタッチセンサの有効領域が有効表示領域13bから7.53mm外側にある場合、本処理がなければ、図3(a)と同様に、60インチディスプレイで約11画素分の座標が存在することになる。タッチ操作した部分を画像として表示する場合、左側の領域14bでのタッチ座標は、表示部12bにおいて、X=1920より小さい値が存在することになる。このため、隣接する他方の表示部12aでは、表示部12bにおけるX=1920より小さいタッチ操作がタッチ結果として反映されて表示されてしまう。そこで、本実施形態では、表示装置10bの主制御部20bは、この部分14bをクリップし、X座標をX=1920としてホスト30に出力する。   FIG. 3B shows that the effective display area 13a of the display unit 12a of the display device 10a is added to the effective display area 13b of the display unit 12b of the display device 10b on the right to form one screen. The upper, lower, and right ends outside the effective display area 13b of the display unit 12b are parts outside the effective display area, and are parts whose coordinates are clipped. Similarly, the left end region (hatched portion) 14b of the display unit 12b is a portion to be similarly clipped as a portion outside the effective display region, but when two displays are regarded as one, this left end Is no longer regarded as an end, and thus has conventionally been an area that is not clipped. Therefore, for example, when the effective area of the touch sensor of the display unit 12b is 7.53 mm outside the effective display area 13b, if this processing is not performed, as in FIG. Will exist. When the touch-operated portion is displayed as an image, the touch coordinates in the left area 14b have a value smaller than X = 1920 in the display unit 12b. Therefore, on the other adjacent display unit 12a, a touch operation smaller than X = 1920 on the display unit 12b is reflected and displayed as a touch result. Therefore, in the present embodiment, the main control unit 20b of the display device 10b clips the portion 14b and outputs the X coordinate to the host 30 as X = 1920.

図4は第1の実施形態における座標を求める処理の一例を示すフローチャートである。
この処理は、複数の表示装置を配置して一画面の表示とした場合に、タッチを行った位置のX座標とY座標を求める処理である。
FIG. 4 is a flowchart illustrating an example of a process for obtaining coordinates according to the first embodiment.
This process is a process of obtaining the X coordinate and the Y coordinate of the touched position when a plurality of display devices are arranged to display one screen.

ここで、原点を定めてX方向とY方向を定める。例えば、配置した表示装置によって形成される一画面の左上端を原点とし、そこから右横方向をX方向、下方向をY方向とする。表示装置単体における有効表示領域の最大X方向画素数を「WIDTH_X」、最大Y方向画素数を「WIDTH_Y」とする。原点からみたX方向における表示装置の配置数を「POS_X」、Y方向における表示装置の配置数を「POS_Y」とする。   Here, the X direction and the Y direction are determined by determining the origin. For example, the origin is set at the upper left end of one screen formed by the arranged display devices, the X direction is set to the right lateral direction, and the Y direction is set to the lower direction. The maximum number of pixels in the effective display area of the display device alone in the X direction is “WIDTH_X”, and the maximum number of pixels in the Y direction is “WIDTH_Y”. The number of display devices arranged in the X direction from the origin is “POS_X”, and the number of display devices arranged in the Y direction is “POS_Y”.

図5は、4つの表示装置を配置した場合の最大座標とXY方向の配置数を示す説明図である。4つの表示装置D1〜D4は、解像度がFull−HD(1920×1080)であり、2×2(横×縦)構成で隣接して配置されている。図5の4つの太枠は、各表示装置の有効表示領域を示している。ホスト30のマルチディスプレイ制御部31の記憶部には、表示装置の構成情報として、次の情報が記憶されている。
(1)一画面を構成する表示装置の構成数情報(m,n):(X方向の構成数,Y方向の構成数)
(2)対象表示装置の配置情報(POS_X,POS_Y):(X方向の対象表示装置までの表示装置の配置数,Y方向の対象表示装置までの表示装置の配置数)
配置情報は、表示装置の配置の位置を示す情報となる。
FIG. 5 is an explanatory diagram showing the maximum coordinates and the number of arrangements in the XY directions when four display devices are arranged. The four display devices D1 to D4 have a resolution of Full-HD (1920 × 1080) and are arranged adjacently in a 2 × 2 (horizontal × vertical) configuration. The four thick frames in FIG. 5 indicate the effective display area of each display device. The storage unit of the multi-display control unit 31 of the host 30 stores the following information as configuration information of the display device.
(1) Configuration number information (m, n) of the display device constituting one screen: (the number of components in the X direction, the number of components in the Y direction)
(2) Arrangement information of target display devices (POS_X, POS_Y): (the number of display devices up to the target display device in the X direction, the number of display devices up to the target display device in the Y direction)
The arrangement information is information indicating an arrangement position of the display device.

従って、図5の表示装置の構成情報は以下のようになる。
(1)構成数情報:(m、n)=(2,2)
(2)配置情報
表示装置D1 (POS_X,POS_Y)=(1,1)
表示装置D2 (POS_X,POS_Y)=(2,1)
表示装置D3 (POS_X,POS_Y)=(1,2)
表示装置D4 (POS_X,POS_Y)=(2,2)
Therefore, the configuration information of the display device of FIG. 5 is as follows.
(1) Configuration number information: (m, n) = (2, 2)
(2) Arrangement information display device D1 (POS_X, POS_Y) = (1, 1)
Display device D2 (POS_X, POS_Y) = (2, 1)
Display device D3 (POS_X, POS_Y) = (1, 2)
Display device D4 (POS_X, POS_Y) = (2, 2)

次に、図4に基づいて、ユーザがタッチセンサに触れて操作を行った場合の処理について説明する。   Next, a process in a case where the user performs an operation by touching the touch sensor will be described with reference to FIG.

ステップS11において、主制御部20の容量変化検知部22は、制御部21の受信結果よりタッチセンサ11から入力があるかどうかを判定する。入力がある場合はS12へ進み、入力がない場合はそのまま処理を終了する。   In step S <b> 11, the capacity change detection unit 22 of the main control unit 20 determines whether there is an input from the touch sensor 11 based on the reception result of the control unit 21. If there is an input, the process proceeds to S12, and if there is no input, the process ends.

ステップS12において、タッチ認識処理部23は、容量変化検知部22の結果により、入力されたX座標が表示装置のX方向の解像度(最大X方向画素数)とX方向の配置数を乗算(WIDTH_X×POS_X)した結果より、小さいかどうかを判定する。小さい場合はステップS14へ進み、そうでない場合は、ステップS13へ進む。   In step S12, the touch recognition processing unit 23 multiplies the input X coordinate by the resolution in the X direction (maximum number of pixels in the X direction) of the display device and the number of arrangements in the X direction based on the result of the capacitance change detection unit 22 (WIDTH_X). (* POS_X), it is determined whether or not it is smaller. If smaller, the process proceeds to step S14; otherwise, the process proceeds to step S13.

ステップS13では、前段のステップS12において、入力されたX座標が対象表示装置の有効表示領域外のX座標であると判定されたため、クリップ処理部24は、出力するX座標を、有効表示領域の最大X座標((WIDTH_X×POS_X)−1)にクリップし、ステップS17へ進む。   In step S13, since the input X coordinate is determined to be an X coordinate outside the effective display area of the target display device in the previous step S12, the clip processing unit 24 sets the output X coordinate to the effective display area. Clip to the maximum X coordinate ((WIDTH_X × POS_X) -1) and proceed to step S17.

ステップS14において、タッチ認識処理部23は、入力されたX座標が表示装置のX方向の解像度とX方向の位置から1を減じた数を乗算(WIDTH_X×(POS_X−1))した結果以上であるかどうかを判定し、そうであればステップS16へ進み、そうでなければステップS15へ進む。   In step S <b> 14, the touch recognition processing unit 23 calculates a value obtained by multiplying the input X coordinate by the number obtained by subtracting 1 from the resolution of the display device in the X direction and the position in the X direction (WIDTH_X × (POS_X−1)). It is determined whether or not there is, and if so, the process proceeds to step S16; otherwise, the process proceeds to step S15.

前段のステップS14において、入力されたX座標が対象表示装置の有効表示領域外のX座標であると判定されたため、ステップS15において、クリップ処理部24は、出力するX座標を、有効表示領域の最小X座標(WIDTH_X×(POS_X−1))にクリップし、ステップS17へ進む。   In the previous step S14, it is determined that the input X coordinate is an X coordinate outside the effective display area of the target display device. Therefore, in step S15, the clip processing unit 24 replaces the output X coordinate with the effective display area. Clip to the minimum X coordinate (WIDTH_X × (POS_X-1)) and proceed to step S17.

ステップS16において、入力されたX座標が対象表示装置の有効表示領域内のX座標であるため、クリップ処理部24は、そのままクリップせずに出力X座標としてホスト30に出力し、ステップS17へ進む。   In step S16, since the input X coordinate is the X coordinate in the effective display area of the target display device, the clip processing unit 24 outputs the output X coordinate to the host 30 without clipping, and proceeds to step S17. .

ステップS17において、タッチ認識処理部23は、入力されたY座標が表示装置のY方向の解像度とY方向の位置を乗算(WIDTH_Y×POS_Y)した結果より、小さいかどうかを判定する。小さい場合はS19へ進み、そうでない場合は、S18へ進む。   In step S17, the touch recognition processing unit 23 determines whether or not the input Y coordinate is smaller than the result of multiplying the resolution of the display device in the Y direction by the position in the Y direction (WIDTH_Y × POS_Y). If smaller, go to S19, otherwise go to S18.

ステップS18では、前段のステップS17において、入力されたY座標が対象表示装置の有効表示領域外のY座標であると判定されたため、クリップ処理部24は出力するY座標は、有効表示領域の最大Y座標((WIDTH_Y×POS_Y)−1)にクリップし、処理を終了する。   In step S18, since the input Y coordinate is determined to be the Y coordinate outside the effective display area of the target display device in the previous step S17, the Y coordinate output by the clip processing unit 24 is the maximum of the effective display area. Clip to the Y coordinate ((WIDTH_Y × POS_Y) -1) and end the processing.

ステップS19において、タッチ認識処理部23は、入力されたY座標が表示装置のY方向の解像度とY方向の位置から1を減じた数を乗算(WIDTH_Y×(POS_Y−1))した結果以上であるかどうかを判定し、そうであればステップS21へ進み、そうでなければステップS20へ進む。   In step S19, the touch recognition processing unit 23 multiplies the input Y coordinate by the number obtained by subtracting 1 from the resolution in the Y direction of the display device and the position in the Y direction (WIDTH_Y × (POS_Y-1)). It is determined whether or not there is, and if so, the process proceeds to step S21; otherwise, the process proceeds to step S20.

ステップS20では、前段のステップS19において、入力されたY座標が対象表示装置の有効表示領域外のY座標であると判定されたため、クリップ処理部24は出力するY座標を、有効表示領域の最小Y座標(WIDTH_Y×(POS_Y−1))にクリップし、処理を終了する。   In step S20, since the input Y coordinate is determined to be a Y coordinate outside the effective display area of the target display device in the previous step S19, the clip processing unit 24 sets the output Y coordinate to the minimum of the effective display area. Clip to the Y coordinate (WIDTH_Y × (POS_Y-1)) and end the process.

ステップS21において、クリップ処理部24は、入力されたY座標が対象表示装置の有効表示領域内のY座標であるため、そのまま出力Y座標としてホスト30に出力し、処理を終了する。   In step S21, since the input Y coordinate is the Y coordinate in the effective display area of the target display device, the clip processing unit 24 outputs the input Y coordinate as it is to the host 30 as the output Y coordinate, and ends the processing.

こうして、ユーザがタッチセンサにより入力したタッチ座標(X座標、Y座標)が表示装置10からホスト30へ出力され、ホスト30の描画情報生成部32は、このタッチ座標に基づいて描画情報を生成する。そして、駆動部33が描画情報に基づいて、マルチディスプレイ構成における一画面表示として各表示装置に表示を行う。   Thus, the touch coordinates (X coordinate, Y coordinate) input by the user with the touch sensor are output from the display device 10 to the host 30, and the drawing information generating unit 32 of the host 30 generates the drawing information based on the touch coordinates. . Then, the driving unit 33 performs display on each display device as one screen display in the multi-display configuration based on the drawing information.

図5の例に従えば、次のようにXY座標が表示装置10からホスト30に出力される。表示装置D1,D4を例に説明するが、表示装置D2,D3でも同様である。   According to the example of FIG. 5, the XY coordinates are output from the display device 10 to the host 30 as follows. The display devices D1 and D4 will be described as an example, but the same applies to the display devices D2 and D3.

表示装置D1の場合、入力されるx座標:input_xがそれぞれ、
input_x<1920が否の場合、output_x=1919にクリップ、
input_x≧0が否の場合、output_x=0にクリップ、
上記以外の場合、output_x=input_xをセット、
される。
In the case of the display device D1, the input x coordinate: input_x is
If input_x <1920 is not satisfied, output_x = 11920 is clipped,
If input_x ≧ 0 is not satisfied, clip to output_x = 0,
Otherwise, set output_x = input_x,
Is done.

また、入力されるy座標:input_yがそれぞれ、
input_y<1080が否の場合、output_y=1079にクリップ、
input_y≧0が否の場合、output_y=0にクリップ、
上記以外の場合、output_y=input_yをセット、
される。
Also, the input y coordinate: input_y is
If input_y <1080 is not satisfied, output_y is clipped to 1079,
If input_y ≧ 0 is not satisfied, clip to output_y = 0,
Otherwise, set output_y = input_y,
Is done.

こうして、表示装置D1の出力座標として(output_x,output_y)がホスト30に出力される。   Thus, (output_x, output_y) is output to the host 30 as output coordinates of the display device D1.

同様に、表示装置D4の場合、入力されるx座標:input_xがそれぞれ、
input_x<3840が否の場合、output_x=3839にクリップ、
input_x≧1920が否の場合、output_x=1920にクリップ、
上記以外の場合、output_x=input_xをセット、
される。
Similarly, in the case of the display device D4, the input x coordinate: input_x is
If input_x <3840 is not satisfied, output_x = 3839 is clipped,
If input_x ≧ 1920 is not satisfied, output_x = 1920 is clipped,
Otherwise, set output_x = input_x,
Is done.

また、入力されるy座標:input_yがそれぞれ、
input_y<2160が否の場合、output_y=2159にクリップ、
input_y≧1080が否の場合、output_y=1080にクリップ、
上記以外の場合、output_y=input_yをセット、
される。
Also, the input y coordinate: input_y is
If input_y <2160 is not true, clip to output_y = 2159,
If input_y ≧ 1080 is not true, clip to output_y = 1080,
Otherwise, set output_y = input_y,
Is done.

こうして、表示装置D4の出力座標として(output_x,output_y)がホスト30に出力される。   Thus, (output_x, output_y) is output to the host 30 as output coordinates of the display device D4.

このようにマルチディスプレイを構成する複数の表示装置を1枚のディスプレイと見立てて、表示装置間における有効表示領域外のタッチ操作においても有効表示領域に座標をクリップするので、他の表示装置においてそれが影響することなく、マルチディスプレイ構成時でもシングルディスプレイ時と同様の操作体系を提供することができる。   In this way, the plurality of display devices constituting the multi-display are regarded as one display, and the coordinates are clipped to the effective display area even in a touch operation between the display devices outside the effective display area. The same operation system as in the case of the single display can be provided even in the case of the multi-display without affecting the display.

<第2の実施形態>
図6は、本発明の第2の実施形態におけるマルチディスプレイの表示システムを示す説明図である。
<Second embodiment>
FIG. 6 is an explanatory diagram illustrating a display system of a multi-display according to the second embodiment of the present invention.

図6の表示システムは、表示装置50(50a,50b)と、これらを表示制御するホスト70とを備える構成である。図1の第1の実施形態の表示システムと同一の部分には共通の符号を付している。   The display system of FIG. 6 is configured to include a display device 50 (50a, 50b) and a host 70 for controlling the display. The same parts as those of the display system of the first embodiment in FIG. 1 are denoted by the same reference numerals.

第1の実施形態と異なるのは、次の点である。
表示装置50(50a,50b)は、隣接するエッジについて有効表示領域より外側の座標であってもそのままホスト70にタッチ座標として出力する。表示制御部分であるホスト70は、表示装置50aからの座標出力のうち、X=1919より大きな値と、表示装置50bからの座標出力のうち、x=1920より小さな値とをそれぞれクリップする構成とする。これにより、互いに隣接するエッジをタッチされた場合でも、他方の隣り合うディスプレイにタッチ結果を反映させないようにすることができる。
The difference from the first embodiment is as follows.
The display device 50 (50a, 50b) outputs the coordinates as touch coordinates to the host 70 as they are, even if the coordinates are outside the effective display area for the adjacent edges. The host 70, which is a display control part, clips a value larger than X = 1919 in the coordinate output from the display device 50a and a value smaller than x = 1920 in the coordinate output from the display device 50b. I do. Thereby, even when edges adjacent to each other are touched, it is possible to prevent the touch result from being reflected on the other adjacent display.

図7は、第2の実施形態における表示システムを示すブロック図である。図2の第1の実施形態と同一の部分には共通の符号を付して、詳しい説明は省略する。   FIG. 7 is a block diagram illustrating a display system according to the second embodiment. The same parts as those in the first embodiment in FIG. 2 are denoted by the same reference numerals, and the detailed description is omitted.

図7では、ホスト70にてクリップ処理を実施する。従って、表示装置50(50a,50b)の主制御部60(60a,60b)は、制御部(駆動/容量値受信部)61(61a,61b)、容量変化検知部62(62a,62b)、タッチ認識処理部63(63a,63b)を備えて、クリップ処理部は備えていない。
また、ホスト70は、クリップ処理部71、描画情報生成部72、駆動部73を備えている。
In FIG. 7, the clip processing is performed by the host 70. Therefore, the main control unit 60 (60a, 60b) of the display device 50 (50a, 50b) includes a control unit (drive / capacity value receiving unit) 61 (61a, 61b), a capacitance change detection unit 62 (62a, 62b), A touch recognition unit 63 (63a, 63b) is provided, and a clip processing unit is not provided.
The host 70 includes a clip processing unit 71, a drawing information generation unit 72, and a driving unit 73.

ホスト70のクリップ処理部71は、表示装置50(50a,50b)の主制御部60(60a,60b)から入力される座標情報について、有効表示領域外の座標情報が重複する箇所を、識別情報(デバイスID等)とディスプレイ構成情報により、タッチ操作を行った表示装置の有効表示領域のエッジ境界の座標にクリップする処理を実施する。こうして、クリップ処理を行うことで、隣接する表示装置との間で重複する座標をキャンセルする。
主制御部60、ホスト70をまとめて、情報表示制御装置80とする。
The clip processing unit 71 of the host 70 determines, for the coordinate information input from the main control unit 60 (60a, 60b) of the display device 50 (50a, 50b), a portion where the coordinate information outside the effective display area overlaps, Based on (device ID and the like) and the display configuration information, a process of clipping to the coordinates of the edge boundary of the effective display area of the display device on which the touch operation has been performed is performed. By performing the clip processing in this manner, the coordinates that overlap with the adjacent display device are canceled.
The main control unit 60 and the host 70 are collectively referred to as an information display control device 80.

図8は第2の実施形態におけるクリップ処理の概念図である。
図8のように、2枚のディスプレイ(1920×1080)を横に並べた場合、ディスプレイの解像度は、3840×1080となっている。
左側の表示部12aをデバイスID=1、右側の表示部12bをデバイスID=2とする。各表示装置の主制御部60(60a,60b)におけるタッチ認識処理部63(63a,63b)は、検出した座標をそのままホスト70に出力する。図8に示すように、表示部12aにおいては、有効表示領域13aを越えてタッチセンサの有効領域14aが存在する。また、表示部12bにおいては、有効表示領域13bを越えてタッチセンサの有効領域14bが存在する。従って、有効表示領域13a,13bが1画面として座標を考えると、それぞれ有効表示領域外のタッチセンサ有効領域14a,14bが、隣接する表示装置の有効表示領域の座標と重複する領域として存在することになる。
FIG. 8 is a conceptual diagram of the clip processing in the second embodiment.
As shown in FIG. 8, when two displays (1920 × 1080) are arranged side by side, the resolution of the displays is 3840 × 1080.
The left display unit 12a has a device ID = 1, and the right display unit 12b has a device ID = 2. The touch recognition processing unit 63 (63a, 63b) in the main control unit 60 (60a, 60b) of each display device outputs the detected coordinates to the host 70 as it is. As shown in FIG. 8, in the display unit 12a, there is an effective area 14a of the touch sensor beyond the effective display area 13a. In the display unit 12b, there is an effective area 14b of the touch sensor beyond the effective display area 13b. Accordingly, considering the coordinates of the effective display areas 13a and 13b as one screen, the touch sensor effective areas 14a and 14b outside the effective display area respectively exist as areas overlapping the coordinates of the effective display areas of the adjacent display devices. become.

ホスト70側では、座標の重複部分14a,14bでタッチ操作があった場合は、表示装置50a,50bから重複状態のタッチ座標が出力されてくるので、いずれの表示装置からタッチ座標であるかによって、タッチ座標を第1の実施形態のようにクリップ処理してから表示制御を行う。なお、複数のディスプレイの外周については、それぞれ適切な値でクリップ処理を実施する。   On the host 70 side, when a touch operation is performed at the overlapping portions 14a and 14b of the coordinates, the touch devices in the overlapping state are output from the display devices 50a and 50b. Therefore, depending on which display device is the touch coordinate. Then, display control is performed after the touch coordinates are clipped as in the first embodiment. Note that clip processing is performed on the outer periphery of the plurality of displays with appropriate values.

図9は第2の実施形態おけるクリップ処理を示すフローチャートである。これは、タッチ操作が行われてタッチ座標がホスト70に入力された際の処理についてのものである。   FIG. 9 is a flowchart showing clip processing in the second embodiment. This is for processing when a touch operation is performed and touch coordinates are input to the host 70.

ステップS31において、ホスト70のクリップ処理部71は、表示装置50から入力があるかどうかを判定する。入力がある場合はステップS32へ進み、入力がない場合はそのまま処理を終了する。   In step S31, the clip processing unit 71 of the host 70 determines whether there is an input from the display device 50. If there is an input, the process proceeds to step S32; otherwise, the process ends.

ステップS32において、クリップ処理部71は、デバイスIDをチェックし、どの表示装置50からの入力であるかを判別し、ステップS33へ進む。   In step S32, the clip processing unit 71 checks the device ID, determines which display device 50 the input is from, and proceeds to step S33.

ステップS33において、クリップ処理部71は、入力元が判明したため、その表示装置の位置(配置情報)を構成数情報から、POS_X、POS_Yとして設定し、ステップS34へ進む。この構成数情報は、ホスト70の図示しない記憶部に格納されており、設定された配置情報もこの記憶部に格納される。   In step S33, since the input source has been determined, the clip processing unit 71 sets the position (arrangement information) of the display device as POS_X and POS_Y from the configuration number information, and proceeds to step S34. The configuration number information is stored in a storage unit (not shown) of the host 70, and the set arrangement information is also stored in this storage unit.

ステップS34において、クリップ処理部71は、入力されたX座標が表示装置のX方向の最大解像度とX方向の位置(配置情報)を乗算(WIDTH_X×POS_X)した結果より、小さいかどうかを判定する。小さい場合はステップS36へ進み、そうでない場合は、ステップS35へ進む。   In step S34, the clip processing unit 71 determines whether or not the input X coordinate is smaller than the result of multiplying the maximum resolution of the display device in the X direction and the position (arrangement information) in the X direction (WIDTH_X × POS_X). . If it is smaller, the process proceeds to step S36; otherwise, the process proceeds to step S35.

ステップS35では、前段のステップS34において、入力されたX座標が対象表示装置の有効表示領域外のX座標であると判定されたため、クリップ処理部71は、出力するX座標を、有効表示領域の最大X座標((WIDTH_X×POS_X)−1)にクリップし、ステップS39へ進む。   In step S35, since the input X coordinate is determined to be the X coordinate outside the effective display area of the target display device in the previous step S34, the clip processing unit 71 sets the output X coordinate to the effective display area. Clip to the maximum X coordinate ((WIDTH_X × POS_X) -1) and proceed to step S39.

ステップS36において、クリップ処理部71は、入力されたX座標が表示装置のX方向の最大解像度とX方向の位置(配置情報)から1を減じた数を乗算(WIDTH_X×(POS_X−1))した結果以上であるかどうかを判定し、そうであればステップS38へ進み、そうでなければステップS37へ進む。   In step S36, the clip processing unit 71 multiplies the input X coordinate by the number obtained by subtracting 1 from the maximum resolution in the X direction of the display device and the position (arrangement information) in the X direction (WIDTH_X × (POS_X−1)). It is determined whether the result is equal to or greater than the result, and if so, the process proceeds to step S38; otherwise, the process proceeds to step S37.

ステップS37では、前段のステップS36において、入力されたX座標が対象表示装置の有効表示領域外のX座標であると判定されたため、クリップ処理部71は、出力するX座標を、有効表示領域の最小X座標(WIDTH_X×(POS_X−1))にクリップし、ステップS39へ進む。   In step S37, since the input X coordinate is determined to be the X coordinate outside the effective display area of the target display device in the previous step S36, the clip processing unit 71 sets the output X coordinate to the effective display area. Clip to the minimum X coordinate (WIDTH_X × (POS_X-1)) and proceed to step S39.

ステップS38において、入力されたX座標が対象表示装置の有効表示領域内のX座標であるため、クリップ処理部71は、そのまま出力X座標として出力し、ステップS39へ進む。   In step S38, since the input X coordinate is the X coordinate in the effective display area of the target display device, the clip processing unit 71 outputs the X coordinate as it is as the output X coordinate, and proceeds to step S39.

ステップS39において、クリップ処理部71は、入力されたY座標が表示装置のY方向の最大解像度とY方向の位置を乗算(WIDTH_Y×POS_Y)した結果より、小さいかどうかを判定する。小さい場合はステップS41へ進み、そうでない場合は、ステップS40へ進む。   In step S39, the clip processing unit 71 determines whether or not the input Y coordinate is smaller than the result of multiplying the maximum resolution of the display device in the Y direction by the position in the Y direction (WIDTH_Y × POS_Y). If smaller, the process proceeds to step S41; otherwise, the process proceeds to step S40.

ステップS40では、前段のステップS39において、入力されたY座標が対象表示装置の有効表示領域外のY座標であると判定されたため、クリップ処理部71は、出力するY座標を、有効表示領域の最大Y座標((WIDTH_Y×POS_Y)−1)にクリップし、処理を終了する。   In step S40, since the input Y coordinate is determined to be the Y coordinate outside the effective display area of the target display device in the previous step S39, the clip processing unit 71 sets the output Y coordinate to the effective display area. Clip to the maximum Y coordinate ((WIDTH_Y × POS_Y) -1) and end the process.

ステップS41において、クリップ処理部71は、入力されたY座標が表示装置のY方向の解像度とY方向の位置から1を減じた数を乗算(WIDTH_Y×(POS_Y−1))した結果以上であるかどうかを判定し、そうであればステップS43へ進み、そうでなければステップS42へ進む。   In step S41, the clip processing unit 71 is equal to or more than the result of multiplying the input Y coordinate by the number obtained by subtracting 1 from the resolution in the Y direction of the display device and the position in the Y direction (WIDTH_Y × (POS_Y-1)). It is determined whether or not, and if so, the process proceeds to step S43; otherwise, the process proceeds to step S42.

ステップS42では、前段のステップS41において、入力されたY座標が対象表示装置の有効表示領域外のY座標であると判定されたため、クリップ処理部71は、出力するY座標を、有効表示領域の最小Y座標(WIDTH_Y×(POS_Y−1))にクリップし、処理を終了する。   In step S42, since the input Y coordinate is determined to be the Y coordinate outside the effective display area of the target display device in the previous step S41, the clip processing unit 71 sets the Y coordinate to be output to the effective display area. Clip to the minimum Y coordinate (WIDTH_Y × (POS_Y-1)) and end the process.

ステップS43において、入力されたY座標が対象表示装置の有効表示領域内のY座標であるため、クリップ処理部71は、そのまま出力Y座標として出力し、処理を終了する。   In step S43, since the input Y coordinate is the Y coordinate in the effective display area of the target display device, the clip processing unit 71 outputs the Y coordinate as it is as the output Y coordinate, and ends the processing.

こうして、ユーザがタッチセンサにより入力したタッチ座標(X座標、Y座標)が表示装置50a,50bから出力され、ホスト70のクリップ処理部71はタッチ座標の重複座標部分にクリップ処理を行ってから、ホスト70の描画情報生成部72は、このタッチ座標に基づいて描画情報を生成する。そして、駆動部73が描画情報に基づいて、マルチディスプレイ構成における一画面表示として各表示装置に表示を行う。   In this way, the touch coordinates (X coordinate, Y coordinate) input by the user using the touch sensor are output from the display devices 50a and 50b, and the clip processing unit 71 of the host 70 performs clip processing on the overlapping coordinate portion of the touch coordinates. The drawing information generating unit 72 of the host 70 generates drawing information based on the touch coordinates. Then, the driving unit 73 performs display on each display device as one screen display in a multi-display configuration based on the drawing information.

図10は、第2の実施形態におけるデバイスIDとディスプレイの構成情報の例を示す説明図である。
2×2の4面ディスプレイの場合、例えばDisplay3にデバイスID=3が設定されている場合、ディスプレイの構成情報を参照し、(POS_X,POS_Y)=(1,2)を取得し、先の図9のS33の処理を実施する。
FIG. 10 is an explanatory diagram illustrating an example of a device ID and display configuration information according to the second embodiment.
In the case of a 2 × 2 four-screen display, for example, when device ID = 3 is set in Display 3, (POS_X, POS_Y) = (1, 2) is obtained by referring to the configuration information of the display, and The processing of S33 of No. 9 is performed.

このようにデバイスIDと構成情報(POS_X,POS_Y)を対応させた表が、各構成数と配置ごとに設定されていれば、各ディスプレイをデバイスIDに対応付けるだけで、構成情報とディスプレイを対応付けられる。こうして、m×n(m、nは自然数)のマルチディスプレイ構成のうち、表示するディスプレイ数が動的変化する場合であっても、ぞれぞれの構成情報を予め設定することにより対応可能となる。   If a table in which the device IDs and the configuration information (POS_X, POS_Y) are associated with each other is set for each configuration number and arrangement as described above, the configuration information is associated with the display only by associating each display with the device ID. Can be In this way, even if the number of displays to be displayed dynamically changes in the multi-display configuration of m × n (m and n are natural numbers), it can be dealt with by setting the respective configuration information in advance. Become.

本発明による情報表示制御装置で動作するプログラムは、本発明に関わる上記実施形態の機能を実現するように、CPU(Central Processing Unit)等を制御するプログラム(コンピュータを機能させるプログラム)であっても良い。そして、これら装置で取り扱われる情報は、その処理時に一時的にRAM(Random Access Memory)に蓄積され、その後、Flash ROM(Read Only Memory)などの各種ROMやHDD(Hard Disk Drive)に格納され、必要に応じてCPUによって読み出し、修正・書き込みが行われる。また、各構成の機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することにより各部の処理を行ってもよい。なお、ここでいう「コンピュータシステム」とは、OSや周辺機器等のハードウェアを含むものとする。   The program that operates on the information display control device according to the present invention may be a program that controls a CPU (Central Processing Unit) or the like (a program that causes a computer to function) so as to realize the functions of the above-described embodiments according to the present invention. good. The information handled by these devices is temporarily stored in a RAM (Random Access Memory) at the time of processing, and thereafter stored in various ROMs such as a Flash ROM (Read Only Memory) or an HDD (Hard Disk Drive). Reading, correction and writing are performed by the CPU as necessary. In addition, a program for realizing the function of each configuration may be recorded on a computer-readable recording medium, and the program recorded on this recording medium may be read into a computer system and executed to execute processing of each unit. Good. Here, the “computer system” includes an OS and hardware such as peripheral devices.

また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ROM、CD−ROM等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムを送信する場合の通信線のように、短時間の間、動的にプログラムを保持するもの、その場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリのように、一定時間プログラムを保持しているものも含むものとする。また上記プログラムは、前述した機能の一部を実現するためのものであっても良く、さらに前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるものであっても良い。   The “computer-readable recording medium” refers to a portable medium such as a flexible disk, a magneto-optical disk, a ROM, and a CD-ROM, and a storage device such as a hard disk built in a computer system. Further, a “computer-readable recording medium” refers to a communication line for transmitting a program via a network such as the Internet or a communication line such as a telephone line, which dynamically holds the program for a short time. In this case, it is also assumed that a program that holds a program for a certain period of time, such as a volatile memory in a computer system serving as a server or a client in that case, is included. Further, the above-mentioned program may be for realizing a part of the above-mentioned functions, or may be for realizing the above-mentioned functions in combination with a program already recorded in a computer system.

以上、この発明の実施形態を図面を参照して詳述してきたが、具体的な構成はこれらの実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の設計変更等された発明も含まれる。   As described above, the embodiments of the present invention have been described in detail with reference to the drawings. However, the specific configuration is not limited to these embodiments, and the invention in which the design is changed without departing from the gist of the present invention. Is also included.

また、本実施形態において説明した情報表示制御装置は、情報を表示する表示画面と、前記表示画面に対する入力を検出可能なタッチセンサとを備えた表示装置を、複数配置することで、一画面として表示制御をする情報表示制御装置であって、前記タッチセンサの検出結果から前記表示画面に対するタッチ操作を認識するタッチ認識処理部と、前記表示装置の配置に関する構成情報を管理する構成情報管理部と、前記構成情報と、前記表示装置の解像度とから、当該表示装置の有効表示領域を算出する有効表示領域算出部と、前記タッチ操作によりタッチされた座標が、有効表示領域外の座標の場合は有効表示領域内にクリップし、有効表示領域内の座標はそのままとしてタッチ座標を出力するクリップ処理部と、前記クリップ処理部からのタッチ座標に従って描画情報を生成する描画情報生成部と、を備える構成としてもよい。   Further, the information display control device described in the present embodiment, as a single screen by arranging a plurality of display devices including a display screen for displaying information and a touch sensor capable of detecting an input to the display screen An information display control device that performs display control, a touch recognition processing unit that recognizes a touch operation on the display screen from a detection result of the touch sensor, and a configuration information management unit that manages configuration information related to an arrangement of the display device. An effective display area calculation unit that calculates an effective display area of the display device from the configuration information and the resolution of the display device, and the coordinates touched by the touch operation are coordinates outside the effective display region. A clip processing unit that clips in the effective display area and outputs touch coordinates while leaving the coordinates in the effective display area unchanged; A drawing information generating unit for generating drawing information in accordance with the touch coordinates may be configured to include a.

また、本実施形態において説明した情報表示制御装置において、前記クリップ処理部は、前記タッチ操作によりタッチされた座標が、他の表示装置の有効表示領域になる座標の場合は、当該タッチされた座標の位置の近傍のエッジにクリップする構成としてもよい。   Further, in the information display control device described in the present embodiment, when the coordinates touched by the touch operation are coordinates that become an effective display area of another display device, the clip processing unit may include the touched coordinates. It may be configured to clip to the edge near the position.

また、本実施形態において説明した情報表示制御方法は、情報を表示する表示画面と、前記表示画面に対する入力を検出可能なタッチセンサとを備えた表示装置を、複数配置することで、一画面として表示制御をする情報表示制御方法であって、前記タッチセンサの検出結果から前記表示画面に対するタッチ操作を認識するタッチ認識処理ステップと、前記表示装置の配置に関する構成情報を管理する構成情報管理ステップと、前記構成情報と、前記表示装置の解像度とから、当該表示装置の有効表示領域を算出する有効表示領域算出ステップと、前記タッチ操作によりタッチされた座標が、有効表示領域外の座標の場合は有効表示領域内にクリップし、有効表示領域内の座標はそのままとしてタッチ座標を出力するクリップ処理ステップと、前記クリップ処理ステップによって求めたタッチ座標に従って描画情報を生成する描画情報生成ステップと、を備える構成としてもよい。   Further, the information display control method described in the present embodiment, as a single screen by arranging a plurality of display devices including a display screen for displaying information and a touch sensor capable of detecting an input to the display screen An information display control method for performing display control, comprising: a touch recognition processing step of recognizing a touch operation on the display screen from a detection result of the touch sensor; and a configuration information management step of managing configuration information relating to an arrangement of the display device. An effective display area calculating step of calculating an effective display area of the display device from the configuration information and the resolution of the display device, and the coordinates touched by the touch operation are coordinates outside the effective display region. A clip processing step of clipping in the effective display area and outputting touch coordinates while keeping the coordinates in the effective display area A drawing information generating step of generating drawing information according to the touch coordinates obtained by the clip processing steps, it may be configured to include a.

また、本実施形態において説明した情報表示システムは、情報を表示する表示画面と、前記表示画面に対する入力を検出可能なタッチセンサとを備えた表示装置が複数配置されており、各表示装置に接続された情報表示制御装置を含む情報表示システムにおいて、前記表示装置は、前記タッチセンサの検出結果から前記表示画面に対するタッチ操作を認識するタッチ認識処理部と、前記タッチ操作によりタッチされた座標を前記情報表示制御装置に送信する送信部と、を備え、前記情報表示制御装置は、前記複数配置された表示装置の表示画面を一画面として表示制御をする表示制御部と、前記表示装置の配置に関する構成情報を管理する構成情報管理部と、前記構成情報と、前記表示装置の解像度とから、当該表示装置の有効表示領域を算出する有効表示領域算出部と、前記表示装置から受信した座標が、前記表示装置の有効表示領域外の座標の場合は有効表示領域内にクリップし、有効表示領域内の座標はそのままとしてタッチ座標を出力するクリップ処理部と、前記クリップ処理部からのタッチ座標に従って描画情報を生成する描画情報生成部と、を備える構成としてもよい。   Further, the information display system described in the present embodiment has a plurality of display devices each including a display screen for displaying information and a touch sensor capable of detecting an input to the display screen, and is connected to each display device. In the information display system including the information display control device is performed, the display device, a touch recognition processing unit that recognizes a touch operation on the display screen from the detection result of the touch sensor, the coordinates touched by the touch operation the A transmission unit that transmits the information to the information display control device, wherein the information display control device performs display control of the display screens of the plurality of arranged display devices as one screen, and relates to an arrangement of the display devices. An effective display area of the display device is calculated from a configuration information management unit that manages configuration information, the configuration information, and a resolution of the display device. Effective display area calculation unit to perform, if the coordinates received from the display device are coordinates outside the effective display region of the display device, clip the effective display region, and touch the coordinates in the effective display region as they are. A configuration may also be provided that includes a clip processing unit that outputs and a drawing information generation unit that generates drawing information in accordance with touch coordinates from the clip processing unit.

10 :表示装置
11 :タッチセンサ
12 :表示部
20 :主制御部
21 :制御部
22 :容量変化検知部
23 :タッチ認識処理部
24 :クリップ処理部
30 :ホストコンピュータ
31 :マルチディスプレイ制御部
32 :描画情報生成部
33 :駆動部
40 :情報表示制御装置
50 :表示装置
60 :主制御部
61 :制御部
62 :容量変化検知部
63 :タッチ認識処理部
70 :ホストコンピュータ
71 :クリップ処理部
72 :描画情報生成部
73 :駆動部
80 :情報表示制御装置
10: display device 11: touch sensor 12: display unit 20: main control unit 21: control unit 22: capacity change detection unit 23: touch recognition processing unit 24: clip processing unit 30: host computer 31: multi-display control unit 32: Drawing information generation unit 33: Drive unit 40: Information display control device 50: Display device 60: Main control unit 61: Control unit 62: Capacity change detection unit 63: Touch recognition processing unit 70: Host computer 71: Clip processing unit 72: Drawing information generation unit 73: drive unit 80: information display control device

Claims (5)

情報を有効表示領域に表示する表示パネルを備えた表示装置を複数配置したマルチディスプレイであって、
前記表示パネルの有効表示領域よりも広い領域へのタッチを検出可能に設けられたタッチセンサと、
隣接する表示装置間に位置する有効表示領域外へのタッチが検出された場合、当該タッチを検出した表示装置の有効表示領域内へタッチしたものとみなして出力する制御部と、
を備えることを特徴とするマルチディスプレイ。
A multi-display in which a plurality of display devices having a display panel that displays information in an effective display area are arranged,
A touch sensor provided so as to be able to detect a touch to an area wider than the effective display area of the display panel,
When a touch outside the effective display area located between the adjacent display devices is detected, a control unit that outputs assuming that the touch has been made within the effective display area of the display device that has detected the touch,
A multi-display comprising:
タッチに基づき生成された描画情報を表示する駆動部を更に備え、
前記制御部により、隣接する表示装置間に位置する有効表示領域外へのタッチが検出された場合、前記駆動部は、当該タッチを検出した表示装置の隣接する表示装置に描画情報を表示しないことを特徴とする請求項1に記載のマルチディスプレイ。
A driving unit that displays drawing information generated based on the touch,
When the control unit detects a touch outside the effective display area located between the adjacent display devices, the driving unit does not display the drawing information on the display device adjacent to the display device that has detected the touch. The multi-display according to claim 1, wherein:
前記制御部は、前記タッチが他の表示装置の有効表示領域になる場合は、当該タッチの位置の近傍の境界位置にタッチしたものとみなして出力することを特徴とする請求項1又は2に記載のマルチディスプレイ。   The method according to claim 1, wherein, when the touch is an effective display area of another display device, the control unit outputs the touch by regarding the touch as a touch on a boundary position near the position of the touch. Multi-display as described. 情報を有効表示領域に表示する表示パネルを備えた表示装置を複数配置したマルチディスプレイにおける制御方法であって、
前記表示パネルの有効表示領域よりも広い領域へのタッチを検出するタッチ検出ステップと、
隣接する表示装置間に位置する有効表示領域外へのタッチが検出された場合、当該タッチを検出した表示装置の有効表示領域内へタッチしたものとみなして出力する制御ステップと、
を含むことを特徴とする制御方法。
A control method in a multi-display in which a plurality of display devices each including a display panel that displays information in an effective display area is provided,
A touch detection step of detecting a touch on an area larger than the effective display area of the display panel,
When a touch outside the effective display area located between the adjacent display devices is detected, a control step of outputting assuming that the touch has been made within the effective display area of the display device that has detected the touch,
A control method comprising:
コンピュータに、請求項4に記載の制御方法のステップを実行させるためのプログラム。 The computer program for executing the steps of the control method according to claim 4.
JP2018160839A 2018-08-29 2018-08-29 Multi-display, control method and program Active JP6625178B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2018160839A JP6625178B2 (en) 2018-08-29 2018-08-29 Multi-display, control method and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018160839A JP6625178B2 (en) 2018-08-29 2018-08-29 Multi-display, control method and program

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2017209684A Division JP6396567B2 (en) 2017-10-30 2017-10-30 Information display control device, information display control method, and program

Publications (2)

Publication Number Publication Date
JP2018195346A JP2018195346A (en) 2018-12-06
JP6625178B2 true JP6625178B2 (en) 2019-12-25

Family

ID=64571421

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018160839A Active JP6625178B2 (en) 2018-08-29 2018-08-29 Multi-display, control method and program

Country Status (1)

Country Link
JP (1) JP6625178B2 (en)

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000242393A (en) * 1999-02-23 2000-09-08 Canon Inc Information processor and its control method
JP2005346583A (en) * 2004-06-04 2005-12-15 Canon Inc Image display apparatus, multi-display system, coordinate information output method, and control program thereof
US20090322689A1 (en) * 2008-06-30 2009-12-31 Wah Yiu Kwong Touch input across touch-sensitive display devices

Also Published As

Publication number Publication date
JP2018195346A (en) 2018-12-06

Similar Documents

Publication Publication Date Title
US20180074686A1 (en) Content Relocation on a Surface
JP5922598B2 (en) Multi-touch usage, gestures and implementation
KR101304461B1 (en) Method and apparatus of gesture-based user interface
US20140047379A1 (en) Information processing device, information processing method, and computer-readable recording medium which records program
US20120036468A1 (en) User input remapping
KR20100113543A (en) Method of launching a selected application in a multi-monitor computer system and multi-monitor computer system employing the same
KR20100108417A (en) Method of managing applications in a multi-monitor computer system and multi-monitor computer system employing the method
KR20110112980A (en) Apparatus and method for sensing touch
US9984335B2 (en) Data processing device
US11204653B2 (en) Method and device for handling event invocation using a stylus pen
CN109683841B (en) Control display method and computing device in multi-display environment
US20150058762A1 (en) Interface device, interface method, interface program, and computer-readable recording medium storing the program
JP6625178B2 (en) Multi-display, control method and program
US20150161937A1 (en) Overlapping detection display and method
JP6396567B2 (en) Information display control device, information display control method, and program
US10303295B2 (en) Modifying an on-screen keyboard based on asymmetric touch drift
KR20130097624A (en) Device and method for moving display window on screen
US10296143B2 (en) Touch sensing device and sensing method of touch point
JP6236308B2 (en) Information display control device, information display control method, program, and information display system
JP6425778B2 (en) INFORMATION PROCESSING APPARATUS, INFORMATION PROCESSING METHOD, AND PROGRAM THEREOF
US11256399B2 (en) Information processing apparatus and non-transitory computer readable medium
JP2018018474A (en) Image processing device, image processing method, and program
JP6473680B2 (en) Input display device and input display method
US20150277696A1 (en) Content placement based on user input
JP2019087280A (en) Touch input display device, display control method and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180829

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20190313

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190423

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190620

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20191105

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20191126

R150 Certificate of patent or registration of utility model

Ref document number: 6625178

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150