WO2012039230A1 - 表示装置 - Google Patents
表示装置 Download PDFInfo
- Publication number
- WO2012039230A1 WO2012039230A1 PCT/JP2011/069166 JP2011069166W WO2012039230A1 WO 2012039230 A1 WO2012039230 A1 WO 2012039230A1 JP 2011069166 W JP2011069166 W JP 2011069166W WO 2012039230 A1 WO2012039230 A1 WO 2012039230A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- display
- coordinates
- application
- coordinate
- displays
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
- G06F3/0416—Control or interface arrangements specially adapted for digitisers
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
- G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
Definitions
- the present invention relates to a display device that displays information, a coordinate notification method and program in the display device, and more particularly, to a display device that displays information on a plurality of displays, and a coordinate notification method and program in the display device.
- An object of the present invention is to provide a display device, a coordinate notification method, and a program that solve the above-described problems.
- the display device of the present invention includes: A plurality of display units having a touch panel function and displaying an image as information; When one application displays the image across the plurality of display units, a coordinate conversion unit that converts physical coordinates indicating a position where the display unit senses contact into virtual coordinates using a predetermined calculation; , When one application displays the image on one of the plurality of display units, the display unit notifies the application of physical coordinates at which contact is detected, and one application displays the plurality of displays. A coordinate notification unit that notifies the application of the virtual coordinates when the image is displayed across the units.
- the coordinate notification method of the present invention includes: A coordinate notification method in a device having a plurality of displays having a touch panel function, Sensing contact with the plurality of displays; Determining whether one application displays the image across the plurality of displays; When one application displays the image across the plurality of displays, a conversion step of converting physical coordinates indicating a position where the contact is detected into virtual coordinates using a predetermined calculation; When one application displays the image on one of the plurality of displays, notifying the application of physical coordinates at which the touch is detected; When one application displays the image across the plurality of displays, the step of notifying the application of the virtual coordinates is performed.
- the program of the present invention is It is a program for causing a device having a touch panel function and a plurality of displays for displaying information images to be executed, Sensing a touch on the plurality of displays; A procedure for determining whether one application displays the image across the plurality of displays; When one application displays the image across the plurality of displays, a conversion procedure for converting physical coordinates indicating a position where the contact is detected into virtual coordinates using a predetermined calculation; When one application displays the image on one of the plurality of displays, a procedure for notifying the application of physical coordinates at which the touch is detected; When one application displays the image across the plurality of displays, a procedure for notifying the application of the virtual coordinates is executed.
- coordinates can be efficiently notified to an application in an apparatus equipped with a plurality of displays.
- FIG. 1 It is a figure which shows one Embodiment of the display apparatus of this invention. It is a flowchart for demonstrating the coordinate notification method in the display apparatus shown in FIG. It is a figure for demonstrating an example of the coordinate which a coordinate notification part notifies, when the application currently started displays an image only on one display part, and a contact is detected in the said display part. It is a figure for demonstrating an example of the coordinate which a coordinate notification part notifies, when the application currently started displays an image only on one display part, and a contact is detected in the said display part. It is a figure for demonstrating an example of the notification of a coordinate when a contact is detected in the display part containing the coordinate of the origin which an application recognizes.
- FIG. 1 is a diagram showing an embodiment of a display device of the present invention.
- the display device 100 includes a plurality of display units 110-1 and 110-2, a coordinate conversion unit 120, and a coordinate notification unit 130.
- the display device 100 includes an application 140 that operates in the display device 100.
- FIG. 1 shows a case where there is one application installed in the display device 100, it goes without saying that two or more applications may be installed.
- the display units 110-1 and 110-2 are displays that have a touch panel function and display an image as information.
- FIG. 1 shows a mode in which there are two display units, but there may be three or more.
- the coordinate conversion unit 120 is a physical unit that indicates the position at which the display units 110-1 and 110-2 sensed contact.
- the coordinates are converted into virtual coordinates using a predetermined calculation.
- the coordinate conversion unit 120 converts the physical coordinates in the display unit 110-2 into virtual coordinates.
- the coordinate conversion unit 120 converts physical coordinates on the display unit 110-1 into virtual coordinates.
- the coordinate conversion unit 120 converts the coordinates in the direction in which the display unit 110-1 and the display unit 110-2 are arranged among physical coordinates. That is, when the display unit 110-1 and the display unit 110-2 are arranged in the horizontal direction, the coordinate conversion unit 120 converts the horizontal coordinate. For example, when the horizontal direction is the X axis, the coordinate conversion unit 120 converts the X coordinate. When the display unit 110-1 and the display unit 110-2 are arranged in the vertical direction, the coordinate conversion unit 120 converts the vertical coordinate. For example, when the vertical direction is the Y axis, the coordinate conversion unit 120 converts the Y coordinate.
- the coordinate conversion unit 120 displays the coordinates corresponding to the size of the display unit 110-1 on the display unit 110-2. Conversion to virtual coordinates is performed by adding to the physical coordinates at.
- the coordinate conversion unit 120 uses the coordinates corresponding to the size of the display unit 110-2 as physical coordinates in the display unit 110-1. Is converted to virtual coordinates.
- the coordinate conversion unit 120 converts physical coordinates into virtual coordinates according to the movement of the physical coordinates corresponding to the origin recognized by the application 140 by the vertical and horizontal rotation of the display device 100.
- the coordinate conversion unit 120 outputs the converted virtual coordinates to the coordinate notification unit 130.
- the coordinate notification unit 130 When the application 140 displays an image only on the display unit 110-1, the coordinate notification unit 130 notifies the application 140 of the physical coordinates at which the display unit 110-1 sensed contact. In addition, when the application 140 displays an image only on the display unit 110-2, the coordinate notification unit 130 notifies the application 140 of physical coordinates at which the display unit 110-2 sensed contact. In addition, the coordinate notification unit 130 notifies the application 140 of the virtual coordinates when the virtual coordinates are output from the coordinate conversion unit 120.
- FIG. 2 is a flowchart for explaining a coordinate notification method in the display device 100 shown in FIG.
- Step 2 when the application 140 installed in the display device 100 is activated in Step 1, it is determined in Step 2 whether or not the display unit 110-1 or the display unit 110-2 senses contact.
- the activation method of the application 140 may be a general method such as by performing a predetermined input, and is not particularly specified here.
- the touch is detected in the display unit 110-1 or the display unit 110-2, it is determined using a touch panel function provided in the display units 110-1 and 110-2.
- the currently activated application 140 displays an image across the display unit 110-1 and the display unit 110-2. It is determined by the coordinate conversion unit 120 in step 3. This determination method is not particularly defined here. Also, the subject to be determined may not be the coordinate conversion unit 120. For example, the determination may be performed by a control unit (not shown) that controls the entire display device 100.
- the currently activated application 140 When it is determined that the currently activated application 140 does not display an image across the display unit 110-1 and the display unit 110-2, that is, the currently activated application 140 is only the display unit 110-1. In the case where the image is displayed on the display unit 110 or the image is displayed only on the display unit 110-2, the physical coordinates that sensed the contact are notified from the coordinate notification unit 130 to the application 140 in step 4.
- the currently activated application 140 displays an image only on the display unit 110-1 and contact is detected on the display unit 110-1, the contact is detected.
- the physical coordinates on the display unit 110-1 are notified from the coordinate notification unit 130 to the application 140 as they are.
- the currently activated application 140 displays an image only on the display unit 110-2 and contact is detected by the display unit 110-2, the physical on the display unit 110-2 where the contact is detected is displayed. The coordinates are notified from the coordinate notification unit 130 to the application 140 as they are.
- FIG. 3 shows an example of coordinates notified by the coordinate notification unit 130 when the currently activated application 140 displays an image only on the display unit 110-1 and contact is detected on the display unit 110-1.
- the physical coordinates of the upper left corner of the display unit 110-1 are (0, 0) (origin)
- the horizontal direction is the X axis
- the vertical direction is the Y axis.
- the physical coordinates of the lower right corner be (w, h).
- the size of the display unit 110-2 is the same as the size of the display unit 110-1
- the coordinates of the origin and the coordinate axes are the same as those of the display unit 110-1.
- the coordinate conversion unit 120 does not perform conversion from physical coordinates to virtual coordinates.
- FIG. 4 shows an example of coordinates notified by the coordinate notification unit 130 when the currently activated application 140 displays an image only on the display unit 110-2 and contact is detected on the display unit 110-2. It is a figure for demonstrating. Note that the origin and the coordinate axes in the display units 110-1 and 110-2 are the same as those shown in FIG. The display unit 110-1 and the display unit 110-2 have the same size.
- the coordinate conversion unit 120 does not perform conversion from physical coordinates to virtual coordinates.
- the application 140 When the physical coordinates are notified from the coordinate notification unit 130 to the application 140, the application 140 performs processing according to the physical coordinates in step 5.
- step 3 if it is determined in step 3 that the currently activated application 140 is displaying an image across the display unit 110-1 and the display unit 110-2, the display in which contact in step 2 is detected is displayed. It is determined by the coordinate conversion unit 120 in step 6 whether the part includes the coordinates of the origin recognized by the application 140 (the origin on the application 140).
- the origin coordinates recognized on the application 140 exist.
- the coordinates of the origin are included in the display unit in which contact is sensed, that is, when the origin of the physical coordinates in the display unit and the origin recognized by the application 140 are the same, conversion of the physical coordinates is not necessary. .
- the coordinates of the origin recognized by the application 140 are included in the display unit 110-1 (the origin on the display unit 110-1 is recognized by the application 140).
- the coordinate conversion unit 120 determines whether or not the origin is the same.
- the coordinates of the origin recognized by the application 140 are included in the display unit 110-2 (the origin on the display unit 110-2 is recognized by the application 140).
- the coordinate conversion unit 120 determines whether or not the origin is the same.
- step 6 When it is determined in step 6 that the display unit in which the contact is detected in step 2 includes the coordinates of the origin recognized by the application 140, the physical coordinate in which the contact is detected is determined in step 4 as the coordinate notification unit. 130 notifies the application 140.
- FIG. 5 is a diagram for explaining an example of the notification of coordinates when a contact is detected by the display unit 110-1 including the coordinates of the origin recognized by the application 140.
- the currently activated application 140 displays an image across the display unit 110-1 that is the first (Primary) display and the display unit 110-2 that is the second (Secondary) display.
- the coordinates of the origin recognized by the application 140 are the origin of the physical coordinates on the display unit 110-1.
- step 6 if it is determined in step 6 that the display unit in which the contact in step 2 is sensed does not include the coordinates of the origin recognized by the application 140, the coordinate conversion unit 120 performs predetermined processing in step 7.
- the physical coordinates are converted into virtual coordinates using an operation.
- FIG. 6 is a diagram for explaining an example of the notification of coordinates when the display unit 110-2 that does not include the coordinates of the origin recognized by the application 140 is detected.
- the currently activated application 140 displays an image across the display unit 110-1 that is the first (Primary) display and the display unit 110-2 that is the second (Secondary) display.
- the coordinates of the origin recognized by the application 140 are the origin of the physical coordinates on the display unit 110-1.
- the display unit 110-1 and the display unit 110-2 are arranged in the horizontal direction (X-axis direction), and the coordinates according to the size of the display unit 110-1 in the X-axis direction. Is “w”. Therefore, the conversion formula from physical coordinates to virtual coordinates for the X coordinate is as shown in (Formula 1).
- the coordinate conversion unit 120 obtains the virtual coordinates by adding the size of the display unit 110-1 to the physical coordinates.
- the display unit 110-1 and the display unit 110-2 are not arranged in the vertical direction (Y-axis direction), and thus the Y coordinate is not converted.
- the physical coordinates (x, y) are converted into virtual coordinates (x + w, y) by the coordinate conversion unit 120.
- step 7 when the coordinate conversion unit 120 converts physical coordinates into virtual coordinates, the converted virtual coordinates are output from the coordinate conversion unit 120 to the coordinate notification unit 130.
- step 8 the virtual notification is notified from the coordinate notification unit 130 to the application 140, and in step 5, processing corresponding to the virtual coordinate is performed in the application 140.
- the above-described processing can be applied to the case where there are three display units, four display units, or more display units.
- FIG. 7 is a diagram for explaining an example of coordinate conversion when there are three display units.
- the display device 100 includes three display units 110-1 to 110-3.
- the display unit 110-1 that is a first (Primary) display and the second (Secondary)
- a display unit 110-2 which is a display of the first display
- a display unit 110-3 which is a third (tertiary) display, are mounted side by side in the horizontal direction (X-axis direction).
- the coordinates of the origin recognized by the application 140 are the same as the origin (upper left corner) of the physical coordinates on the display unit 110-1.
- each is (w ⁇ h).
- the display unit 110 includes display units 110-1 to 110-3, a notification is made when contact is detected by the display unit 110-1 or the display unit 110-2.
- the coordinates are the same as those provided with two displays as described above. That is, as described above, when a contact is detected on the display unit 110-1, the coordinate notification unit 130 directly notifies the application 140 of the physical coordinates at which the contact is detected.
- the coordinate notification unit 130 converts the physical coordinates where the contact is detected into virtual coordinates using (Equation 1). The application 140 is notified.
- the coordinate conversion unit 120 converts the X coordinate from the physical coordinate to the virtual coordinate.
- the conversion is performed using the following (Formula 2).
- the display unit 110-1, the display unit 110-2, and the display unit 110-3 are not arranged in the vertical direction (Y-axis direction), conversion of the Y coordinate is not performed.
- the virtual coordinates notified from the coordinate notification unit 130 to the application 140 are (x + w + w, y).
- the application 140 performs processing according to the coordinates (x + w + w, y).
- FIG. 8 is a diagram for explaining an example of coordinate conversion when there are four display units.
- the display unit 110-1 as a first (Primary) display and the second (Secondary)
- the display unit 110-2 which is a display of the above, is mounted side by side in the horizontal direction (X-axis direction).
- a display unit 110-3 that is a third (tertiary) display and a display unit 110-4 that is a fourth (fourth) display are mounted side by side in the horizontal direction (X-axis direction).
- a display unit 110-1 that is a first (Primary) display and a display unit 110-3 that is a third (Tertiary) display are mounted side by side in the vertical direction (Y-axis direction).
- a display unit 110-2 that is a second (Secondary) display and a display unit 110-4 that is a fourth (Fourth) display are mounted side by side in the vertical direction (Y-axis direction).
- the coordinates of the origin recognized by the application 140 are the same as the origin (upper left corner) of the physical coordinates on the display unit 110-1.
- each is (w ⁇ h).
- the display unit 100 includes display units 110-1 to 110-4, a notification is made when contact is detected by the display unit 110-1 or the display unit 110-2.
- the coordinates are the same as those provided with two displays as described above. That is, as described above, when a contact is detected on the display unit 110-1, the coordinate notification unit 130 directly notifies the application 140 of the physical coordinates at which the contact is detected.
- the coordinate notification unit 130 converts the physical coordinates where the contact is detected into virtual coordinates using (Equation 1). The application 140 is notified.
- the coordinate conversion unit 120 converts the Y coordinate from the physical coordinate to the virtual coordinate.
- the virtual coordinates notified from the coordinate notification unit 130 to the application 140 are (x, y + h).
- the application 140 performs processing according to the coordinates (x, y + h).
- FIG. 9 is a diagram for explaining another example of coordinate conversion when there are four display units.
- the coordinates of the origin recognized by the application 140 are the same as the origin (upper left corner) of the physical coordinates on the display unit 110-1.
- the display unit 110 includes display units 110-1 to 110-4, a notification is made when contact is detected by the display unit 110-1 or the display unit 110-2.
- the coordinates are the same as those provided with two displays as described above. That is, as described above, when a contact is detected on the display unit 110-1, the coordinate notification unit 130 directly notifies the application 140 of the physical coordinates at which the contact is detected.
- the coordinate notification unit 130 converts the physical coordinates where the contact is detected into virtual coordinates using (Equation 1). The application 140 is notified.
- the coordinate conversion unit 120 performs conversion from physical coordinates to virtual coordinates for each of the X coordinate and the Y coordinate.
- the conversion is performed using the following (formula 4) and (formula 5).
- the virtual coordinates notified from the coordinate notification unit 130 to the application 140 are (x + w, y + h).
- the application 140 performs processing according to the coordinates (x + w, y + h).
- the display device of the present invention also has this function.
- the application 140 displays an image across the display unit 110-1 and the display unit 110-2
- the physical coordinates corresponding to the origin recognized by the application 140 are the display units 110-1 and 110-2.
- coordinate conversion may be necessary.
- FIG. 10 is a diagram illustrating an example of coordinate transformation when the vertical and horizontal directions of the display device 100 are rotated 90 degrees clockwise.
- the physical coordinates (x, y) on the display unit 110-1 shown in FIG. 10 are directly notified to the application 140 by the coordinate notification unit 130 unless the display device 100 is rotated.
- the physical coordinates (x, y) on the display unit 110-1 are converted into virtual coordinates by the coordinate conversion unit 120.
- the physical coordinate (y) on the display unit 110-1 becomes the X coordinate of the virtual coordinate.
- the Y coordinate is converted by the coordinate conversion unit 120 using (Equation 6).
- the virtual coordinates notified from the coordinate notification unit 130 to the application 140 are (y, w ⁇ x + w).
- the application 140 performs processing according to the coordinates (y, w ⁇ x + w).
- FIG. 11 is a diagram illustrating an example of coordinate conversion when the vertical and horizontal directions of the display device 100 are rotated 180 degrees clockwise.
- the physical coordinates (x, y) on the display unit 110-1 shown in FIG. 11 are directly notified to the application 140 by the coordinate notification unit 130 unless the display device 100 is rotated.
- the physical coordinates (x, y) on the display unit 110-1 are converted into virtual coordinates by the coordinate conversion unit 120.
- the X coordinate is converted by the coordinate conversion unit 120 using (Expression 7).
- the Y coordinate is converted by the coordinate conversion unit 120 using (Equation 8).
- the virtual coordinates notified from the coordinate notification unit 130 to the application 140 are (w ⁇ x + w, hy).
- the application 140 performs processing according to the coordinates (w ⁇ x + w, hy).
- FIG. 12 is a diagram illustrating an example of coordinate conversion when the vertical and horizontal directions of the display device 100 are rotated 270 degrees clockwise.
- the physical coordinates (x, y) on the display unit 110-2 shown in FIG. 12 are converted into virtual coordinates by the coordinate conversion unit 120 when the display device 100 is rotated 270 degrees clockwise.
- the X coordinate is converted by the coordinate conversion unit 120 using (Equation 9).
- the Y coordinate is converted by the coordinate conversion unit 120 using (Equation 10).
- the virtual coordinates notified from the coordinate notification unit 130 to the application 140 are (hy, w + x).
- the application 140 performs processing according to the coordinates (hy, w + x).
- FIG. 13 is a table showing an equation for coordinate conversion by the vertical and horizontal rotations of the display device 100 described above.
- the converted virtual coordinates are indicated by (x ′, y ′).
- display identification information (identification ID etc.) which can identify each of a plurality of displays is given to each, and conversion into virtual coordinates is performed using the display identification information and physical coordinates of the position where contact is detected. It may be what you do.
- the processing performed by each component provided in the display device 100 described above may be performed by a logic circuit that is produced according to the purpose. Further, a program describing the processing contents may be recorded on a recording medium readable by the display device 100, and the program recorded on the recording medium may be read by the display device 100 and executed.
- the recording medium that can be read by the display device 100 includes a transfer medium such as a floppy (registered trademark) disk, a magneto-optical disk, a DVD, and a CD, and a memory such as a ROM and a RAM built in the display device 100. And HDD.
- the program recorded on the recording medium is read by a CPU (not shown) provided in the display device 100, and the same processing as described above is performed under the control of the CPU.
- the CPU operates as a computer that executes a program read from a recording medium on which the program is recorded.
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- User Interface Of Digital Computer (AREA)
- Digital Computer Display Output (AREA)
Abstract
1つのアプリケーションが表示部(110-1,110-2)を跨いで画像を表示させている場合、座標変換部(120)が、表示部(110-1,110-2)が接触を感知した位置を示す物理座標を所定の演算を用いて仮想座標へ変換して出力し、座標通知部(130)が、1つのアプリケーションが表示部(110-1,110-2)のうち一方に画像を表示させている場合、接触を感知した物理座標をアプリケーション(140)へ通知し、1つのアプリケーションが表示部(110-1,110-2)を跨いで画像を表示させている場合、座標変換部(120)が出力した仮想座標をアプリケーション(140)へ通知する。
Description
本発明は、情報を表示する表示装置、表示装置における座標通知方法およびプログラムに関し、特に、複数のディスプレイに情報を表示する表示装置、表示装置における座標通知方法およびプログラムに関する。
近年、複数の表示部(ディスプレイ)が並べられ、並べられた複数のディスプレイを連携させて制御することで、あたかもディスプレイのサイズが大きくなったかのように使用する技術が考えられている。
このような技術においては、例えば、このディスプレイがタッチパネル機能を具備している場合、それぞれのディスプレイにおける物理座標を、並べられた複数のディスプレイ全体における仮想座標へ変換してから、画像を表示させているアプリケーションへ通知している(例えば、特許文献1参照。)。
一方、複数のディスプレイのうち1つのディスプレイのみを用いて表示を行う場合は、物理座標から仮想座標への変換は不要である。
しかしながら、上述した技術においては、物理座標から仮想座標への変換を必ず行っている。そのため、不要な処理によるリソースの浪費が生じてしまうという問題点がある。
本発明の目的は、上述した課題を解決する表示装置、座標通知方法およびプログラムを提供することである。
本発明の表示装置は、
タッチパネル機能を具備し、情報となる画像を表示する複数の表示部と、
1つのアプリケーションが前記複数の表示部を跨いで前記画像を表示させている場合、前記表示部が接触を感知した位置を示す物理座標を所定の演算を用いて仮想座標へ変換する座標変換部と、
1つのアプリケーションが前記複数の表示部のうち1つの表示部に前記画像を表示させている場合、前記表示部が接触を感知した物理座標を該アプリケーションへ通知し、1つのアプリケーションが前記複数の表示部を跨いで前記画像を表示させている場合、前記仮想座標を該アプリケーションへ通知する座標通知部とを有する。
タッチパネル機能を具備し、情報となる画像を表示する複数の表示部と、
1つのアプリケーションが前記複数の表示部を跨いで前記画像を表示させている場合、前記表示部が接触を感知した位置を示す物理座標を所定の演算を用いて仮想座標へ変換する座標変換部と、
1つのアプリケーションが前記複数の表示部のうち1つの表示部に前記画像を表示させている場合、前記表示部が接触を感知した物理座標を該アプリケーションへ通知し、1つのアプリケーションが前記複数の表示部を跨いで前記画像を表示させている場合、前記仮想座標を該アプリケーションへ通知する座標通知部とを有する。
また、本発明の座標通知方法は、
タッチパネル機能を持った複数のディスプレイを具備した装置における座標通知方法であって、
前記複数のディスプレイに対する接触を感知するステップと、
1つのアプリケーションが前記複数のディスプレイを跨いで前記画像を表示させているかどうかを判断するステップと、
1つのアプリケーションが前記複数のディスプレイを跨いで前記画像を表示させている場合、前記接触を感知した位置を示す物理座標を所定の演算を用いて仮想座標へ変換する変換ステップと、
1つのアプリケーションが前記複数のディスプレイのうち1つのディスプレイに前記画像を表示させている場合、前記接触を感知した物理座標を該アプリケーションへ通知するステップと、
1つのアプリケーションが前記複数のディスプレイを跨いで前記画像を表示させている場合、前記仮想座標を該アプリケーションへ通知するステップとを行う。
タッチパネル機能を持った複数のディスプレイを具備した装置における座標通知方法であって、
前記複数のディスプレイに対する接触を感知するステップと、
1つのアプリケーションが前記複数のディスプレイを跨いで前記画像を表示させているかどうかを判断するステップと、
1つのアプリケーションが前記複数のディスプレイを跨いで前記画像を表示させている場合、前記接触を感知した位置を示す物理座標を所定の演算を用いて仮想座標へ変換する変換ステップと、
1つのアプリケーションが前記複数のディスプレイのうち1つのディスプレイに前記画像を表示させている場合、前記接触を感知した物理座標を該アプリケーションへ通知するステップと、
1つのアプリケーションが前記複数のディスプレイを跨いで前記画像を表示させている場合、前記仮想座標を該アプリケーションへ通知するステップとを行う。
また、本発明のプログラムは、
タッチパネル機能を持ち、情報となる画像を表示する複数のディスプレイを搭載した装置に実行させるためのプログラムであって、
前記複数のディスプレイに対する接触を感知する手順と、
1つのアプリケーションが前記複数のディスプレイを跨いで前記画像を表示させているかどうかを判断する手順と、
1つのアプリケーションが前記複数のディスプレイを跨いで前記画像を表示させている場合、前記接触を感知した位置を示す物理座標を所定の演算を用いて仮想座標へ変換する変換手順と、
1つのアプリケーションが前記複数のディスプレイのうち1つのディスプレイに前記画像を表示させている場合、前記接触を感知した物理座標を該アプリケーションへ通知する手順と、
1つのアプリケーションが前記複数のディスプレイを跨いで前記画像を表示させている場合、前記仮想座標を該アプリケーションへ通知する手順とを実行させる。
タッチパネル機能を持ち、情報となる画像を表示する複数のディスプレイを搭載した装置に実行させるためのプログラムであって、
前記複数のディスプレイに対する接触を感知する手順と、
1つのアプリケーションが前記複数のディスプレイを跨いで前記画像を表示させているかどうかを判断する手順と、
1つのアプリケーションが前記複数のディスプレイを跨いで前記画像を表示させている場合、前記接触を感知した位置を示す物理座標を所定の演算を用いて仮想座標へ変換する変換手順と、
1つのアプリケーションが前記複数のディスプレイのうち1つのディスプレイに前記画像を表示させている場合、前記接触を感知した物理座標を該アプリケーションへ通知する手順と、
1つのアプリケーションが前記複数のディスプレイを跨いで前記画像を表示させている場合、前記仮想座標を該アプリケーションへ通知する手順とを実行させる。
以上説明したように、本発明においては、複数のディスプレイを搭載した装置において、アプリケーションに対して座標を効率的に通知することができる。
以下に、本発明の実施の形態について図面を参照して説明する。
図1は、本発明の表示装置の実施の一形態を示す図である。
本形態における表示装置100には図1に示すように、複数の表示部110-1,110-2と、座標変換部120と、座標通知部130とが設けられている。また、表示装置100には、表示装置100内で動作するアプリケーション140が搭載されている。なお、図1には、表示装置100に搭載されるアプリケーションが1つである場合を示しているが、2つ以上のアプリケーションが搭載されたものであっても良いことは言うまでもない。
表示部110-1,110-2は、タッチパネル機能を具備し、情報となる画像を表示するディスプレイである。また、図1には、表示部が2つである形態を示したが、3つ以上であっても良い。
座標変換部120は、アプリケーション140が表示部110-1と表示部110-2とを跨いで画像を表示させている場合、表示部110-1,110-2が接触を感知した位置を示す物理座標を所定の演算を用いて仮想座標へ変換する。
このとき、座標変換部120は、表示部110-1が、アプリケーション140が認識する原点の座標を含む画像を表示している場合、表示部110-2における物理座標を仮想座標へ変換する。また、座標変換部120は、表示部110-2が、アプリケーション140が認識する原点の座標を含む画像を表示している場合、表示部110-1における物理座標を仮想座標へ変換する。
また、このとき、座標変換部120は、物理座標のうち、表示部110-1と表示部110-2とが並んでいる方向の座標を変換する。つまり、表示部110-1と表示部110-2とが横方向に並んでいる場合、座標変換部120は、横方向の座標を変換する。例えば、横方向をX軸としている場合、座標変換部120は、X座標を変換する。また、表示部110-1と表示部110-2とが縦方向に並んでいる場合、座標変換部120は、縦方向の座標を変換する。例えば、縦方向をY軸としている場合、座標変換部120は、Y座標を変換する。
また、このとき、座標変換部120は、表示部110-1が、アプリケーション140が認識する原点の座標を含むものである場合、表示部110-1のサイズに応じた座標分を、表示部110-2における物理座標に加算することにより仮想座標への変換を行う。また、座標変換部120は、表示部110-2が、アプリケーション140が認識する原点の座標を含むものである場合、表示部110-2のサイズに応じた座標分を、表示部110-1における物理座標に加算することにより仮想座標への変換を行う。
また、座標変換部120は、表示装置100の縦横の回転によるアプリケーション140が認識する原点に対応する物理座標の移動に応じて、物理座標を仮想座標へ変換する。
また、座標変換部120は、変換した仮想座標を座標通知部130へ出力する。
座標通知部130は、アプリケーション140が表示部110-1のみに画像を表示させている場合、表示部110-1が接触を感知した物理座標をアプリケーション140へ通知する。また、座標通知部130は、アプリケーション140が表示部110-2のみに画像を表示させている場合、表示部110-2が接触を感知した物理座標をアプリケーション140へ通知する。また、座標通知部130は、座標変換部120から仮想座標が出力されてきた場合、当該仮想座標をアプリケーション140へ通知する。
以下に、図1に示した表示装置100における座標通知方法について説明する。
図2は、図1に示した表示装置100における座標通知方法を説明するためのフローチャートである。
まず、ステップ1にて表示装置100に搭載されたアプリケーション140が起動すると、表示部110-1または表示部110-2にて接触を感知したかどうかが、ステップ2にて判断される。
このアプリケーション140の起動方法は、所定の入力を行うことによるもの等、一般的な方法であれば良く、ここでは特に規定しない。
また、表示部110-1または表示部110-2にて接触を感知したかどうかを判断するには、表示部110-1,110-2に具備されたタッチパネル機能を用いて判断される。
表示部110-1または表示部110-2にて接触を感知したと判断されると、現在起動中のアプリケーション140が表示部110-1と表示部110-2とを跨いで画像を表示させているかどうかが、ステップ3にて座標変換部120によって判断される。この判断方法は、ここでは特に規定しない。また、判断する主体についても、座標変換部120でなくても良い。例えば、表示装置100全体を制御する制御部(不図示)によって、当該判断が行われるものであっても良い。
現在起動中のアプリケーション140が表示部110-1と表示部110-2とを跨いで画像を表示させていないと判断された場合、つまり、現在起動中のアプリケーション140が、表示部110-1のみに画像を表示させている、または表示部110-2のみに画像を表示させている場合、接触を感知した物理座標が、ステップ4にて座標通知部130からアプリケーション140へ通知される。
具体例を挙げて説明すると、例えば、現在起動中のアプリケーション140が表示部110-1のみに画像を表示させており、表示部110-1にて接触が感知された場合、接触が感知された表示部110-1上の物理座標がそのまま座標通知部130からアプリケーション140へ通知される。また、現在起動中のアプリケーション140が表示部110-2のみに画像を表示させており、表示部110-2にて接触が感知された場合、接触が感知された表示部110-2上の物理座標がそのまま座標通知部130からアプリケーション140へ通知される。
図3は、現在起動中のアプリケーション140が表示部110-1のみに画像を表示させており、表示部110-1にて接触が感知された場合、座標通知部130が通知する座標の一例を説明するための図である。なお、ここでは、表示部110-1の左上の隅の物理座標を(0,0)(原点)とし、横方向にX軸、また縦方向にY軸としている。また、右下の隅の物理座標を(w,h)とする。また、表示部110-2の大きさは、表示部110-1のサイズと同じ大きさであり、原点の座標および座標軸の取り方は、表示部110-1と同じである。
図3に示すように、表示部110-1上の物理座標(x,y)にて接触が感知された場合、その物理座標(x,y)がそのまま座標通知部130からアプリケーション140へ通知される。つまり、座標変換部120における、物理座標から仮想座標への変換は行われない。
図4は、現在起動中のアプリケーション140が表示部110-2のみに画像を表示させており、表示部110-2にて接触が感知された場合、座標通知部130が通知する座標の一例を説明するための図である。なお、表示部110-1,110-2における原点および座標軸の取り方は、図3に示したものと同じである。また、表示部110-1と表示部110-2とは、同じ大きさである。
図4に示すように、表示部110-2上の物理座標(x,y)にて接触が感知された場合、その物理座標(x,y)がそのまま座標通知部130からアプリケーション140へ通知される。つまり、座標変換部120における、物理座標から仮想座標への変換は行われない。
座標通知部130からアプリケーション140へ物理座標が通知されると、ステップ5にて当該物理座標に応じた処理がアプリケーション140にて行われる。
一方、ステップ3にて、現在起動中のアプリケーション140が表示部110-1と表示部110-2とを跨いで画像を表示させていると判断された場合、ステップ2における接触が感知された表示部が、アプリケーション140が認識する原点(アプリケーション140上の原点)の座標を含むものであるかどうかが、ステップ6にて座標変換部120によって判断される。
起動中のアプリケーション140が画像を表示させるには、アプリケーション140上で認識する原点の座標が存在する。その原点の座標が、接触が感知された表示部に含まれる場合、つまり、当該表示部における物理座標の原点とアプリケーション140が認識する原点とが同じである場合、物理座標の変換は不要となる。
例えば、ステップ2にて表示部110-1にて接触が感知された場合、アプリケーション140が認識する原点の座標が表示部110-1に含まれる(表示部110-1における原点とアプリケーション140が認識する原点とが同じ)かどうかが、座標変換部120にて判断される。また、ステップ2にて表示部110-2にて接触が感知された場合、アプリケーション140が認識する原点の座標が表示部110-2に含まれる(表示部110-2における原点とアプリケーション140が認識する原点とが同じ)かどうかが、座標変換部120にて判断される。
ステップ6にて、ステップ2における接触が感知された表示部が、アプリケーション140が認識する原点の座標を含むものであると判断された場合、ステップ4にて、接触を感知した物理座標が、座標通知部130からアプリケーション140へ通知される。
図5は、アプリケーション140が認識する原点の座標が含まれる表示部110-1にて接触を感知した場合の座標の通知の一例を説明するための図である。ここでは、現在起動中のアプリケーション140が、第1(Primary)のディスプレイである表示部110-1と、第2(Secondary)のディスプレイである表示部110-2とを跨いで画像を表示させており、アプリケーション140が認識する原点の座標が、表示部110-1における物理座標の原点である。
図5に示すように、表示部110-1上の物理座標(x,y)にて接触が感知されると、その物理座標(x,y)がそのまま座標通知部130からアプリケーション140へ通知される。これは、上述したように、表示部110-1における物理座標の原点とアプリケーション140が認識する原点とが同じであるため、物理座標から仮想座標への変換が不要であるからである。
一方、ステップ6にて、ステップ2における接触が感知された表示部が、アプリケーション140が認識する原点の座標を含むものではないと判断された場合、ステップ7にて座標変換部120によって、所定の演算を用いて当該物理座標が仮想座標へ変換される。
図6は、アプリケーション140が認識する原点の座標が含まれない表示部110-2にて接触を感知した場合の座標の通知の一例を説明するための図である。ここでは、現在起動中のアプリケーション140が、第1(Primary)のディスプレイである表示部110-1と、第2(Secondary)のディスプレイである表示部110-2とを跨いで画像を表示させており、アプリケーション140が認識する原点の座標が、表示部110-1における物理座標の原点である。
図6に示すように、表示部110-2上の物理座標(x,y)にて接触が感知されると、座標変換部120によって、その物理座標(x,y)が仮想座標へ変換される。
図6に示した例では、表示部110-1と表示部110-2とが、横方向(X軸方向)に並んでおり、表示部110-1のX軸方向の大きさに応じた座標が「w」である。そのため、X座標についての物理座標から仮想座標への変換式は(式1)のようになる。
x(物理座標)+w(表示部110-1のX軸方向の大きさ)=(x+w) (式1)
このように、座標変換部120は、物理座標に表示部110-1の大きさを加算することで仮想座標を求める。
このように、座標変換部120は、物理座標に表示部110-1の大きさを加算することで仮想座標を求める。
なお、表示部110-1と表示部110-2とは、縦方向(Y軸方向)には並んでいないため、Y座標の変換は行われない。
したがって、座標変換部120によって、物理座標(x,y)が、仮想座標(x+w,y)へ変換される。
ステップ7にて、座標変換部120によって物理座標から仮想座標への変換が行われると、変換された仮想座標が座標変換部120から座標通知部130へ出力される。
すると、ステップ8にて、座標通知部130から当該仮想座標がアプリケーション140へ通知され、ステップ5にて当該仮想座標に応じた処理がアプリケーション140にて行われる。
上述した処理は、表示部が3つである場合や、4つである場合、またそれ以上である場合にも適用することが可能である。
図7は、表示部が3つである場合の座標の変換の一例を説明するための図である。
図7に示した例では、表示装置100に3つの表示部110-1~110-3が搭載されており、第1(Primary)のディスプレイである表示部110-1と、第2(Secondary)のディスプレイである表示部110-2と、第3(Tertiary)のディスプレイである表示部110-3とが、横方向(X軸方向)に並んで搭載されている。
また、アプリケーション140が認識する原点の座標は、表示部110-1における物理座標の原点(左上の隅)と同じである。
また、3つの表示部110-1~110-3の大きさを座標で示すと、それぞれが(w×h)である。
図7に示したように、表示装置100に表示部110-1~110-3が具備されている場合、表示部110-1または表示部110-2にて接触が感知されたときに通知する座標については、上述したような2つのディスプレイが具備されているものと同様である。つまり、上述したように、表示部110-1にて接触が感知された場合は、接触が感知された物理座標を座標通知部130がそのままアプリケーション140へ通知する。また、表示部110-2にて接触が感知された場合は、接触が感知された物理座標を座標変換部120が(式1)を用いて仮想座標へ変換してから、座標通知部130がアプリケーション140へ通知する。
また、表示部110-3における物理座標(x,y)にて接触が感知された場合、X座標について物理座標から仮想座標への変換が座標変換部120にて行われる。
具体的には、以下の(式2)を用いて変換がおこなわれる。
x(物理座標)+w(表示部110-1のX軸方向の大きさ)+w(表示部110-2のX軸方向の大きさ)=(x+w+w) (式2)
この(x+w+w)が、仮想座標のX座標となる。
この(x+w+w)が、仮想座標のX座標となる。
また、表示部110-1と表示部110-2と表示部110-3とが縦方向(Y軸方向)には並んでいないため、Y座標についての変換は行われない。
したがって、座標通知部130からアプリケーション140へ通知される仮想座標は、(x+w+w,y)となる。アプリケーション140は、この座標(x+w+w,y)に応じた処理を行う。
図8は、表示部が4つである場合の座標の変換の一例を説明するための図である。
図8に示した例では、表示装置100に4つの表示部110-1~110-4が搭載されており、第1(Primary)のディスプレイである表示部110-1と、第2(Secondary)のディスプレイである表示部110-2とが横方向(X軸方向)に並んで搭載されている。また、第3(Tertiary)のディスプレイである表示部110-3と、第4(Fourth)のディスプレイである表示部110-4とが、横方向(X軸方向)に並んで搭載されている。また、第1(Primary)のディスプレイである表示部110-1と、第3(Tertiary)のディスプレイである表示部110-3とが縦方向(Y軸方向)に並んで搭載されている。また、第2(Secondary)のディスプレイである表示部110-2と、第4(Fourth)のディスプレイである表示部110-4とが縦方向(Y軸方向)に並んで搭載されている。
また、アプリケーション140が認識する原点の座標は、表示部110-1における物理座標の原点(左上の隅)と同じである。
また、4つの表示部110-1~110-4の大きさを座標で示すと、それぞれが(w×h)である。
図8に示したように、表示装置100に表示部110-1~110-4が具備されている場合、表示部110-1または表示部110-2にて接触が感知されたときに通知する座標については、上述したような2つのディスプレイが具備されているものと同様である。つまり、上述したように、表示部110-1にて接触が感知された場合は、接触が感知された物理座標を座標通知部130がそのままアプリケーション140へ通知する。また、表示部110-2にて接触が感知された場合は、接触が感知された物理座標を座標変換部120が(式1)を用いて仮想座標へ変換してから、座標通知部130がアプリケーション140へ通知する。
また、表示部110-3における物理座標(x,y)にて接触が感知された場合、Y座標について物理座標から仮想座標への変換が座標変換部120にて行われる。
具体的には、以下の(式3)を用いて変換がおこなわれる。
y(物理座標)+h(表示部110-1のY軸方向の大きさ)=(y+h) (式3)
この(y+h)が、仮想座標のY座標となる。
この(y+h)が、仮想座標のY座標となる。
また、表示部110-1と表示部110-3とが横方向(X軸方向)には並んでいないため、X座標についての変換は行われない。
したがって、座標通知部130からアプリケーション140へ通知される仮想座標は、(x,y+h)となる。アプリケーション140は、この座標(x,y+h)に応じた処理を行う。
図9は、表示部が4つである場合の座標の変換の他の例を説明するための図である。
図9に示した例では、表示部110-1~110-4の並びおよびそれぞれの大きさは図8に示したものと同じである。
また、アプリケーション140が認識する原点の座標は、表示部110-1における物理座標の原点(左上の隅)と同じである。
図9に示したように、表示装置100に表示部110-1~110-4が具備されている場合、表示部110-1または表示部110-2にて接触が感知されたときに通知する座標については、上述したような2つのディスプレイが具備されているものと同様である。つまり、上述したように、表示部110-1にて接触が感知された場合は、接触が感知された物理座標を座標通知部130がそのままアプリケーション140へ通知する。また、表示部110-2にて接触が感知された場合は、接触が感知された物理座標を座標変換部120が(式1)を用いて仮想座標へ変換してから、座標通知部130がアプリケーション140へ通知する。
また、表示部110-4における物理座標(x,y)にて接触が感知された場合、X座標およびY座標それぞれについて物理座標から仮想座標への変換が座標変換部120にて行われる。
具体的には、以下の(式4)および(式5)を用いて変換がおこなわれる。
まず、X座標については、
x(物理座標)+w(表示部110-1のX軸方向の大きさ)=(x+w) (式4)
この(x+w)が、仮想座標のX座標となる。
x(物理座標)+w(表示部110-1のX軸方向の大きさ)=(x+w) (式4)
この(x+w)が、仮想座標のX座標となる。
また、Y座標については、
y(物理座標)+h(表示部110-2のY軸方向の大きさ)=(y+h) (式5)
この(y+h)が、仮想座標のY座標となる。
y(物理座標)+h(表示部110-2のY軸方向の大きさ)=(y+h) (式5)
この(y+h)が、仮想座標のY座標となる。
したがって、座標通知部130からアプリケーション140へ通知される仮想座標は、(x+w,y+h)となる。アプリケーション140は、この座標(x+w,y+h)に応じた処理を行う。
次に、表示装置100の縦横方向の回転による座標の通知について説明する。
近年では、ディスプレイが搭載された表示装置の向きに応じて、表示の縦横方向が回転したり、上下の向きが入れ替わったりする機能が具備されているものが増えてきている。
本発明の表示装置においても、当該機能を具備する。
図1に示した表示装置100において、アプリケーション140が表示部110-1と表示部110-2とのどちらか一方に画像を表示させている場合の表示装置100の縦横の回転による座標の通知については、一般的に用いられているものと同じである。
アプリケーション140が、表示部110-1と表示部110-2とを跨いで画像を表示させている場合は、アプリケーション140が認識する原点に対応する物理座標が、表示部110-1,110-2を跨いで移動するため、そのための座標変換が必要となる場合がある。
図10は、表示装置100の縦横方向を時計回りに90度回転させた場合の座標変換の一例を示す図である。
図10に示した表示部110-1上の物理座標(x,y)は、表示装置100を回転させなければ座標通知部130によってそのままアプリケーション140へ通知される。
しかし、図10の下に示すように、表示装置100を時計回りに90度回転させた場合、アプリケーション140が認識する原点に対応する物理座標が、表示部110-1から表示部110-2へ移動する。すると、物理座標(x,y)と、アプリケーション140が認識する原点に対応する物理座標とが、互いに異なる表示部に含まれることとなる。
これに伴い、表示部110-1上の物理座標(x,y)が、座標変換部120によって仮想座標へ変換される。
具体的には、X座標については、表示部110-1上の物理座標(y)が、仮想座標のX座標となる。
また、Y座標については、座標変換部120によって(式6)を用いて変換がおこなわれる。
w(表示部110-1のX軸方向の大きさ)-x(物理座標)+w(表示部110-2のX軸方向の大きさ)=(w-x+w) (式6)
この(w-x+w)が、仮想座標のY座標となる。
この(w-x+w)が、仮想座標のY座標となる。
したがって、座標通知部130からアプリケーション140へ通知される仮想座標は、(y,w-x+w)となる。アプリケーション140は、この座標(y,w-x+w)に応じた処理を行う。
図11は、表示装置100の縦横方向を時計回りに180度回転させた場合の座標変換の一例を示す図である。
図11に示した表示部110-1上の物理座標(x,y)は、表示装置100を回転させなければ座標通知部130によってそのままアプリケーション140へ通知される。
しかし、図11の下に示すように、表示装置100を時計回りに180度回転させた場合、つまり、表示装置100の上下の向きを入れ替えた場合、アプリケーション140が認識する原点に対応する物理座標が、表示部110-1から表示部110-2へ移動する。すると、物理座標(x,y)と、アプリケーション140が認識する原点に対応する物理座標とが、互いに異なる表示部に含まれることとなる。
これに伴い、表示部110-1上の物理座標(x,y)が、座標変換部120によって仮想座標へ変換される。
具体的には、X座標については、座標変換部120によって(式7)を用いて変換がおこなわれる。
w(表示部110-1のX軸方向の大きさ)-x(物理座標)+w(表示部110-2のX軸方向の大きさ)=(w-x+w) (式7)
この(w-x+w)が、仮想座標のX座標となる。
この(w-x+w)が、仮想座標のX座標となる。
また、Y座標については、座標変換部120によって(式8)を用いて変換がおこなわれる。
h(表示部110-1のY軸方向の大きさ)-y(物理座標)=(h-y) (式8)
この(h-y)が、仮想座標のY座標となる。
この(h-y)が、仮想座標のY座標となる。
したがって、座標通知部130からアプリケーション140へ通知される仮想座標は、(w-x+w,h-y)となる。アプリケーション140は、この座標(w-x+w,h-y)に応じた処理を行う。
図12は、表示装置100の縦横方向を時計回りに270度回転させた場合の座標変換の一例を示す図である。
図12に示した表示部110-2上の物理座標(x,y)は、表示装置100を時計回りに270度回転させた場合、座標変換部120によって仮想座標へ変換される。
具体的には、X座標については、座標変換部120によって(式9)を用いて変換がおこなわれる。
h(表示部110-1のY軸方向の大きさ)-y(物理座標)=(h-y) (式9)
この(h-y)が、仮想座標のX座標となる。
この(h-y)が、仮想座標のX座標となる。
また、Y座標については、座標変換部120によって(式10)を用いて変換がおこなわれる。
w(表示部110-1のX軸方向の大きさ)+x(物理座標)=(w+x) (式10)
この(w+x)が、仮想座標のY座標となる。
この(w+x)が、仮想座標のY座標となる。
したがって、座標通知部130からアプリケーション140へ通知される仮想座標は、(h-y,w+x)となる。アプリケーション140は、この座標(h-y,w+x)に応じた処理を行う。
図13は、上述した表示装置100の縦横方向の回転による座標変換の式を示す表である。図13では、変換後の仮想座標を(x’,y’)で示している。
図13に示すように、1つのディスプレイ(表示部110-1と表示部110-2とのどちらか一方)で表示した場合と、2つのディスプレイ(表示部110-1と表示部110-2とを跨いで)で表示した場合とで、物理座標から仮想座標への変換が異なる。また、2つのディスプレイ表示の場合でも、イベント発生元(接触を感知した表示部)によっても、物理座標から仮想座標への変換が異なる。このように、各ディスプレイ表示に応じた変換処理を行う。
また、複数のディスプレイそれぞれを識別できるディスプレイ識別情報(識別ID等)をそれぞれに付与しておき、当該ディスプレイ識別情報と、接触を感知した位置の物理座標とを用いて、仮想座標への変換を行うものであっても良い。
上述したように本発明においては、複数の表示部を有する表示装置にて、アプリケーションが複数の表示部を跨いで画像を表示する場合のみ、物理座標を仮想座標へ変換することで、アプリケーションに対して座標を効率的に通知することが可能となる。
上述した表示装置100に設けられた各構成要素が行う処理は、目的に応じてそれぞれ作製された論理回路で行うようにしても良い。また、処理内容を記述したプログラムを表示装置100にて読取可能な記録媒体に記録し、この記録媒体に記録されたプログラムを表示装置100に読み込ませ、実行するものであっても良い。表示装置100にて読取可能な記録媒体とは、フロッピー(登録商標)ディスク、光磁気ディスク、DVD、CDなどの移設可能な記録媒体の他、表示装置100に内蔵されたROM、RAM等のメモリやHDD等を指す。この記録媒体に記録されたプログラムは、表示装置100に設けられたCPU(不図示)にて読み込まれ、CPUの制御によって、上述したものと同様の処理が行われる。ここで、CPUは、プログラムが記録された記録媒体から読み込まれたプログラムを実行するコンピュータとして動作するものである。
以上、実施の形態を参照して本願発明を説明したが、本願発明は上記実施の形態に限定されるものではない。本願発明の構成や詳細には、本願発明のスコープ内で当業者が理解し得る様々な変更をすることができる。
この出願は、2010年9月24日に出願された日本出願特願2010-213794を基礎とする優先権を主張し、その開示の全てをここに取り込む。
Claims (15)
- タッチパネル機能を具備し、情報となる画像を表示する複数の表示部と、
1つのアプリケーションが前記複数の表示部を跨いで前記画像を表示させている場合、前記表示部が接触を感知した位置を示す物理座標を所定の演算を用いて仮想座標へ変換する座標変換部と、
1つのアプリケーションが前記複数の表示部のうち1つの表示部に前記画像を表示させている場合、前記表示部が接触を感知した物理座標を該アプリケーションへ通知し、1つのアプリケーションが前記複数の表示部を跨いで前記画像を表示させている場合、前記仮想座標を該アプリケーションへ通知する座標通知部とを有する表示装置。 - 請求項1に記載の表示装置において、
前記座標変換部は、前記複数の表示部のうち、前記アプリケーションが認識する原点の座標を含む第1の表示部以外の表示部における物理座標を前記仮想座標へ変換することを特徴とする表示装置。 - 請求項2に記載の表示装置において、
前記座標変換部は、前記物理座標のうち、前記第1の表示部と該第1の表示部以外の表示部とが並んでいる方向の座標を変換することを特徴とする表示装置。 - 請求項3に記載の表示装置において、
前記座標変換部は、前記第1の表示部のサイズに応じた座標分を、前記第1の表示部以外の表示部における物理座標に加算することにより前記仮想座標への変換を行うことを特徴とする表示装置。 - 請求項1に記載の表示装置において、
前記座標変換部は、当該表示装置の縦横の回転による前記アプリケーションが認識する原点に対応する物理座標の移動に応じて、前記物理座標を前記仮想座標へ変換することを特徴とする表示装置。 - タッチパネル機能を持った複数のディスプレイを具備した装置における座標通知方法であって、
前記複数のディスプレイに対する接触を感知するステップと、
1つのアプリケーションが前記複数のディスプレイを跨いで前記画像を表示させているかどうかを判断するステップと、
1つのアプリケーションが前記複数のディスプレイを跨いで前記画像を表示させている場合、前記接触を感知した位置を示す物理座標を所定の演算を用いて仮想座標へ変換する変換ステップと、
1つのアプリケーションが前記複数のディスプレイのうち1つのディスプレイに前記画像を表示させている場合、前記接触を感知した物理座標を該アプリケーションへ通知するステップと、
1つのアプリケーションが前記複数のディスプレイを跨いで前記画像を表示させている場合、前記仮想座標を該アプリケーションへ通知するステップとを行う座標通知方法。 - 請求項6に記載の座標通知方法において、
前記変換ステップは、前記複数のディスプレイのうち、前記アプリケーションが認識する原点の座標を含む第1のディスプレイ以外のディスプレイにおける物理座標を前記仮想座標へ変換することを特徴とする座標通知方法。 - 請求項7に記載の座標通知方法において、
前記変換ステップは、前記物理座標のうち、前記第1のディスプレイと該第1のディスプレイ以外のディスプレイとが並んでいる方向の座標を変換することを特徴とする座標通知方法。 - 請求項8に記載の座標通知方法において、
前記変換ステップは、前記第1のディスプレイのサイズに応じた座標分を、前記第1のディスプレイ以外のディスプレイにおける物理座標に加算することにより前記仮想座標への変換を行うことを特徴とする座標通知方法。 - 請求項6に記載の座標通知方法において、
前記変換ステップは、当該装置の縦横の回転による前記アプリケーションが認識する原点に対応する物理座標の移動に応じて、前記物理座標を前記仮想座標へ変換することを特徴とする座標通知方法。 - タッチパネル機能を持ち、情報となる画像を表示する複数のディスプレイを搭載した装置に、
前記複数のディスプレイに対する接触を感知する手順と、
1つのアプリケーションが前記複数のディスプレイを跨いで前記画像を表示させているかどうかを判断する手順と、
1つのアプリケーションが前記複数のディスプレイを跨いで前記画像を表示させている場合、前記接触を感知した位置を示す物理座標を所定の演算を用いて仮想座標へ変換する変換手順と、
1つのアプリケーションが前記複数のディスプレイのうち1つのディスプレイに前記画像を表示させている場合、前記接触を感知した物理座標を該アプリケーションへ通知する手順と、
1つのアプリケーションが前記複数のディスプレイを跨いで前記画像を表示させている場合、前記仮想座標を該アプリケーションへ通知する手順とを実行させるためのプログラム。 - 請求項11に記載のプログラムにおいて、
前記変換手順は、前記複数のディスプレイのうち、前記アプリケーションが認識する原点の座標を含む第1のディスプレイ以外のディスプレイにおける物理座標を前記仮想座標へ変換することを特徴とするプログラム。 - 請求項12に記載のプログラムにおいて、
前記変換手順は、前記物理座標のうち、前記第1のディスプレイと該第1のディスプレイ以外のディスプレイとが並んでいる方向の座標を変換することを特徴とするプログラム。 - 請求項13に記載のプログラムにおいて、
前記変換手順は、前記第1のディスプレイのサイズに応じた座標分を、前記第1のディスプレイ以外のディスプレイにおける物理座標に加算することにより前記仮想座標への変換を行うことを特徴とするプログラム。 - 請求項11に記載のプログラムにおいて、
前記変換手順は、当該装置の縦横の回転による前記アプリケーションが認識する原点に対応する物理座標の移動に応じて、前記物理座標を前記仮想座標へ変換することを特徴とするプログラム。
Priority Applications (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201180042651.1A CN103080892B (zh) | 2010-09-24 | 2011-08-25 | 显示设备和坐标通知方法 |
US13/809,525 US10503289B2 (en) | 2010-09-24 | 2011-08-25 | Display device |
EP11826676.6A EP2620850A1 (en) | 2010-09-24 | 2011-08-25 | Display device |
US16/669,617 US10969900B2 (en) | 2010-09-24 | 2019-10-31 | Display device and coordinate notification method |
US17/190,660 US20210208727A1 (en) | 2010-09-24 | 2021-03-03 | Display device and coordinate notification method |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010-213794 | 2010-09-24 | ||
JP2010213794A JP5229289B2 (ja) | 2010-09-24 | 2010-09-24 | 表示装置、座標通知方法およびプログラム |
Related Child Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
US13/809,525 A-371-Of-International US10503289B2 (en) | 2010-09-24 | 2011-08-25 | Display device |
US16/669,617 Continuation US10969900B2 (en) | 2010-09-24 | 2019-10-31 | Display device and coordinate notification method |
Publications (1)
Publication Number | Publication Date |
---|---|
WO2012039230A1 true WO2012039230A1 (ja) | 2012-03-29 |
Family
ID=45873720
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
PCT/JP2011/069166 WO2012039230A1 (ja) | 2010-09-24 | 2011-08-25 | 表示装置 |
Country Status (5)
Country | Link |
---|---|
US (3) | US10503289B2 (ja) |
EP (1) | EP2620850A1 (ja) |
JP (1) | JP5229289B2 (ja) |
CN (1) | CN103080892B (ja) |
WO (1) | WO2012039230A1 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP2851772A4 (en) * | 2012-05-14 | 2016-04-20 | Nec Corp | DISPLAY DEVICE, DISPLAY CONTROL METHOD, AND NON-TEMPORARY COMPUTER-READABLE MEDIUM |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5229289B2 (ja) * | 2010-09-24 | 2013-07-03 | 日本電気株式会社 | 表示装置、座標通知方法およびプログラム |
CN103399687B (zh) * | 2013-07-26 | 2016-08-24 | 广东威创视讯科技股份有限公司 | 一种单点触控窗口显示的执行处理方法 |
KR20160068514A (ko) * | 2014-12-05 | 2016-06-15 | 삼성전자주식회사 | 터치 입력을 제어하는 전자 장치 및 방법 |
JP6623908B2 (ja) * | 2016-04-08 | 2019-12-25 | 富士通株式会社 | 情報処理装置、情報処理方法及び情報処理プログラム |
JP6598753B2 (ja) * | 2016-10-07 | 2019-10-30 | 任天堂株式会社 | ゲームシステム |
KR20210032826A (ko) * | 2019-09-17 | 2021-03-25 | 삼성전자주식회사 | 전자 장치 및 전자 장치의 정보 제공 방법 |
US11188222B2 (en) * | 2019-12-05 | 2021-11-30 | Cabin Management Solutions, Llc | Multi-arrayed display user interface panel |
KR102322067B1 (ko) * | 2019-12-27 | 2021-11-04 | 주식회사 이누씨 | 가상 포지셔닝 방법 및 장치 |
JP7038153B2 (ja) | 2020-02-13 | 2022-03-17 | 任天堂株式会社 | 情報処理システム、情報処理装置、情報処理プログラム、および情報処理方法 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS63173119A (ja) * | 1987-01-13 | 1988-07-16 | Toshiba Corp | 座標入力表示装置 |
JPH04326152A (ja) * | 1991-04-25 | 1992-11-16 | Hitachi Ltd | パーソナル情報機器 |
JPH11161426A (ja) | 1997-12-01 | 1999-06-18 | Fujitsu Takamisawa Component Ltd | タッチパネル装置 |
JP2000112597A (ja) * | 1998-10-07 | 2000-04-21 | Oki Electric Ind Co Ltd | マルチディスプレイシステム |
JP2001154804A (ja) * | 1999-11-26 | 2001-06-08 | Ricoh Co Ltd | 座標入力・表示システム、座標制御装置、座標入力装置、座標入力・表示方法、およびその方法をコンピュータに実行させるプログラムを記録したコンピュータ読み取り可能な記録媒体 |
JP2003069767A (ja) * | 2001-08-27 | 2003-03-07 | Ricoh Co Ltd | 表示システムおよび表示プログラム |
JP2004070635A (ja) * | 2002-08-06 | 2004-03-04 | Oki Electric Ind Co Ltd | マルチディスプレイ画面設定方法 |
JP2010213794A (ja) | 2009-03-13 | 2010-09-30 | Nippon Pachinko Buhin Kk | 遊技機 |
Family Cites Families (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE3632601A1 (de) * | 1985-09-27 | 1987-04-23 | Olympus Optical Co | Vorrichtung zum darstellen einer positionsanzeigemarke auf mehreren bildschirmen |
GB9201949D0 (en) * | 1992-01-30 | 1992-03-18 | Jenkin Michael | Large-scale,touch-sensitive video display |
JP3339284B2 (ja) * | 1996-01-29 | 2002-10-28 | 三菱電機株式会社 | 大画面表示方式 |
JP4560239B2 (ja) | 2000-06-07 | 2010-10-13 | キヤノン株式会社 | 表示システム及び表示装置 |
US8120596B2 (en) * | 2004-05-21 | 2012-02-21 | Smart Technologies Ulc | Tiled touch system |
US20070120763A1 (en) * | 2005-11-23 | 2007-05-31 | Lode De Paepe | Display system for viewing multiple video signals |
US7683856B2 (en) * | 2006-03-31 | 2010-03-23 | Sony Corporation | E-ink touchscreen visualizer for home AV system |
JP4410804B2 (ja) * | 2007-02-23 | 2010-02-03 | インターナショナル・ビジネス・マシーンズ・コーポレーション | 分散ネットワーク環境におけるシステム管理方法、情報処理装置及びプログラム |
JP4389090B2 (ja) * | 2007-10-03 | 2009-12-24 | シャープ株式会社 | 情報表示装置 |
US9215217B2 (en) | 2008-12-05 | 2015-12-15 | Suhayya Abu-Hakima and Kenneth E. Grigg | Auto-discovery of diverse communications devices for alert broadcasting |
US20100149103A1 (en) | 2008-08-08 | 2010-06-17 | Oqo, Inc. | Touch-typing keyboard for touch screens |
US8797233B2 (en) * | 2008-08-20 | 2014-08-05 | The Regents Of The University Of California | Systems, methods, and devices for dynamic management of data streams updating displays |
JP5430962B2 (ja) | 2009-02-12 | 2014-03-05 | 株式会社コナミデジタルエンタテインメント | 決定装置、決定方法、ならびに、プログラム |
JPWO2011052324A1 (ja) * | 2009-10-28 | 2013-03-21 | 日本電気株式会社 | 携帯情報端末、処理方法、およびプログラム |
JP5557316B2 (ja) * | 2010-05-07 | 2014-07-23 | Necカシオモバイルコミュニケーションズ株式会社 | 情報処理装置、情報生成方法及びプログラム |
KR20120015624A (ko) * | 2010-08-12 | 2012-02-22 | 삼성전자주식회사 | 디스플레이 방법 및 장치 |
JP5229289B2 (ja) * | 2010-09-24 | 2013-07-03 | 日本電気株式会社 | 表示装置、座標通知方法およびプログラム |
JP5771401B2 (ja) * | 2011-01-27 | 2015-08-26 | 京セラ株式会社 | 携帯通信端末 |
-
2010
- 2010-09-24 JP JP2010213794A patent/JP5229289B2/ja active Active
-
2011
- 2011-08-25 EP EP11826676.6A patent/EP2620850A1/en not_active Ceased
- 2011-08-25 WO PCT/JP2011/069166 patent/WO2012039230A1/ja active Application Filing
- 2011-08-25 US US13/809,525 patent/US10503289B2/en active Active
- 2011-08-25 CN CN201180042651.1A patent/CN103080892B/zh active Active
-
2019
- 2019-10-31 US US16/669,617 patent/US10969900B2/en active Active
-
2021
- 2021-03-03 US US17/190,660 patent/US20210208727A1/en not_active Abandoned
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS63173119A (ja) * | 1987-01-13 | 1988-07-16 | Toshiba Corp | 座標入力表示装置 |
JPH04326152A (ja) * | 1991-04-25 | 1992-11-16 | Hitachi Ltd | パーソナル情報機器 |
JPH11161426A (ja) | 1997-12-01 | 1999-06-18 | Fujitsu Takamisawa Component Ltd | タッチパネル装置 |
JP2000112597A (ja) * | 1998-10-07 | 2000-04-21 | Oki Electric Ind Co Ltd | マルチディスプレイシステム |
JP2001154804A (ja) * | 1999-11-26 | 2001-06-08 | Ricoh Co Ltd | 座標入力・表示システム、座標制御装置、座標入力装置、座標入力・表示方法、およびその方法をコンピュータに実行させるプログラムを記録したコンピュータ読み取り可能な記録媒体 |
JP2003069767A (ja) * | 2001-08-27 | 2003-03-07 | Ricoh Co Ltd | 表示システムおよび表示プログラム |
JP2004070635A (ja) * | 2002-08-06 | 2004-03-04 | Oki Electric Ind Co Ltd | マルチディスプレイ画面設定方法 |
JP2010213794A (ja) | 2009-03-13 | 2010-09-30 | Nippon Pachinko Buhin Kk | 遊技機 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP2851772A4 (en) * | 2012-05-14 | 2016-04-20 | Nec Corp | DISPLAY DEVICE, DISPLAY CONTROL METHOD, AND NON-TEMPORARY COMPUTER-READABLE MEDIUM |
EP3203360A1 (en) * | 2012-05-14 | 2017-08-09 | NEC Corporation | Display device, display control method, and non-transitory computer readable medium storing display control program |
Also Published As
Publication number | Publication date |
---|---|
JP5229289B2 (ja) | 2013-07-03 |
JP2012068942A (ja) | 2012-04-05 |
US20200064946A1 (en) | 2020-02-27 |
US20130120304A1 (en) | 2013-05-16 |
US10503289B2 (en) | 2019-12-10 |
EP2620850A1 (en) | 2013-07-31 |
CN103080892A (zh) | 2013-05-01 |
US10969900B2 (en) | 2021-04-06 |
US20210208727A1 (en) | 2021-07-08 |
CN103080892B (zh) | 2016-01-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2012039230A1 (ja) | 表示装置 | |
US9436379B2 (en) | Control method and electronic device | |
JP5768457B2 (ja) | 電子機器、表示方法及びプログラム | |
WO2011052299A1 (ja) | 携帯情報端末 | |
WO2011027665A1 (ja) | 表示装置 | |
JP2013080374A (ja) | 情報処理装置、情報処理方法およびコンピュータプログラム | |
JP2010139686A (ja) | プロジェクター、プログラムおよび情報記憶媒体 | |
JP2005208991A (ja) | 位置情報出力装置及び信号処理方法 | |
JP2009253773A (ja) | ディスプレイシステム、リモコン装置、ディスプレイ装置、リモコン装置の制御方法、およびディスプレイ装置の制御方法 | |
US10564762B2 (en) | Electronic apparatus and control method thereof | |
JP6081324B2 (ja) | 操作入力装置、携帯型情報端末、操作入力装置の制御方法、プログラム、及び記録媒体 | |
JP2014203211A (ja) | タッチセンサシステム、集積回路、および電子機器 | |
WO2022218152A1 (zh) | 窗口切换方法、存储介质及相关设备 | |
JP5812582B2 (ja) | 情報処理装置および情報処理方法 | |
JP2015038642A (ja) | 表示処理装置及び表示処理方法 | |
JP2005293292A (ja) | 情報処理装置及びカーソル制御プログラム | |
JP6613854B2 (ja) | 情報処理装置、情報処理プログラム、および電子機器 | |
JP2019053196A (ja) | 情報処理装置、画面制御方法 | |
JP2005208992A (ja) | 位置情報出力装置及び信号処理方法 | |
WO2014132472A1 (ja) | 制御装置 | |
JP5213033B2 (ja) | ソフトウェア入力キー表示方法、プログラム及び情報処理端末 | |
JP2016076017A (ja) | 図形処理装置および図形処理プログラム | |
JP2012084166A (ja) | 表示処理装置、表示制御プログラム及び表示処理方法 | |
JP2012043020A (ja) | 入力装置及びプログラム | |
JPWO2016043138A1 (ja) | 表示装置、表示方法及び表示プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
WWE | Wipo information: entry into national phase |
Ref document number: 201180042651.1 Country of ref document: CN |
|
121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 11826676 Country of ref document: EP Kind code of ref document: A1 |
|
WWE | Wipo information: entry into national phase |
Ref document number: 13809525 Country of ref document: US |
|
WWE | Wipo information: entry into national phase |
Ref document number: 2011826676 Country of ref document: EP |
|
NENP | Non-entry into the national phase |
Ref country code: DE |