WO2014069249A1 - 表示制御装置、表示制御方法、およびプログラム - Google Patents

表示制御装置、表示制御方法、およびプログラム Download PDF

Info

Publication number
WO2014069249A1
WO2014069249A1 PCT/JP2013/078275 JP2013078275W WO2014069249A1 WO 2014069249 A1 WO2014069249 A1 WO 2014069249A1 JP 2013078275 W JP2013078275 W JP 2013078275W WO 2014069249 A1 WO2014069249 A1 WO 2014069249A1
Authority
WO
WIPO (PCT)
Prior art keywords
display
data
display information
touch panel
information
Prior art date
Application number
PCT/JP2013/078275
Other languages
English (en)
French (fr)
Inventor
翼 塚原
智也 成田
野田　卓郎
宏之 水沼
山野　郁男
山本　一幸
Original Assignee
ソニー株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ソニー株式会社 filed Critical ソニー株式会社
Priority to JP2014544427A priority Critical patent/JP6202345B2/ja
Priority to EP13851293.4A priority patent/EP2916211B1/en
Priority to US14/430,640 priority patent/US9886128B2/en
Publication of WO2014069249A1 publication Critical patent/WO2014069249A1/ja
Priority to US15/852,983 priority patent/US10198127B2/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G06F3/0418—Control or interface arrangements specially adapted for digitisers for error correction or compensation, e.g. based on parallax, calibration or alignment
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/34—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source
    • G09G3/36—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source using liquid crystals
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/003—Details of a display terminal, the details relating to the control arrangement of the display terminal and to the interfaces thereto
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/12—Overlay of images, i.e. displayed pixel being the result of switching between the corresponding input pixels
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2360/00—Aspects of the architecture of display systems
    • G09G2360/18—Use of a frame buffer in a display terminal, inclusive of the display panel
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/08—Cursor circuits

Definitions

  • the present technology relates to a display control device, a display control method, and a program, and more particularly, to a display control device, a display control method, and a program that can improve the operability of a touch panel display.
  • a liquid crystal display device with a touch detection device (hereinafter referred to as a touch sensor) called a so-called touch panel is known.
  • a touch sensor is formed on a liquid crystal panel and various buttons are displayed as images on the liquid crystal display screen, thereby enabling information input instead of normal buttons.
  • this technology is applied to small mobile devices, it is possible to share the arrangement of the display and buttons, which can bring significant advantages such as a large screen, space saving on the operation unit, and a reduction in the number of parts.
  • a touch sensor conductive film is provided between the observation side substrate of the liquid crystal display element and the observation polarizing plate disposed on the outer surface thereof.
  • a liquid crystal display device with a touch sensor in which a capacitive touch sensor is formed between the outer surface and the outer surface of a polarizing plate as a touch surface see, for example, Patent Document 1.
  • FIG. 1 shows a control block diagram related to display control processing of a personal computer using a liquid crystal display device with a touch sensor.
  • the personal computer includes an LCD module 10 and a host processing unit 14 as a host-side processing unit that controls the LCD module 10.
  • the LCD module 10 includes a touch panel display 11 and driver ICs 12 and 13.
  • the touch panel display 11 includes a touch panel 21 and an LCD panel 22, the driver IC 12 is a control IC (Integrated Circuit) of the touch panel 21, and the driver IC 13 is a control IC of the LCD panel 22.
  • the driver IC 12 is a control IC (Integrated Circuit) of the touch panel 21
  • the driver IC 13 is a control IC of the LCD panel 22.
  • the driver IC 12 includes a touch panel driver 31, a detection circuit 32, and a coordinate conversion circuit 33.
  • the touch panel driver 31 scans and drives the strip-shaped conductive film lines arranged in the X axis direction and the Y axis direction on the touch panel 21.
  • the detection circuit 32 detects an analog sensor signal indicating a capacitance value according to the presence or absence of a user's touch (contact) at a predetermined position of the touch panel 21 according to the scanning drive of the touch panel driver 31, and outputs a digital signal Convert to AD.
  • the coordinate conversion circuit 33 converts a digital sensor signal indicating the touch detection position detected by the detection circuit 32 into a two-dimensional coordinate position represented by the X coordinate position and the Y coordinate position of the touch panel 21, and as raw coordinate information, Output to the host processing unit 14.
  • the driver IC 13 includes an LCD driver 41, a memory 42, and a timing controller 43.
  • the driver IC 13 performs calculations such as calibration and filtering on the raw coordinate position indicating the touch position output from the driver IC 12, and display data of display information A based on the calculation result is displayed on the host processing unit 14. Supplied from
  • the LCD driver 41 displays the display information A supplied from the host processing unit 14 based on the display data stored in the memory 42, so that each pixel (internal) of the LCD panel 22 arranged in a two-dimensional manner is displayed. Are driven in a predetermined order.
  • the memory 42 stores display data of display information A supplied from the host processing unit 14.
  • the timing controller 43 acquires the display data of the display information A supplied from the host processing unit 14 and stores it in the memory 42.
  • the host processing unit 14 includes a CPU (Central Processing Unit) 51, a memory (RAM: Random Access Memory) 52, a graphics controller 53, and an image memory (VRAM) 54.
  • CPU Central Processing Unit
  • RAM Random Access Memory
  • VRAM image memory
  • the CPU 51 is a processor that controls the entire personal computer, and executes a device driver, an operating system (OS), an application program, and the like of each device mounted on the personal computer.
  • the memory 52 stores data necessary for the CPU 51 to execute a predetermined process, for example, an execution program.
  • the CPU 51 obtains the raw coordinate position indicating the user's touch position as the raw coordinate information from the driver IC 12 of the LCD module 10, the CPU 51 accurately calculates the user's touch position by calculating the center of gravity of the raw coordinate position, averaging, and the like. And the touch position after calibration (calibration coordinate position) is calculated.
  • the graphics controller 53 is a processor for displaying an image on the LCD panel 22, and outputs the display data of the image to be displayed on the LCD panel 22 to the driver IC 13 of the LCD panel 22 while appropriately storing the display data in the image memory 54. To do.
  • the graphics controller 53 outputs display data of the display information A as a display image in response to the touch position to the driver IC 13 of the LCD panel 22 based on the calibration coordinate position of the user.
  • an analog sensor signal having a capacitance value indicating the touch is detected by the detection circuit 32.
  • the analog sensor signal is converted into a digital sensor signal by the detection circuit 32, then converted into a two-dimensional coordinate position by the coordinate conversion circuit 33, and supplied to the CPU 51 of the host processing unit 14 as raw coordinate information.
  • the CPU 51 of the host processing unit 14 performs calibration or the like on the two-dimensional coordinate position as the raw coordinate information, and calculates the calibration coordinate position corresponding to the touch position of the user. Then, display data of display information A generated based on the calculated calibration coordinate position is supplied to the driver IC 13 of the LCD panel 22 via the graphics controller 53.
  • the timing controller 43 of the driver IC 13 of the LCD panel 22 acquires display data of the display information A and stores it in the memory 42, and the LCD driver 41 displays the LCD according to the display data of the display information A stored in the memory 42.
  • the panel 22 is driven. As a result, the display information A is displayed on the LCD panel 22.
  • the raw coordinate information indicating the detected touch position is supplied to the CPU 51, and the CPU 51 performs complicated arithmetic processing such as filtering and calibration, and then the LCD panel. 22 is displayed.
  • the present technology has been made in view of such a situation, and is intended to improve the operability of the touch panel display.
  • the display control device obtains first display data indicating a touch input position of the user with respect to the touch panel display from the first processing unit via the first path, and the first display.
  • Second display data is acquired via a second path from a second processing unit that executes display image generation processing having a larger processing amount than the first processing unit using data, and the first display
  • the display control part which performs control which displays the 1st display information based on data and the 2nd display information based on the 2nd display data on the touch panel display is provided.
  • the display control method acquires first display data indicating a touch input position of the user with respect to the touch panel display from the first processing unit via the first path, and the first display.
  • Second display data is acquired via a second path from a second processing unit that executes display image generation processing having a larger processing amount than the first processing unit using data, and the first display Control is performed to display the first display information based on the data and the second display information based on the second display data on the touch panel display.
  • a program acquires first display data indicating a touch input position of a user with respect to a touch panel display from a first processing unit to a computer via a first path.
  • Second display data is acquired via a second pass from a second processing unit that executes display image generation processing having a larger processing amount than the first processing unit using display data, and the first processing unit This is for executing a process for performing control to display the first display information based on the display data and the second display information based on the second display data on the touch panel display.
  • the first display data indicating the touch input position of the user with respect to the touch panel display is acquired from the first processing unit via the first path, and the first display data is used.
  • the second display data is acquired through the second path from the second processing unit that executes the display image generation process having a larger processing amount than the first processing unit, and is based on the first display data. Control for causing the touch panel display to display first display information and second display information based on the second display data is performed.
  • program can be provided by being transmitted through a transmission medium or by being recorded on a recording medium.
  • the display control device may be an independent device, or may be an internal block constituting one device.
  • the operability of the touch panel display can be improved.
  • FIG. 1 It is a control block diagram regarding the display control with respect to the conventional touch input. It is a figure explaining the structure of the touchscreen display which can apply this technique. It is a figure explaining the structure of the touchscreen display which can apply this technique. It is a block diagram which shows the structural example of 1st Embodiment of the LCD module to which this technique was applied. It is a figure which shows the example of a display with respect to the touch input using this technique. It is a figure which shows the example of a display with respect to the conventional touch input. It is a block diagram which shows the structural example of 2nd Embodiment of the LCD module to which this technique was applied. It is a block diagram which shows the structural example of 3rd Embodiment of the LCD module to which this technique was applied. FIG.
  • FIG. 9 is a block diagram illustrating a detailed configuration of the driver LSI of FIG. 8. It is a figure showing a path of display control of this art. It is a flowchart explaining the display control process which does not go through via the host side processor. It is a flowchart explaining the display control process via a host side processor. It is a figure showing a path of other display control of this art.
  • FIG. 20 is a block diagram of a computer to which the present technology is applied. It is a block diagram of a high-functional type mobile phone terminal to which the present technology is applied. It is a figure explaining the 1st modification of this art. It is a figure explaining the 2nd modification of this art. It is a figure explaining the 3rd modification of this art. It is a figure explaining the 4th modification of this art. It is a figure explaining the 5th modification of this art.
  • the structure of the touch panel display is roughly classified into an external type and a built-in type as shown in FIG.
  • the external touch panel display has a touch panel attached to the surface of the LCD panel.
  • the touch panel display 11 shown in FIG. 1 includes a touch panel 21 and an LCD panel 22, and corresponds to an external type.
  • the image display panel since the image display panel and the touch panel are separately configured, the image display panel may be a PDP panel, an OLED panel, or the like in addition to the LCD panel.
  • the built-in touch panel display has a structure in which a touch panel function is formed inside the LCD panel, and can be further classified into an in-cell type and an on-cell type.
  • the in-cell type has a built-in touch panel function in the TFT-LCD cell
  • the on-cell type has a built-in touch panel function between a polarizing plate and a glass substrate provided with a color filter.
  • in-cell type detection methods include a contact type using a micro switch, a capacitance type that detects a change in capacitance, an optical type that detects light, and the like. There is also a hybrid type using both.
  • on-cell type detection methods include a resistance type that detects a change in resistance value (voltage value) and a capacitance type that detects a change in capacitance.
  • Touch panel displays can be classified into various structures as described above, but the present technology can be applied to all structures, whether external, built-in, on-cell, or in-cell.
  • an in-cell (built-in) touch panel display using a capacitive detection method is employed.
  • the built-in touch panel display described below has a touch panel function formed inside the LCD panel, but this is also applicable to a panel with a touch panel function formed inside the OLED panel.
  • Technology can be applied.
  • Built-in touch panel display has a touch sensor function, improved visibility, higher touch discrimination area, improved S / N ratio of sensor signal, thinner display, etc. There are benefits. In particular, due to the high density of the touch area and the improvement of the S / N ratio of the sensor signal, the built-in touch panel display can be detected just by approaching the finger, enabling new operation experiences such as proximity sensing. Become.
  • FIG. 4 shows a block diagram of the LCD module 80 to which the present technology is applied and the host processing unit 14 that controls the LCD module 80.
  • the LCD module 80 and the host processing unit 14 are configured as a part of a personal computer, for example, as in FIG.
  • the LCD module 80 includes a touch panel display 81 and driver ICs 82 and 83.
  • the host processing unit 14 is a host-side processing unit similar to that in FIG. 1 that controls the LCD module 80, and the description of the host processing unit 14 is omitted because it overlaps with the above description.
  • the touch panel display 81 is the above-described built-in and in-cell type touch panel display that employs, for example, a capacitive detection method, and includes a touch sensor unit 91 and a display module unit 92.
  • the driver IC 82 includes a touch panel driver 101, a detection circuit 102, and a coordinate conversion circuit 103, and controls the touch sensor unit 91.
  • the touch sensor unit 91 detects a sensor signal detected in each region obtained by dividing the display surface of the touch panel display 81 into a plurality of regions in a two-dimensional matrix in a predetermined order by driving control of the touch panel driver 101. Output to.
  • the touch panel driver 101 drives and controls the touch sensor unit 91.
  • the detection circuit 102 detects (acquires) an analog sensor signal indicating a capacitance value according to the presence or absence of a user's touch at a predetermined position (each region) of the touch panel display 81 according to the drive control of the touch panel driver 101. AD conversion to a digital signal.
  • the detection circuit 102 supplies a digital sensor signal to the coordinate conversion circuit 103 and also outputs it to the driver IC 83 as raster format sensor data.
  • the coordinate conversion circuit 103 converts the digital sensor signal at a predetermined position detected by the detection circuit 102 into a two-dimensional coordinate position represented by the X coordinate position and the Y coordinate position of the touch panel display 81, and as raw coordinate information, Output to the host processing unit 14.
  • the driver IC 83 includes an LCD driver 111, a memory 112, a timing controller 113, and a setting storage unit 114, and controls the display module unit 92.
  • the LCD driver 111 drives each pixel (inner transistor) of the display module unit 92 arranged in a two-dimensional manner in a predetermined order in order to display the display information stored in the memory 112.
  • the memory 112 stores display data of display information displayed on the display module unit 92.
  • Display data of display information B corresponding to is stored.
  • the sensor data directly supplied from the detection circuit 102 of the driver IC 82 is a digital sensor signal indicating the touch location of the user.
  • the touch position is specified, but there is color information indicating what color is displayed. Not done. Therefore, the memory 112 generates display data to be drawn in the color indicated by the color information stored in the setting storage unit 114 at the display position indicated by the sensor data supplied from the detection circuit 102, and the supplied sensor data Stored as display data of corresponding display information B.
  • the display information B is first display information obtained by quickly feeding back the touch position of the user detected by the touch sensor unit 91.
  • the display information A supplied via the host processing unit 14 is the touch sensor unit.
  • the touch position of the user detected in 91 is the second display information calibrated by the host processing unit 14.
  • updating of the drawing information of the display information B based on the sensor data from the driver IC 82 and updating of the drawing information of the display information A from the graphics controller 53 of the host processing unit 14 are performed in parallel at different timing periods. Executed.
  • the update of the drawing information of the display information B from the driver IC 82 does not require a complicated calculation such as calibration or filtering that is executed by the host processing unit 14, so that the drawing information update cycle of the display information A is longer than that. It is executed in a short cycle. Therefore, when a touch of the user is detected by the touch sensor unit 91, first, the display information B corresponding to the touch is drawn on the display, and then the display information that is calculated by the host processing unit 14 such as calibration. A is drawn (redrawn) on the display.
  • the timing controller 113 acquires the display data of the display information A supplied from the host processing unit 14 and stores it in the memory 112.
  • the setting storage unit 114 stores color information for determining a drawing color when drawing a touch position for generating display information B based on sensor data from the driver IC 82. This color information is stored in advance in the setting storage unit 114 by setting it on a predetermined application executed by the CPU 51, for example.
  • the LCD driver 111 acquires the sensor data from the driver IC 82 and generates the display information B, and directly displays it in the display module unit 92. You may draw.
  • FIG. 5 shows a display example in which the host processing unit 14 and the LCD module 80 of FIG.
  • the sensor data of the touch position X1 is supplied from the driver IC 82 to the driver IC 83 at the moment when the user touches. Then, the driver IC 83 draws (displays) the point B1 at the same position as the position X1 touched by the user as the display information B1 at the time t1.
  • the raw coordinate information of the touch position X1 is supplied to the host processing unit 14, and the host processing unit 14 performs a calibration calculation and the like, and supplies it to the driver IC 83 as display data of the display information A1. Then, at the time t2 when the user touches the position X2 on the left side of the position X1 after the elapse of a predetermined time from the time t1, the display data of the display information A1 is displayed together with the point B2 drawn as the display information B2 at the position X2. A base point A1 is drawn at position X1. That is, the point A1 (display information A1) generated via the host processing unit 14 is displayed at the time t2 when the position X2 is touched with a delay from the time t1.
  • the point B3 as the display information B3 is drawn at the position X3 touched by the user, and the point A2 generated by the host processing unit 14 and displayed with a delay is displayed at the position X2. Drawn.
  • a point B4 as display information B4 is drawn at a position X4 touched by the user, and a point A3 generated by the host processing unit 14 and displayed with a delay is drawn at the position X3. .
  • FIG. 6 shows a display example when similar touch and slide operations are drawn by a conventional display control method.
  • the point A1 is drawn at the position X1 at a time t2 delayed by a predetermined time from the time t1, but as described above, at the time t2, the user slides the finger position and the user's finger moves to the position X2. is doing.
  • the point A2 is drawn at the position X2 touched at the time t2 slightly before that
  • the time t4 when the user touches the position X4
  • a point A3 is drawn at the position X3 touched at time t3 slightly before that.
  • the driver IC 82 does not pass through the host processing unit 14.
  • Display information B is drawn based on the sensor data directly supplied to the driver IC 83.
  • the display control of the LCD module 80 to which the present technology is applied it is possible to provide quick feedback to the touch input of the user, and the operability derived from the drawing delay via the host processing unit 14. The decrease can be suppressed. That is, the operability of the touch panel display can be improved.
  • FIG. 7 shows a block diagram of the LCD module 80 of the second embodiment and the host processing unit 14 that controls it.
  • the LCD module 80 of the second embodiment is different from the first embodiment shown in FIG. 4 in that a coordinate correction circuit 104 is newly added to the driver IC 82.
  • the two-dimensional coordinate position of the touch panel display 81 touched by the user is output to the host processing unit 14 as raw coordinate information, and the host processing unit 14 uses the average value and standard deviation of the raw coordinate position. Calibration was performed to accurately calculate the user's touch position by performing the correction calculation.
  • the coordinate correction circuit 104 performs calibration for calculating the accurate touch position of the user based on the raw coordinate information, which is performed by the host processing unit 14 in the first embodiment described above. Do.
  • the coordinate correction circuit 104 outputs a correction coordinate value indicating the touch position of the user after the correction calculation to the host processing unit 14 and the driver IC 83 as correction coordinate information.
  • the configuration of the second embodiment is useful when the storage device on the host side that stores the correction data for calibration is write-protected or the connected host side is unspecified.
  • FIG. 8 shows a block diagram of the LCD module 80 according to the third embodiment and the host processing unit 14 that controls the LCD module 80.
  • one driver LSI (Large Scale Integration) 121 is configured by two driver ICs of the driver IC 82 and the driver IC 83 in the first and second embodiments. The other points are the same.
  • the driver LSI 121 is formed on a single semiconductor substrate using single crystal silicon by, for example, a known complementary MOS integrated circuit manufacturing technique.
  • the configuration in which the coordinate correction circuit 104 is omitted corresponds to the first embodiment in FIG. 4, and the configuration in which the coordinate correction circuit 104 is added corresponds to the second embodiment in FIG.
  • FIG. 9 is a functional block diagram illustrating the driver LSI 121 according to the third embodiment in further detail. The display control using the driver LSI 121 will be further described with reference to FIG.
  • the driver LSI 121 includes at least an AD conversion circuit 141, a capacitance value storage register 142, a rasterizer 143, a frame memory 146, a coordinate conversion circuit 144, a system interface 145, a setting storage unit 147, and a display data generation unit 148.
  • the AD conversion circuit 141, the capacitance value storage register 142, and the rasterizer 143 correspond to the function of the detection circuit 102 in FIG.
  • the coordinate conversion circuit 144, the system interface 145, the frame memory 146, the setting storage unit 147, and the display data generation unit 148 are respectively the coordinate conversion circuit 103, the timing controller 113, the memory 112, the setting storage unit 114, FIG. And the LCD driver 111.
  • the average value calculation unit 151, the standard deviation calculation unit 152, and the hysteresis calculation unit 153 correspond to the coordinate correction circuit 104 in FIG.
  • the AD conversion circuit 141 detects an analog sensor signal from the touch sensor unit 91, performs AD conversion to a digital sensor signal, and supplies the digital sensor signal to the capacitance value storage register 142 and the average value calculation unit 151.
  • the digital sensor signal is supplied to the coordinate conversion circuit 144 instead of the average value calculation unit 151.
  • the capacitance value storage register 142 stores a digital capacitance value that is a sensor signal supplied from the AD conversion circuit 141.
  • the rasterizer 143 converts (rasterizes) the digital capacitance value stored in the capacitance value storage register 142 into a raster format, and stores it in the frame memory 146.
  • the coordinate conversion circuit 144 calculates the two-dimensional coordinate position on the display touched by the user based on the digital capacitance value as the sensor signal supplied from the AD conversion circuit 141.
  • the system interface 145 outputs the two-dimensional coordinate position indicating the touch position of the user supplied from the coordinate conversion circuit 144 to the host processing unit 14 such as a personal computer via a system bus (not shown).
  • the system interface 145 stores various control information supplied from the host processing unit 14 in an internal register (not shown) in the driver LSI 121.
  • system interface 145 acquires display data to be displayed on the display of the display module unit 92 supplied from the host processing unit 14 and stores it in the frame memory 146.
  • the frame memory 146 has a storage capacity capable of holding display data for one screen.
  • the frame memory 146 stores the supplied display data by overwriting the currently held display data. Display data held in the frame memory 146 is read by the display data generation unit 148 at an optimal timing.
  • the digital capacitance value supplied from the rasterizer 143 is converted into display data B of display information B representing the touch position in a predetermined color based on the setting information stored in the setting storage unit 147, and the frame Stored in the memory 146.
  • the system interface 145 is supplied with display data of display information A generated by the CPU 51 of the host processing unit 14 performing a calibration calculation or the like on the two-dimensional coordinate position indicating the touch position of the user, and the frame memory 146.
  • the setting storage unit 147 stores setting information that defines the drawing color when the touch position on the display is displayed as the display information B.
  • the display data generation unit 148 reads the display data stored in the frame memory 146 and applies a voltage corresponding to the display data to the drain line (data line) of the display module unit 92, thereby Each pixel (inner transistor) is driven. As a result, an image (display information) corresponding to the display data stored in the frame memory 146 is displayed on the display of the display module unit 92.
  • the average value calculation unit 151, the standard deviation calculation unit 152, and the hysteresis calculation unit 153 are provided, the average, standard deviation, and hysteresis of each capacitance value indicating the user's touch are calculated.
  • a corrected coordinate value obtained by accurately correcting the touch position is calculated and supplied to the coordinate conversion circuit 144.
  • the sensor signal detected by the touch sensor unit 91 is displayed as display information B by the path 162 indicated by the thick broken line in FIG.
  • display information A is displayed on the display through a path 161 indicated by a solid line in FIG.
  • a thick solid line path 161 is a path that passes through the CPU 51 and the graphics controller 53 of the host processing unit 14, and a thick broken line path 162 is processed in the driver LSI 121 without going through the host processing unit 14. Pass.
  • the thick solid-line path 161 is a path with a large amount of processing (calculation amount) for generating display information for performing a calibration calculation or the like on the sensor signal detected by the touch sensor unit 91.
  • a thick broken line path 162 is a path with a small amount of processing (calculation amount) for generating display information from a sensor signal detected by the touch sensor unit 91.
  • the display information B generated by the path 162 that does not pass through the host-side processor is drawn. Delay time until rendering can be suppressed.
  • Display control processing for display information B> A display control process for displaying the display information B corresponding to the user's touch input on the display of the display module unit 92 through the path 162 that does not pass through the host side processor will be described with reference to the flowchart of FIG.
  • step S ⁇ b> 1 the AD conversion circuit 141 detects an analog sensor signal indicating the capacitance value from the touch sensor unit 91, converts it to a digital signal, and supplies it to the capacitance value storage register 142.
  • the capacitance value storage register 142 stores the digital sensor signal indicating the capacitance value supplied from the AD conversion circuit 141.
  • step S 2 the rasterizer 143 converts the digital capacitance value stored in the capacitance value storage register 142 into a raster format and stores it in the frame memory 146.
  • the digital capacitance value supplied from the rasterizer 143 is converted into display data B of display information B representing the touch position in a predetermined color based on the setting information stored in the setting storage unit 147, and the frame Stored in the memory 146.
  • step S3 the display data generation unit 148 reads the display data stored in the frame memory 146, and drives each pixel (inner transistor) of the display module unit 92.
  • a predetermined position on the display touched by the user in the display image displayed on the display of the display module unit 92 is displayed as display information B in a predetermined color.
  • step S ⁇ b> 11 the AD conversion circuit 141 detects an analog sensor signal indicating a capacitance value from the touch sensor unit 91, performs AD conversion to a digital signal, and supplies the digital signal to the coordinate conversion circuit 144.
  • the process of step S11 is executed as one process together with the process of step S1 of FIG.
  • the average value calculation unit 151 or the like When performing a calibration calculation, the average value calculation unit 151 or the like performs a calibration calculation on the sensor signal from the AD conversion circuit 141, and the sensor signal after the calibration calculation is supplied to the coordinate conversion circuit 144. Is done.
  • step S12 the coordinate conversion circuit 144 calculates the two-dimensional coordinate position on the display touched by the user based on the digital capacitance value as the sensor signal supplied from the AD conversion circuit 141.
  • step S13 the system interface 145 outputs the two-dimensional coordinate position indicating the touch position of the user supplied from the coordinate conversion circuit 144 to the host processing unit 14 via a system bus (not shown).
  • step S ⁇ b> 14 the system interface 145 obtains display data of display information A generated by performing an operation such as calibration on the two-dimensional coordinate position indicating the touch position of the user supplied to the host processing unit 14. And stored in the frame memory 146.
  • step S15 the display data generation unit 148 reads the display data stored in the frame memory 146, and drives each pixel (inner transistor) of the display module unit 92.
  • the process in step S15 and the process in step S3 described above are the same single process.
  • the predetermined position on the display touched by the user is displayed in the predetermined color as the display information A by the display control of the CPU 51 and the graphics controller 53 on the host side.
  • the display control process for displaying the display information B through the path 162 that does not pass through the host-side processor described with reference to FIG. 11 is further executed.
  • the display control process by the path 162 is a process that does not go through the host side processor, the display control process by the path 161 can be immediately displayed for the touch detection earlier than the display control process by the path 161. Thereby, the time difference from the user's touch detection to drawing (display) on the display can be shortened, and the drawing delay felt by the user can be reduced.
  • the path that does not pass through the host-side processor may be the path 163 indicated by a thick broken line in FIG. 13 in addition to the path 162 described above. That is, a two-dimensional coordinate value obtained from an AD converted digital sensor signal may be generated and displayed as display data of the display information B.
  • Example of personal computer configuration> The present technology can be applied to an electronic device having a built-in touch panel display, such as a computer, a mobile phone terminal, a tablet terminal, a portable game machine, and a portable music video playback device.
  • 14 and 15 show the overall configuration of a computer and a mobile phone.
  • FIG. 14 is a block diagram of a computer (personal computer) including the LCD module 80 to which the present technology is applied and the host processing unit 14 that controls the LCD module 80.
  • the CPU 201 controls the entire computer system according to various programs.
  • the ROM 202 stores a boot program used by the CPU 201, calculation parameters, and the like.
  • the RAM 203 temporarily stores programs used in the execution of the CPU 201, parameters that change as appropriate during the execution, and the like.
  • the computer also has an interface (such as a keyboard 204 for inputting characters, numerical values, various instructions, etc., a mouse 205 for moving a cursor, selecting a range, and the like, an external device such as a controller, a scanner, and a printer ( I / F) 206.
  • an interface such as a keyboard 204 for inputting characters, numerical values, various instructions, etc.
  • a mouse 205 for moving a cursor, selecting a range, and the like
  • an external device such as a controller, a scanner, and a printer ( I / F) 206.
  • the keyboard 204 and the mouse 205 are omitted.
  • the computer further includes a graphic board 207 for controlling image display, a network device for connecting to a network, a communication device 208 including a modem, a display 209 having a touch panel function, and a hard disk 210 as a data storage device.
  • a graphic board 207 for controlling image display
  • a network device for connecting to a network
  • a communication device 208 including a modem
  • a display 209 having a touch panel function
  • a hard disk 210 as a data storage device.
  • the hard disk 210 stores an operating system (OS), device drivers for various devices, and various application programs such as a word processor and spreadsheet software.
  • OS operating system
  • application programs such as a word processor and spreadsheet software.
  • the graphics controller 53 and the image memory 54 in FIG. 4 are arranged in the graphic board 207 in FIG. 14, and the LCD module 80 corresponds to the display 209 in FIG.
  • FIG. 15 is a block diagram of a high-function mobile phone terminal (smart phone) including the LCD module 80 to which the present technology is applied and the host processing unit 14 that controls the LCD module 80.
  • a communication antenna 221 is, for example, a built-in antenna, and is used to download and transmit various application programs including an information input control program based on the touch detection described above, transmission and reception of calls and e-mails via a mobile phone network and a public wireless communication network, Transmits and receives signal radio waves for communication with the Internet.
  • the antenna circuit 222 includes an antenna switch, a matching circuit, a filter circuit, and the like, and the transmission / reception circuit unit 223 performs frequency conversion, modulation, demodulation, and the like of transmission / reception signals through a mobile phone network or a public wireless communication network.
  • the speaker 236 is used, for example, for music reproduction, reception sound output, ringer sound (ringing tone) output, and the like.
  • the microphone 237 is used for collecting external sound, collecting transmitted sound, and the like.
  • the audio signal processing unit 235 includes an amplification circuit for the speaker 236, an amplification circuit for the microphone 237, a decompression decoding circuit that decompresses and decodes the compressed and encoded audio data supplied from the control / arithmetic unit 224, and the decompression decoding.
  • Digital / analog conversion circuit for converting the converted digital audio data into an analog audio signal
  • an analog / digital conversion circuit for converting the analog audio signal input from the microphone 237 into digital audio data
  • compression encoding the digital audio data It consists of a compression encoding circuit.
  • the video signal processing unit 231 expands and decodes the compression-encoded video data supplied from the control / arithmetic unit 224, and outputs the decompressed and decoded digital video and a digital broadcast receiving module 229 described later.
  • the display panel drive circuit or the like for displaying the received digital broadcast video on the touch panel display 233.
  • the video signal processing unit 231 also generates display data for displaying a desktop image and various menu images supplied from the control / calculation unit 224, a virtual touch area image corresponding to a position on the touch panel display 233, and the like. Those images are displayed on the touch panel display 233.
  • the touch panel display 233 has a touch sensor unit that can detect an input operation by the user.
  • the touch panel signal processing unit 232 measures the touch detection position, touch locus, touch duration, touch time interval, and the like from the touch panel display 233, and sends the measured data to the control / calculation unit 224 as touch detection data.
  • the touch input to the display surface of the touch panel display 233 can be performed by a stylus attached to the terminal in addition to the user's finger or the like.
  • the touch panel display 233 and the touch panel signal processing unit 232 support so-called multi-touch.
  • the key operation unit 240 includes a hard key provided on the casing of the mobile phone terminal and its peripheral circuit.
  • the key operation unit 240 converts a hard key press operation by the user into an electrical signal, amplifies and analog / digital converts the operation input signal, and sends the operation input data after the analog / digital conversion to the control / calculation unit 224. send.
  • the external input / output terminal unit 239 includes, for example, a cable connection connector and an external data communication interface circuit when performing data communication through a cable, a charging terminal and its charging interface circuit when charging an internal battery through a power cable, etc. Consists of.
  • the external memory I / F unit 230 includes an external memory slot to which a storage medium such as an external memory is attached and detached, and an external memory data communication interface circuit.
  • the near field communication module 228 includes a communication antenna for near field radio waves such as a wireless LAN and Bluetooth (registered trademark), and a near field communication circuit.
  • the digital broadcast receiving module 229 includes a receiving antenna and a tuner for so-called digital television broadcasting and digital radio broadcasting.
  • the digital broadcast receiving module 229 can receive not only single-channel digital broadcasts but also multiple-channel digital broadcasts at the same time.
  • the digital broadcast receiving module 229 can also receive data multiplexed in the digital broadcast.
  • the digital broadcast data received by the digital broadcast receiving module 229 can be stored (that is, recorded) in the memory unit 225 after being compressed by the control / arithmetic unit 224, for example.
  • the camera unit 234 includes an image sensor for photographing a still image or a moving image, an optical system, and its peripheral circuits, a light driving circuit for emitting photographing auxiliary light, and the like. Still image data and moving image data at the time of shooting by the camera unit 234 are sent to the video signal processing unit 231 as preview video data. Thereby, a preview image is displayed on the touch panel display 233 when the camera is photographed.
  • the captured still image data or moving image data is sent to the control / arithmetic unit 224, compressed, and then stored in the memory. Stored in a storage medium connected to the unit 225 and the external memory I / F unit 230.
  • the non-contact communication module 227 performs non-contact communication used in, for example, a so-called RFID (Radio Frequency-Identification), a non-contact type IC card, or the like through a non-contact communication antenna.
  • RFID Radio Frequency-Identification
  • the GPS (Global Positioning System) module 226 has a GPS antenna and obtains the latitude and longitude of the current position of the terminal using GPS signals from GPS geodetic satellites. GPS data (information indicating latitude and longitude) obtained by the GPS module 226 is sent to the control / calculation unit 224. As a result, the control / calculation unit 224 can know the current position and movement of the terminal itself.
  • the various sensor units 238 include various detection sensors such as a terminal state detection sensor for detecting the state of the mobile phone terminal and its peripheral circuits.
  • Examples of the various sensor units 238 include an inclination sensor, an acceleration sensor, an orientation sensor, a temperature sensor, a humidity sensor, and an illuminance sensor.
  • Detection signals from the various sensor units 238 are sent to the control / calculation unit 224. Thereby, the control / calculation unit 224 can know the state (tilt, acceleration, direction, temperature, humidity, illuminance, etc.) of the mobile phone terminal.
  • the memory unit 225 includes a built-in memory provided in the terminal and a removable card memory. Examples of the removable card-like memory include cards that store so-called SIM (Subscriber Identity) Module information and the like.
  • the built-in memory consists of ROM (Read Only Memory) and RAM (Random Access Memory).
  • the ROM stores an OS (Operating System), a control program for the control / calculation unit 224 to control each unit, various initial setting values, dictionary data, character prediction conversion dictionary data, various sound data, various application programs, and the like. ing.
  • This ROM includes rewritable ROM such as NAND-type flash memory (NAND-type flash memory) or EEPROM (Electrically-Erasable Programmable Read-Only Memory), e-mail data, phone book and mail address book data, static Data of image and moving image content, and other various user setting values can be stored.
  • the RAM stores data as needed as a work area and a buffer area when the control / arithmetic unit 224 performs various data processing.
  • the control / arithmetic unit 224 includes a CPU (central processing unit), and includes a transmission / reception circuit unit 223, a video signal processing unit 231, an audio signal processing unit 235, a GPS module 226, a non-contact communication module 227, a short-range wireless communication module 228, Controls each part such as a digital broadcast receiving module 229, an external memory I / F part 230, a camera part 234, various sensor parts 238, an external input / output terminal part 239, a key operation part 240, a touch panel signal processing part 232, and the like. Perform various calculations.
  • the control / arithmetic unit 224 executes a control program and various application programs stored in the memory unit 225.
  • the cellular phone terminal is naturally also about each component provided in a general cellular phone terminal, such as a clock unit that measures time and time, a battery that supplies power to each unit, and a power management IC that controls the power. I have.
  • FIG. 16 shows a display example of the touch panel display 81 corresponding to the first modification.
  • the driver IC 83 When the touch of the user is detected on the touch panel display 81 and sensor data corresponding to the touch position is supplied from the detection circuit 102 of the driver IC 82 to the driver IC 83, the driver IC 83 responds to the color (background color) of the display image. Then, the drawing color of the display information B is automatically determined (changed), and the display information B is drawn. For example, the driver IC 83 determines and draws a color (complementary color) contrasting with the background color as the drawing color of the display information B.
  • 16A shows an example in which, when a white background image is displayed on the touch panel display 81 of the mobile phone terminal 301, the driver IC 83 draws the touch position touched by the user with the stylus 311 in black as the display information B. Is shown.
  • FIG. 16B illustrates an example in which, when a black background image is displayed on the touch panel display 81 of the mobile phone terminal 301, the driver IC 83 draws the touch position touched by the user with the stylus 311 in white as the display information B. Is shown.
  • FIG. 17 shows a display example of the touch panel display 81 corresponding to the second modification.
  • the second modification is an example in which the display information B is drawn with the set color and size in advance when the display information B is drawn in color and size.
  • FIG. 17A shows an example of a setting screen for setting the color and size when the display information B is drawn.
  • a setting screen as shown in FIG. 17A is displayed on the touch panel display 81, and the user selects the color and size when the display information B is drawn.
  • the color and size selected by the user are stored in the setting storage unit 114 as setting information. Note that in the setting screen of A in FIG. 17, the difference in color of the display information B is represented by the difference in pattern (pattern).
  • the driver IC 83 uses the color and size indicated by the setting information stored in the setting storage unit 114.
  • Draw display information B the display information B can be drawn with an arbitrary color and size selected by the user.
  • FIG. 18 shows a display example of the touch panel display 81 corresponding to the third modification.
  • the set color or size is set. This is an example of drawing display information B using
  • FIG. 18A shows an example of a setting screen for setting the color and size when drawing characters and pictures in an application for drawing characters and pictures. Since the color and size set here are reflected in the display image generated by the application executed by the CPU 51 of the host processing unit 14, it corresponds to the color and size of the display information A via the host-side processor. To do.
  • the driver IC 83 is the same as the drawing color and size of the display information A.
  • Draw display information B with color and size. Thereby, the display color B of the display information B drawn through the host side processor and the display information A drawn through the host side processor are the same.
  • the display information B is drawn on the touch panel display 81 first, and then the display information A is displayed on the display information B. Rendered in a replacement form.
  • the display information A may be instantaneously replaced, but the display information A is changed from the display information B by gradually changing the transmittance when the display information A is superimposed on the display information B.
  • the display may be controlled so as to be gradually replaced.
  • FIG. 19 shows a display example of the touch panel display 81 corresponding to the fourth modification.
  • the fourth modification example only the display information A and the display information A are drawn in the touch input area of the touch panel display 81 by drawing the display information A and the display information B. It is an example which divides the area
  • the driver IC 83 uses the display information B generated without going through the host side processor and the host side processor. Both display information A to be generated is drawn. On the other hand, in the area 322 other than the area 321, only the display information A via the host side processor is drawn.
  • FIG. 20 shows a display example of the touch panel display 81 corresponding to the fifth modification.
  • the fifth modified example is an example in which display information A and display information B are drawn, and whether or not to provide quick feedback with respect to a user's touch input is distinguished depending on the application.
  • the driver IC 83 draws the display information A and the display information B in the application software ⁇ as shown in A of FIG. 20, but the host side processor is used in the application software ⁇ as shown in B of FIG. Only the display information A that has passed is drawn.
  • the driver IC 83 can switch whether or not to draw the display information B by acquiring, from the application software, a flag indicating whether or not to enable drawing of the display information B that does not pass through the host-side processor.
  • Embodiments of the present technology are not limited to the above-described embodiments, and various modifications can be made without departing from the gist of the present technology.
  • each step described in the above-described flowchart can be executed by one device or can be shared by a plurality of devices. Further, when a plurality of processes are included in one step, the plurality of processes included in the one step can be executed by being shared by a plurality of apparatuses in addition to being executed by one apparatus.
  • First display data indicating the touch input position of the user with respect to the touch panel display is acquired from the first processing unit via the first path, and from the first processing unit using the first display data.
  • Second display data is acquired via a second pass from a second processing unit that executes a display image generation process with a large amount of processing, and first display information based on the first display data;
  • a display control apparatus comprising: a display control unit that performs control to display second display information based on second display data on the touch panel display.
  • a setting storage unit for storing a drawing color when displaying the first display information using the first display data; The display control device according to (1), wherein the display control unit displays the first display information in a drawing color set in the setting storage unit.
  • a setting unit configured to set a drawing color when displaying the first display information using the first display data;
  • the display control device according to (1) or (2), wherein the setting storage unit stores the drawing color set by the setting unit.
  • the display control unit determines a drawing color of the first display information according to a background color of a display image displayed on the touch panel display, and causes the display color to be displayed. Any one of (1) to (3) The display control apparatus described.
  • the display control according to any one of (1) to (4), wherein the display control unit determines and displays a drawing setting of the first display information according to a drawing setting of the second display information. apparatus.
  • the display control unit replaces the first display information with the second display information by gradually changing the transmittance of the first display information and the second display information.
  • the display control device according to any one of (5). (7) The display control unit distinguishes between a case where both the first display information and the second display information are displayed and a case where only the second display information is displayed according to a display area of the touch panel display. The display control device according to any one of (1) to (6). (8) The display control unit distinguishes between a case where both the first display information and the second display information are displayed and a case where only the second display information is displayed, depending on the application. 7) The display control apparatus in any one of. (9) The display control device according to any one of (1) to (8), wherein the first display data is sensor data of the touch input position.
  • the display control device according to any one of (1) to (9), wherein the first display data is data after a calibration calculation is performed on sensor data at the touch input position.
  • First display data indicating the touch input position of the user with respect to the touch panel display is acquired from the first processing unit via the first path, and from the first processing unit using the first display data.
  • Second display data is acquired via a second pass from a second processing unit that executes a display image generation process with a large amount of processing, and first display information based on the first display data;
  • First display data indicating the touch input position of the user with respect to the touch panel display is acquired from the first processing unit via the first path, and from the first processing unit using the first display data.
  • Second display data is acquired via a second pass from a second processing unit that executes a display image generation process with a large amount of processing, and first display information based on the first display data;

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Human Computer Interaction (AREA)
  • Chemical & Material Sciences (AREA)
  • Crystallography & Structural Chemistry (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Position Input By Displaying (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

　本技術は、タッチパネルディスプレイの操作性を向上させることができるようにする表示制御装置、表示制御方法、およびプログラムに関する。 表示データ生成部は、タッチパネルディスプレイに対するユーザのタッチ入力位置を示す第１の表示データを、第１の処理部から第１のパスを介して取得するとともに、第１の表示データを用いて第１の処理部より処理量の多い表示画像生成処理を実行する第２の処理部から、第２のパスを介して第２の表示データを取得し、第１の表示データに基づく第１の表示情報と、第２の表示データに基づく第２の表示情報をタッチパネルディスプレイに表示させる制御を行う。本技術は、例えば、LCDモジュール等に適用できる。

Description

表示制御装置、表示制御方法、およびプログラム
　本技術は、表示制御装置、表示制御方法、およびプログラムに関し、特に、タッチパネルディスプレイの操作性を向上させることができるようにする表示制御装置、表示制御方法、およびプログラムに関する。
　いわゆるタッチパネルと呼ばれる接触検出装置（以下、タッチセンサという。）付きの液晶表示装置が知られている。この液晶表示装置は、タッチセンサを液晶パネルに重ねて形成し、液晶表示画面に画像として各種のボタンを表示させることにより、通常のボタンの代わりとして情報入力を可能とする。この技術を小型のモバイル機器に適用すると、ディスプレイとボタンの配置の共用化が可能となり、画面の大型化、操作部の省スペース化、部品点数の削減などの大きなメリットをもたらすことができる。
　しかしながら、タッチセンサを液晶パネルに重ねた構造では、液晶モジュール全体の厚さが厚くなるという問題が生じる。そこで、薄型化を目的として、例えば、液晶表示素子の観察側基板とその外面に配置された観察用偏光板との間にタッチセンサ用導電膜を設け、このタッチセンサ用導電膜と偏光板の外面との間に、偏光板の外面をタッチ面とした静電容量型タッチセンサを形成したタッチセンサ付き液晶表示装置が提案されている（例えば、特許文献１参照）。
　図１は、タッチセンサ付きの液晶表示装置を用いたパーソナルコンピュータの表示制御処理に関する制御ブロック図を示している。
　パーソナルコンピュータは、LCDモジュール１０と、それを制御するホスト側の処理部として、ホスト処理部１４を備える。LCDモジュール１０は、タッチパネルディスプレイ１１とドライバIC１２および１３を備える。
　タッチパネルディスプレイ１１は、タッチパネル２１とLCDパネル２２で構成され、ドライバIC１２は、タッチパネル２１の制御IC(Integrated Circuit)であり、ドライバIC１３は、LCDパネル２２の制御ICである。
　ドライバIC１２は、タッチパネルドライバ３１、検出回路３２、および座標変換回路３３を有する。
　タッチパネルドライバ３１は、タッチパネル２１においてX軸方向とY軸方向それぞれに複数配列されている帯状の導電膜ラインを走査駆動する。検出回路３２は、タッチパネルドライバ３１の走査駆動に応じて、タッチパネル２１の所定の位置におけるユーザのタッチ（接触）の有無に応じた静電容量値を示すアナログのセンサ信号を検出し、デジタルの信号にAD変換する。座標変換回路３３は、検出回路３２が検出したタッチ検出位置を示すデジタルのセンサ信号を、タッチパネル２１のX座標位置とY座標位置で表される２次元座標位置に変換し、生座標情報として、ホスト処理部１４に出力する。
　ドライバIC１３は、LCDドライバ４１、メモリ４２、およびタイミングコントローラ４３を有する。
　ドライバIC１３には、ドライバIC１２が出力したタッチ位置を示す生座標位置に対して、キャリブレーションやフィルタリングなどの演算を行い、その演算結果を基にした表示情報Aの表示データが、ホスト処理部１４から供給される。
　LCDドライバ４１は、ホスト処理部１４から供給された表示情報Aを表示させるため、メモリ４２に記憶されている表示データに基づいて、２次元状に複数配列されたLCDパネル２２の各画素（内のトランジスタ）を所定の順序で駆動する。メモリ４２は、ホスト処理部１４から供給された表示情報Aの表示データを記憶する。タイミングコントローラ４３は、ホスト処理部１４から供給された表示情報Aの表示データを取得してメモリ４２に記憶させる。
　ホスト処理部１４は、CPU（Central Processing Unit）５１、メモリ（RAM：Random Access Memory）５２、グラフィックスコントローラ５３、及び画像メモリ（VRAM）５４を有する。
　CPU５１は、パーソナルコンピュータ全体を制御するプロセッサであり、パーソナルコンピュータに搭載されている各デバイスのデバイスドライバ、オペレーティングシステム（OS）、アプリケーションプログラムなどを実行する。メモリ５２は、CPU５１が所定の処理を実行する上で必要なデータ、例えば、実行プログラムなどを記憶する。
　また、CPU５１は、LCDモジュール１０のドライバIC１２から、ユーザのタッチ位置を示す生座標位置を生座標情報として取得すると、生座標位置の重心計算、平均化等を行って、ユーザのタッチ位置を正確にキャリブレーションし、キャリブレーション後のタッチ位置（キャリブレーション座標位置）を算出する。
　グラフィックスコントローラ５３は、LCDパネル２２に画像を表示するためのプロセッサであり、LCDパネル２２に表示させる画像の表示データを、適宜、画像メモリ５４に記憶させつつ、LCDパネル２２のドライバIC１３に出力する。例えば、グラフィックスコントローラ５３は、ユーザのキャリブレーション座標位置に基づいて、タッチ位置に反応した表示画像としての表示情報Aの表示データを、LCDパネル２２のドライバIC１３に出力する。
特開２００９－９７５０号公報
　図１に示した構成において、タッチパネル２１上の所定の位置がユーザによりタッチされてから、それに対応する表示情報Aの表示がLCDパネル２２でなされるまでの処理の流れについて簡単に説明する。
　ユーザがタッチパネル２１の所定の位置をタッチすると、そのタッチを示す静電容量値のアナログのセンサ信号が検出回路３２で検出される。アナログのセンサ信号は、検出回路３２でデジタルのセンサ信号に変換された後、座標変換回路３３で２次元座標位置に変換されて、生座標情報として、ホスト処理部１４のCPU５１に供給される。
　ホスト処理部１４のCPU５１は、生座標情報としての２次元座標位置に対してキャリブレーション等を行って、ユーザのタッチ位置に対応するキャリブレーション座標位置を算出する。そして、算出されたキャリブレーション座標位置に基づいて生成された表示情報Aの表示データが、グラフィックスコントローラ５３を介してLCDパネル２２のドライバIC１３に供給される。
　LCDパネル２２のドライバIC１３のタイミングコントローラ４３は、表示情報Aの表示データを取得してメモリ４２に記憶させ、LCDドライバ４１が、メモリ４２に記憶されている表示情報Aの表示データに応じてLCDパネル２２の駆動を行う。これにより、LCDパネル２２に、表示情報Aが表示される。
　以上のように、従来のタッチパネル表示制御では、検出されたタッチ位置を示す生座標情報が、CPU５１に供給され、CPU５１で、フィルタリング、キャリブレーションなどの複雑な演算処理が行われてから、LCDパネル２２に表示される。
　したがって、ユーザがタッチパネルディスプレイ１１に対して操作を行ってから、その操作を反映した画像がLCDパネル２２に表示されるまでに、遅延が発生してしまう。ユーザが素早い動きの操作（入力）を行った場合に、その遅延は特に顕著に表れ、ユーザに、操作感の低下によるストレスを与えてしまう。
　本技術は、このような状況に鑑みてなされたものであり、タッチパネルディスプレイの操作性を向上させることができるようにするものである。
　本技術の一側面の表示制御装置は、タッチパネルディスプレイに対するユーザのタッチ入力位置を示す第１の表示データを、第１の処理部から第１のパスを介して取得するとともに、前記第１の表示データを用いて前記第１の処理部より処理量の多い表示画像生成処理を実行する第２の処理部から、第２のパスを介して第２の表示データを取得し、前記第１の表示データに基づく第１の表示情報と、前記第２の表示データに基づく第２の表示情報を前記タッチパネルディスプレイに表示させる制御を行う表示制御部を備える。
　本技術の一側面の表示制御方法は、タッチパネルディスプレイに対するユーザのタッチ入力位置を示す第１の表示データを、第１の処理部から第１のパスを介して取得するとともに、前記第１の表示データを用いて前記第１の処理部より処理量の多い表示画像生成処理を実行する第２の処理部から、第２のパスを介して第２の表示データを取得し、前記第１の表示データに基づく第１の表示情報と、前記第２の表示データに基づく第２の表示情報を前記タッチパネルディスプレイに表示させる制御を行う。
　本技術の一側面のプログラムは、コンピュータに、タッチパネルディスプレイに対するユーザのタッチ入力位置を示す第１の表示データを、第１の処理部から第１のパスを介して取得するとともに、前記第１の表示データを用いて前記第１の処理部より処理量の多い表示画像生成処理を実行する第２の処理部から、第２のパスを介して第２の表示データを取得し、前記第１の表示データに基づく第１の表示情報と、前記第２の表示データに基づく第２の表示情報を前記タッチパネルディスプレイに表示させる制御を行う処理を実行させるためのものである。
　本技術の一側面においては、タッチパネルディスプレイに対するユーザのタッチ入力位置を示す第１の表示データを、第１の処理部から第１のパスを介して取得するとともに、前記第１の表示データを用いて前記第１の処理部より処理量の多い表示画像生成処理を実行する第２の処理部から、第２のパスを介して第２の表示データを取得し、前記第１の表示データに基づく第１の表示情報と、前記第２の表示データに基づく第２の表示情報を前記タッチパネルディスプレイに表示させる制御が行われる。
　なお、プログラムは、伝送媒体を介して伝送することにより、又は、記録媒体に記録して、提供することができる。
　表示制御装置は、独立した装置であっても良いし、１つの装置を構成している内部ブロックであっても良い。
　本技術の一側面によれば、タッチパネルディスプレイの操作性を向上させることができるようにする。
従来のタッチ入力に対する表示制御に関する制御ブロック図である。 本技術が適用可能なタッチパネルディスプレイの構造を説明する図である。 本技術が適用可能なタッチパネルディスプレイの構造を説明する図である。 本技術が適用されたLCDモジュールの第１の実施の形態の構成例を示すブロック図である。 本技術を用いたタッチ入力に対する表示例を示す図である。 従来のタッチ入力に対する表示例を示す図である。 本技術が適用されたLCDモジュールの第２の実施の形態の構成例を示すブロック図である。 本技術が適用されたLCDモジュールの第３の実施の形態の構成例を示すブロック図である。 図８のドライバLSIの詳細構成を示すブロック図である。 本技術の表示制御のパスを示す図である。 ホスト側プロセッサを経由しない表示制御処理を説明するフローチャートである。 ホスト側プロセッサを経由した表示制御処理を説明するフローチャートである。 本技術のその他の表示制御のパスを示す図である。 本技術を適用したコンピュータのブロック図である。 本技術を適用した高機能型の携帯電話端末のブロック図である。 本技術の第１の変形例を説明する図である。 本技術の第２の変形例を説明する図である。 本技術の第３の変形例を説明する図である。 本技術の第４の変形例を説明する図である。 本技術の第５の変形例を説明する図である。
　以下、本技術を実施するための形態（以下、実施の形態という）について説明する。なお、説明は以下の順序で行う。
１．本技術が適用されるタッチパネルの構造の説明
２．LCDモジュールの第１の実施の形態
３．LCDモジュールの第２の実施の形態
４．LCDモジュールの第３の実施の形態
５．パーソナルコンピュータの構成例
６．携帯電話端末の構成例
７．変形例
＜１．本技術が適用されるタッチパネルの構造の説明＞
　初めに、図２および図３を参照して、以下に後述する本技術が適用可能なタッチパネルディスプレイの構造について説明する。
　タッチパネルディスプレイの構造は、図２に示すように、外付け型と内蔵型に大きく分類される。
　外付け型のタッチパネルディスプレイは、LCDパネルの表面にタッチパネルを貼り付けた形態のものである。図１に示したタッチパネルディスプレイ１１は、タッチパネル２１とLCDパネル２２で構成されており、外付け型に相当する。外付け型では、画像の表示パネルとタッチパネルが別々に構成されるので、画像の表示パネルは、LCDパネル以外に、PDPパネル、OLEDパネル等でもよい。
　一方、内蔵型のタッチパネルディスプレイは、LCDパネルのパネル内部にタッチパネル機能が形成されている構造であり、さらに、インセル型とオンセル型に分類することができる。
　インセル型は、タッチパネル機能をTFT-LCDセル内に内蔵したものであり、オンセル型は、偏光板とカラーフィルタを設けたガラス基板の間にタッチパネル機能を内蔵したものである。
　インセル型の検出方式には、図３に示されるように、マイクロスイッチを用いた接触型、静電容量の変化を検出する容量型、光を検出する光学型などがあり、容量検出と光検出の両方を用いるハイブリッド型も存在する。
　一方、オンセル型の検出方式には、抵抗値（電圧値）の変化を検出する抵抗型と、静電容量の変化を検出する容量型が存在する。
　タッチパネルディスプレイは以上のような各種の構造に分類することができるが、本技術は、外付け型、内蔵型、オンセル型若しくはインセル型問わず、全ての構造に対して適用することができる。ただし、以下の各実施の形態では、容量型の検出方式を用いたインセル型（内蔵型）のタッチパネルディスプレイが採用されている例について説明する。また、以下で説明する内蔵型のタッチパネルディスプレイは、LCDパネルのパネル内部にタッチパネル機能が形成されているものであるが、OLEDパネルのパネル内部にタッチパネル機能が形成されているものなどでも同様に本技術が適用できる。内蔵型のタッチパネルディスプレイには、タッチセンサ機能を備えつつ、視認性の向上、タッチ判別領域の高密度化、センサ信号のS/N比の向上、ディスプレイの厚みを薄型化することができる、などのメリットがある。特に、タッチ領域の高密度化とセンサ信号のS/N比向上によって、内蔵型のタッチパネルディスプレイでは、指が近づいただけで検知できるようになり、プロキシミティセンシングなどの新しい操作体験が実現可能となる。
＜２．LCDモジュールの第１の実施の形態＞
　本技術が適用されたLCDモジュールの第１の実施の形態について説明する。
　図４は、本技術が適用されたLCDモジュール８０と、それを制御するホスト処理部１４のブロック図を示している。このLCDモジュール８０とホスト処理部１４は、図１と同様に、例えば、パーソナルコンピュータの一部として構成される。
　LCDモジュール８０は、タッチパネルディスプレイ８１と、ドライバIC８２および８３を備える。ホスト処理部１４は、LCDモジュール８０を制御する、図１と同様のホスト側の処理部であり、ホスト処理部１４についての説明は、上述した説明と重複するので省略する。
　タッチパネルディスプレイ８１は、上述した内蔵型かつインセル型であって、例えば容量型の検出方式を採用したタッチパネルディスプレイであり、タッチセンサ部９１とディスプレイモジュール部９２を備える。
　ドライバIC８２は、タッチパネルドライバ１０１、検出回路１０２、および座標変換回路１０３を備え、タッチセンサ部９１を制御する。
　タッチセンサ部９１は、タッチパネルディスプレイ８１の表示面を２次元の行列状に複数の領域に分割した各領域で検出されるセンサ信号を、タッチパネルドライバ１０１の駆動制御により、所定の順序で検出回路１０２に出力する。タッチパネルドライバ１０１は、タッチセンサ部９１を駆動制御する。
　検出回路１０２は、タッチパネルドライバ１０１の駆動制御に応じて、タッチパネルディスプレイ８１の所定の位置（各領域）におけるユーザのタッチの有無に応じた静電容量値を示すアナログのセンサ信号を検出（取得）し、デジタルの信号にAD変換する。
　検出回路１０２は、デジタルのセンサ信号を、座標変換回路１０３に供給するとともに、ラスタ形式のセンサデータとして、ドライバIC８３にも出力する。
　座標変換回路１０３は、検出回路１０２が検出した所定の位置のデジタルのセンサ信号を、タッチパネルディスプレイ８１のX座標位置とY座標位置で表される２次元座標位置に変換し、生座標情報として、ホスト処理部１４に出力する。
　ドライバIC８３は、LCDドライバ１１１、メモリ１１２、タイミングコントローラ１１３、および設定記憶部１１４を備え、ディスプレイモジュール部９２を制御する。
　LCDドライバ１１１は、メモリ１１２に記憶された表示情報を表示させるため、２次元状に複数配列されたディスプレイモジュール部９２の各画素（内のトランジスタ）を所定の順序で駆動する。
　メモリ１１２は、ディスプレイモジュール部９２で表示する表示情報の表示データを記憶する。メモリ１１２には、図１のメモリ４２と同様にホスト処理部１４から供給された表示情報Aの表示データと、ホスト処理部１４を介さずにドライバIC８２の検出回路１０２から直接供給されたセンサデータに対応する表示情報Bの表示データが記憶される。
　ドライバIC８２の検出回路１０２から直接供給されるセンサデータは、ユーザのタッチ箇所を示すデジタルのセンサ信号であり、タッチ位置は特定されるが、どのような色で表示させるかを示す色情報は有していない。そのため、メモリ１１２は、検出回路１０２から供給されたセンサデータが示す表示位置に、設定記憶部１１４に記憶されている色情報が示す色で描画する表示データを生成し、供給されたセンサデータに対応する表示情報Bの表示データとして記憶する。
　ここで、表示情報Bは、タッチセンサ部９１で検出されたユーザのタッチ位置を素早くフィードバックした第１の表示情報であり、ホスト処理部１４を介して供給される表示情報Aは、タッチセンサ部９１で検出されたユーザのタッチ位置がホスト処理部１４でキャリブレーション等された第２の表示情報である。
　メモリ１１２において、ドライバIC８２からセンサデータに基づく表示情報Bの描画情報の更新と、ホスト処理部１４のグラフィックスコントローラ５３からの表示情報Aの描画情報の更新は、それぞれ異なるタイミング周期で並行して実行される。ドライバIC８２からの表示情報Bの描画情報の更新は、ホスト処理部１４で実行するようなキャリブレーションやフィルタリングなどの複雑な演算を行う必要がないので、表示情報Aの描画情報の更新周期よりも短い周期で実行される。したがって、タッチセンサ部９１でユーザのタッチが検出された場合、初めに、そのタッチに対応する表示情報Bがディスプレイに描画され、その後、ホスト処理部１４でキャリブレーション等の演算を行った表示情報Aがディスプレイに描画（再描画）されることになる。
　タイミングコントローラ１１３は、ホスト処理部１４から供給された表示情報Aの表示データを取得してメモリ１１２に記憶させる。
　設定記憶部１１４は、ドライバIC８２からのセンサデータに基づく表示情報Bを生成するための、タッチ位置を描画するときの描画色を決定する色情報を記憶する。この色情報は、例えば、CPU５１で実行される所定のアプリケーション上で設定することにより、設定記憶部１１４に予め記憶される。
　なお、ドライバIC８２からのセンサデータに基づく表示情報Bをメモリ１１２に記憶させずに、LCDドライバ１１１が、ドライバIC８２からのセンサデータを取得して表示情報Bを生成し、ディスプレイモジュール部９２に直接描画してもよい。
＜ユーザのタッチ入力に対する表示例＞
　図５は、図４のホスト処理部１４とLCDモジュール８０により、ユーザがタッチしたディスプレイ上の位置を、点で描画する表示例を示している。
　ユーザは、図５に示すように、タッチパネルディスプレイ８１のディスプレイ上を指でタッチし、時刻ｔ１から時刻ｔ４にかけて、左から右方向にスライドする操作（入力）を行ったとする。
　時刻ｔ１において、ユーザが、タッチパネルディスプレイ８１のディスプレイ上の所定の位置Ｘ１をタッチすると、ユーザがタッチした瞬間に、タッチ位置Ｘ１のセンサデータが、ドライバIC８２からドライバIC８３に供給される。そして、ドライバIC８３により、時刻ｔ１における表示情報B１として、ユーザがタッチした位置Ｘ１と同じ位置に点B１が描画（表示）される。
　タッチ位置Ｘ１の生座標情報は、ホスト処理部１４に供給され、ホスト処理部１４でキャリブレーション演算などが実行されて、表示情報A１の表示データとしてドライバIC８３に供給される。そして、時刻ｔ１から所定時間経過後の、ユーザが位置Ｘ１より左側の位置Ｘ２をタッチしている時刻ｔ２において、位置Ｘ２に表示情報B２として描画される点B２とともに、表示情報A１の表示データに基づく点A１が、位置Ｘ１に描画される。すなわち、ホスト処理部１４を介して生成された点A１（表示情報A１）は、時刻ｔ１から遅れて、位置Ｘ２をタッチしている時刻ｔ２に表示される。
　同様に、時刻ｔ３では、ユーザがタッチしている位置Ｘ３に表示情報B３としての点B３が描画されるとともに、ホスト処理部１４により生成されて、遅れて表示される点A２が、位置Ｘ２に描画される。
　時刻ｔ４では、ユーザがタッチしている位置Ｘ４に表示情報B４としての点B４が描画されるとともに、ホスト処理部１４により生成されて、遅れて表示される点A３が、位置Ｘ３に描画される。
　比較のため、同様のタッチ、スライド操作を、従来の表示制御方法で描画した場合について説明する。
　図６は、同様のタッチ、スライド操作を、従来の表示制御方法で描画した場合の表示例を示している。
　従来の表示制御方法では、ユーザのタッチ位置を示すセンサデータを、ドライバIC８２から、ホスト処理部１４を介さずに、直接、ドライバIC８３に供給するパスは存在しない。ユーザがタッチしたタッチ位置Ｘ１の生座標情報は、ホスト処理部１４に供給されて、キャリブレーション演算されてから、ドライバIC８３に供給されるので、位置Ｘ１に点A１が描画されるまで、キャリブレーション演算等による処理遅延が生じる。そのため、ユーザがタッチ位置Ｘ１をタッチした瞬間の時刻ｔ１では、図６に示すように、ディスプレイには何も描画されない。
　そして、時刻ｔ１から所定時間遅れた時刻ｔ２に、位置Ｘ１に点A１が描画されるが、上述したように、時刻ｔ２では、ユーザは指の位置をスライドさせ、ユーザの指は位置Ｘ２に移動している。同様に、ユーザが位置Ｘ３をタッチしている時刻ｔ３では、それより少し前の時刻ｔ２にタッチしていた位置Ｘ２に点A２が描画され、ユーザが位置Ｘ４をタッチしている時刻ｔ４では、それより少し前の時刻ｔ３にタッチしていた位置Ｘ３に点A３が描画される。
　このように、従来の表示制御方法によれば、ユーザのタッチ位置を示すセンサデータを、ドライバIC８２から、ホスト処理部１４を介さずに、直接、ドライバIC８３に供給するパスが存在しないため、検出されたタッチに対応する描画のタイミングに遅れが生じる。
　一方、本技術を適用したLCDモジュール８０の表示制御によれば、ホスト処理部１４からの表示データに基づいて表示情報Aを描画する前に、まず、ドライバIC８２からホスト処理部１４を介さずにドライバIC８３に直接供給されるセンサデータに基づいて表示情報Bが描画される。これにより、ユーザが感じる表示情報Aの描画の遅れを軽減することができる（ユーザが表示情報Aの描画の遅れを感じにくい）。
　このように、本技術を適用したLCDモジュール８０の表示制御によれば、ユーザのタッチ入力に対して素早いフィードバックを提供することができ、ホスト処理部１４を経由した描画遅延に由来する操作性の低下を抑制することができる。すなわち、タッチパネルディスプレイの操作性を向上させることができる。
＜３．LCDモジュールの第２の実施の形態＞
　次に、LCDモジュールの第２の実施の形態について説明する。
　図７は、第２の実施の形態のLCDモジュール８０と、それを制御するホスト処理部１４のブロック図を示している。
　第２の実施の形態のLCDモジュール８０は、ドライバIC８２に、座標補正回路１０４が新たに追加されている点が、図４に示した第１の実施の形態と異なる。
　第１の実施の形態では、ユーザがタッチしたタッチパネルディスプレイ８１の２次元座標位置が、生座標情報としてホスト処理部１４に出力され、ホスト処理部１４で、生座標位置の平均値や標準偏差などの補正演算を行ってユーザのタッチ位置を正確に計算するキャリブレーションが行われた。
　第２の実施の形態においては、上述した第１の実施の形態ではホスト処理部１４で行っていた、生座標情報に基づいてユーザの正確なタッチ位置を計算するキャリブレーションを、座標補正回路１０４が行う。座標補正回路１０４は、補正演算後のユーザのタッチ位置を示す補正座標値を、補正座標情報として、ホスト処理部１４とドライバIC８３に出力する。
　第２の実施の形態の構成は、キャリブレーション用の補正データを記憶するホスト側の記憶装置がライトプロテクトされていたり、接続されるホスト側が不特定である場合に有用である。
＜４．LCDモジュールの第３の実施の形態＞
　次に、LCDモジュールの第３の実施の形態について説明する。
　図８は、第３の実施の形態のLCDモジュール８０と、それを制御するホスト処理部１４のブロック図を示している。
　第３の実施の形態のLCDモジュール８０では、第１及び第２の実施の形態でドライバIC８２とドライバIC８３の２つのドライバICで構成されていたものが、一つのドライバLSI(Large Scale Integration) １２１によって構成されている点が異なり、それ以外は同様である。
　ドライバLSI１２１は、例えば、公知の相補型MOS集積回路製造技術によって、単結晶シリコンを用いた一個の半導体基板に形成される。
　ドライバLSI１２１において、座標補正回路１０４を省略した構成が、図４の第１の実施の形態と対応し、座標補正回路１０４を付加した構成が、図７の第２の実施の形態と対応する。
　図９は、第３の実施の形態のドライバLSI１２１を機能的にさらに詳細にしたブロック図である。図９を参照して、ドライバLSI１２１を用いた表示制御についてさらに説明する。
　ドライバLSI１２１は、AD変換回路１４１、容量値保存レジスタ１４２、ラスタライザ１４３、フレームメモリ１４６、座標変換回路１４４、システムインタフェース１４５、設定記憶部１４７、および表示データ生成部１４８を少なくとも有する。
　例えば、AD変換回路１４１、容量値保存レジスタ１４２、及びラスタライザ１４３は、図８の検出回路１０２の機能に相当する。
　また、座標変換回路１４４、システムインタフェース１４５、フレームメモリ１４６、設定記憶部１４７、及び表示データ生成部１４８は、それぞれ、図８の座標変換回路１０３、タイミングコントローラ１１３、メモリ１１２、設定記憶部１１４、及びLCDドライバ１１１に対応する。平均値計算部１５１、標準偏差計算部１５２、及びヒステリシス計算部１５３は、図８の座標補正回路１０４に対応する。
　なお、図９では、図８のタッチパネルドライバ１０１に対応する部分は省略されている。
　AD変換回路１４１は、タッチセンサ部９１からのアナログのセンサ信号を検出し、デジタルのセンサ信号にAD変換して、容量値保存レジスタ１４２と平均値計算部１５１に供給する。平均値計算部１５１、標準偏差計算部１５２、及びヒステリシス計算部１５３が省略されている場合には、デジタルのセンサ信号が、平均値計算部１５１ではなく座標変換回路１４４に供給される。
　容量値保存レジスタ１４２は、AD変換回路１４１から供給されたセンサ信号であるデジタルの静電容量値を記憶する。ラスタライザ１４３は、容量値保存レジスタ１４２に記憶されているデジタルの静電容量値をラスタ形式に変換し（ラスタライズし）、フレームメモリ１４６に格納する。
　座標変換回路１４４は、AD変換回路１４１から供給されたセンサ信号としてのデジタルの静電容量値に基づいて、ユーザがタッチしたディスプレイ上の２次元座標位置を計算する。
　システムインタフェース１４５は、座標変換回路１４４から供給される、ユーザのタッチ位置を示す２次元座標位置を、不図示のシステムバスを介して、パーソナルコンピュータ等のホスト処理部１４に出力する。
　システムインタフェース１４５は、ホスト処理部１４から供給される各種の制御情報を、ドライバLSI１２１内の内部レジスタ（不図示）に格納する。
　また、システムインタフェース１４５は、ホスト処理部１４から供給される、ディスプレイモジュール部９２のディスプレイで表示させる表示データを取得し、フレームメモリ１４６に格納する。
　フレームメモリ１４６は、一画面分の表示データを保持可能な記憶容量を有する。
　フレームメモリ１４６は、ラスタライザ１４３またはシステムインタフェース１４５から表示データが供給された場合、現在保持している表示データに上書きする形で、供給された表示データを記憶する。フレームメモリ１４６で保持されている表示データは、表示データ生成部１４８によって、最適なタイミングで読み出される。
　ラスタライザ１４３から供給されたデジタルの静電容量値は、設定記憶部１４７に記憶されている設定情報に基づいて、タッチ位置を所定の色で表した表示情報Bの表示データに変換されて、フレームメモリ１４６に格納される。
　一方、システムインタフェース１４５からは、ユーザのタッチ位置を示す２次元座標位置がホスト処理部１４のCPU５１でキャリブレーション演算等されることにより生成された表示情報Aの表示データが供給され、フレームメモリ１４６に格納される。
　設定記憶部１４７は、ディスプレイ上のタッチ位置を、表示情報Bとして表示する際の描画色を規定する設定情報を記憶する。
　表示データ生成部１４８は、フレームメモリ１４６に記憶されている表示データを読み出し、ディスプレイモジュール部９２のドレイン線（データ線）に、表示データに対応する電圧を印加することにより、ディスプレイモジュール部９２の各画素（内のトランジスタ）を駆動する。これにより、フレームメモリ１４６に記憶されている表示データに対応する画像（表示情報）が、ディスプレイモジュール部９２のディスプレイに表示される。
　平均値計算部１５１、標準偏差計算部１５２、及びヒステリシス計算部１５３が設けられている場合、ユーザのタッチを示す各静電容量値の平均、標準偏差、ヒステリシスが計算されることにより、ユーザのタッチ位置を正確に補正した補正座標値が計算され、座標変換回路１４４に供給される。
　以上のように構成されるLCDモジュール８０の第３の実施の形態において、タッチセンサ部９１で検出されたセンサ信号は、図１０において太線の破線で示されるパス１６２により表示情報Bとなってディスプレイに表示されるとともに、図１０において太線の実線で示されるパス１６１により表示情報Aとなってディスプレイに表示される。
　太線の実線のパス１６１は、ホスト処理部１４のCPU５１およびグラフィックスコントローラ５３を経由するパスであり、太線の破線のパス１６２は、ホスト処理部１４を介さずに、ドライバLSI１２１内で処理されるパスである。換言すれば、太線の実線のパス１６１は、タッチセンサ部９１で検出されたセンサ信号に対してキャリブレーションの演算等を行う、表示情報を生成するための処理量（演算量）の多いパスであり、太線の破線のパス１６２は、タッチセンサ部９１で検出されたセンサ信号から表示情報を生成するための処理量（演算量）の少ないパスである。
　キャリブレーション演算などを行った正確な表示情報Aを描画する前に、ホスト側プロセッサを経由しないパス１６２により生成した表示情報Bを描画することで、ユーザがタッチ入力を行ってからタッチパネルディスプレイ８１に描画されるまでの遅延時間を抑制することができる。
＜表示情報Bの表示制御処理＞
　図１１のフローチャートを参照して、ホスト側プロセッサを経由しないパス１６２により、ユーザのタッチ入力に対応する表示情報Bをディスプレイモジュール部９２のディスプレイに表示させる表示制御処理について説明する。
　初めに、ステップＳ１において、AD変換回路１４１は、タッチセンサ部９１からの静電容量値を示すアナログのセンサ信号を検出し、デジタルの信号にAD変換し、容量値保存レジスタ１４２に供給する。容量値保存レジスタ１４２は、AD変換回路１４１から供給された、静電容量値を示すデジタルのセンサ信号を記憶する。
　ステップＳ２において、ラスタライザ１４３は、容量値保存レジスタ１４２に記憶されているデジタルの静電容量値をラスタ形式に変換し、フレームメモリ１４６に格納する。ラスタライザ１４３から供給されたデジタルの静電容量値は、設定記憶部１４７に記憶されている設定情報に基づいて、タッチ位置を所定の色で表した表示情報Bの表示データに変換されて、フレームメモリ１４６に格納される。
　ステップＳ３において、表示データ生成部１４８は、フレームメモリ１４６に記憶されている表示データを読み出し、ディスプレイモジュール部９２の各画素（内のトランジスタ）を駆動する。
　以上の処理により、ディスプレイモジュール部９２のディスプレイに表示されている表示画像のうち、ユーザがタッチしたディスプレイ上の所定の位置が、表示情報Bとして、所定の色で表示される。
＜表示情報Aの表示制御処理＞
　次に、図１２のフローチャートを参照して、ホスト側プロセッサを経由するパス１６１により、ユーザのタッチに対応する表示情報Aをディスプレイモジュール部９２のディスプレイに表示させる表示制御処理について説明する。
　初めに、ステップＳ１１において、AD変換回路１４１は、タッチセンサ部９１からの静電容量値を示すアナログのセンサ信号を検出し、デジタルの信号にAD変換し、座標変換回路１４４に供給する。ステップＳ１１の処理は、図１１のステップＳ１の処理と合わせて一つの処理として実行される。
　なお、キャリブレーション演算を行う場合には、AD変換回路１４１からのセンサ信号に対して平均値計算部１５１等がキャリブレーション演算を行い、キャリブレーション演算後のセンサ信号が、座標変換回路１４４に供給される。
　ステップＳ１２において、座標変換回路１４４は、AD変換回路１４１から供給されたセンサ信号としてのデジタルの静電容量値に基づいて、ユーザがタッチしたディスプレイ上の２次元座標位置を計算する。
　ステップＳ１３において、システムインタフェース１４５は、座標変換回路１４４から供給された、ユーザのタッチ位置を示す２次元座標位置を、不図示のシステムバスを介して、ホスト処理部１４に出力する。
　ステップＳ１４において、システムインタフェース１４５は、ホスト処理部１４に供給したユーザのタッチ位置を示す２次元座標位置に対してキャリブレーション等の演算を行うことにより生成された、表示情報Aの表示データを取得し、フレームメモリ１４６に格納する。
　ステップＳ１５において、表示データ生成部１４８は、フレームメモリ１４６に記憶されている表示データを読み出し、ディスプレイモジュール部９２の各画素（内のトランジスタ）を駆動する。このステップＳ１５の処理と、上述したステップＳ３の処理は、同じ一つの処理である。
　図１２の処理によれば、ユーザがタッチしたディスプレイ上の所定の位置が、ホスト側のCPU５１およびグラフィックスコントローラ５３の表示制御により、表示情報Aとして、所定の色で表示される。
　図１に示した従来のLCDモジュール１０では、図１２を参照して説明した、ホスト側プロセッサを経由したパス１６１による、表示情報Aを表示させる表示制御処理のみが実行される。
　これに対して、本技術を適用したLCDモジュール８０では、図１１を参照して説明した、ホスト側プロセッサを経由しないパス１６２による、表示情報Bを表示させる表示制御処理も、さらに実行される。
　パス１６２による表示制御処理は、ホスト側プロセッサを介さない処理であるため、パス１６１による表示制御処理よりも早く、タッチ検出に対して即座に表示させることができる。これにより、ユーザのタッチ検出から、ディスプレイに描画（表示）するまでの時間差を短縮し、ユーザが感じる描画の遅れを軽減することができる。
　なお、ホスト側プロセッサを介さないパスは、上述したパス１６２の他、図１３において太線の破線で示すパス１６３でもよい。すなわち、AD変換したデジタルのセンサ信号から求めた２次元座標値を、表示情報Bの表示データとして生成して表示させてもよい。
＜５．パーソナルコンピュータの構成例＞
　本技術は、例えば、コンピュータ、携帯電話端末、タブレット端末、携帯用ゲーム機、携帯用音楽映像再生装置などの、内蔵型のタッチパネルディスプレイを有する電子機器に適用することができる。図１４と図１５で、コンピュータと携帯電話機の全体構成について示す。
　図１４は、本技術が適用されたLCDモジュール８０と、それを制御するホスト処理部１４を含むコンピュータ（パーソナルコンピュータ）のブロック図である。
　CPU２０１は、各種プログラムに従って、コンピュータのシステム全体を制御する。ROM２０２は、CPU２０１が使用するブートプログラムや演算パラメータ等を記憶する。RAM２０３は、CPU２０１の実行において使用するプログラムや、その実行において適宜変化するパラメータ等を一時記憶する。
　コンピュータはまた、文字・数値・各種指示等の入力を行うためのキーボード２０４、カーソルの移動や範囲選択等を行うためのマウス２０５、コントローラ、スキャナ、プリンタ等の外部機器と接続するためのインタフェース（I/F）２０６を備える。なお、コンピュータが、ノート型やターミナル型ではなく、タブレット型である場合には、キーボード２０４やマウス２０５は省略される。
　さらに、コンピュータは、画像の表示を制御するグラフィックボード２０７、ネットワークに接続するためのネットワークカード、モデム等で構成される通信装置２０８、タッチパネル機能を備えたディスプレイ２０９、データ記憶装置としてのハードディスク２１０を備える。ハードディスク２１０には、オペレーティングシステム（OS）、各種デバイスのデバイスドライバ、および、ワードプロセッサ・表計算ソフト等の各種アプリケーションプログラムが記憶されている。
　図４のグラフィックスコントローラ５３と画像メモリ５４は、図１４のグラフィックボード２０７内に配置されており、LCDモジュール８０は、図１４のディスプレイ２０９に対応する。
＜６．携帯電話端末の構成例＞
　図１５は、本技術が適用されたLCDモジュール８０と、それを制御するホスト処理部１４を含む高機能型の携帯電話端末（スマートフォン）のブロック図である。
　図１５において、通信アンテナ２２１は、例えば内蔵アンテナであり、携帯電話網や公衆無線通信網を通じた通話や電子メールの送受信、上述したタッチ検出に基づく情報入力制御プログラムを含む各種アプリケーションプログラムのダウンロード、インターネット等と通信するための信号電波の送受信を行う。
　アンテナ回路２２２は、アンテナ切替器やマッチング回路、フィルタ回路等からなり、送受信回路部２２３は、携帯電話網や公衆無線通信網を通じた送受信信号の周波数変換、変調と復調等を行う。
　スピーカ２３６は、例えば、音楽再生や受話音出力、リンガ音（着信音）出力等に用いられる。マイクロホン２３７は、外部音声の集音や送話音声の集音等に用いられる。音声信号処理部２３５は、スピーカ２３６用の増幅回路、マイクロホン２３７用の増幅回路、制御・演算部２２４から供給される圧縮符号化された音声データを伸張復号化する伸張復号化回路、当該伸張復号化後のデジタル音声データをアナログ音声信号に変換するデジタル／アナログ変換回路、マイクロホン２３７から入力されたアナログ音声信号をデジタル音声データに変換するアナログ／デジタル変換回路、当該デジタル音声データを圧縮符号化する圧縮符号化回路などからなる。
　映像信号処理部２３１は、制御・演算部２２４から供給される圧縮符号化された映像データを伸張復号化する伸張復号化回路、当該伸張復号化後のデジタル映像や後述するデジタル放送受信モジュール２２９にて受信されたデジタル放送映像などを、タッチパネルディスプレイ２３３へ表示させるディスプレイパネル駆動回路などからなる。
　また、映像信号処理部２３１は、制御・演算部２２４から供給されるデスクトップ画像や各種メニュー画像、タッチパネルディスプレイ２３３上の位置に対応した仮想タッチエリア画像などを表示するための表示データも生成し、それらの画像をタッチパネルディスプレイ２３３上に表示させる。
　タッチパネルディスプレイ２３３は、ユーザによる入力操作を検出可能なタッチセンサ部を有する。タッチパネル信号処理部２３２は、タッチパネルディスプレイ２３３からのタッチ検出位置やタッチ軌跡、タッチ継続時間、タッチ時間間隔などを計測し、その計測したデータをタッチ検出データとして制御・演算部２２４へ送出する。なお、タッチパネルディスプレイ２３３の表示面へのタッチ入力は、ユーザの指等の他、端末に付属のスタイラス等で行うこともできる。また、タッチパネルディスプレイ２３３及びタッチパネル信号処理部２３２は、いわゆるマルチタッチに対応している。
　キー操作部２４０は、携帯電話端末の筐体上に設けられたハードキーとその周辺回路などからなる。キー操作部２４０は、ユーザによるハードキーの押下操作を電気信号へ変換し、その操作入力信号を増幅及びアナログ／デジタル変換し、そのアナログ／デジタル変換後の操作入力データを制御・演算部２２４へ送る。
　外部入出力端子部２３９は、例えばケーブルを通じてデータ通信を行う際のケーブル接続用コネクタと外部データ通信用インタフェース回路や、電源ケーブル等を通じて内部電池を充電する際の充電端子とその充電用インタフェース回路などからなる。
　また、外部メモリＩ／Ｆ部２３０は、外部メモリ等の記憶媒体が着脱される外部メモリ用スロットと当該外部メモリデータ通信用インタフェース回路などからなる。
　近距離無線通信モジュール２２８は、無線LANやブルートゥース（登録商標）などの近距離無線電波用の通信アンテナと、近距離無線通信回路とからなる。
　デジタル放送受信モジュール２２９は、いわゆるデジタルテレビジョン放送やデジタルラジオ放送などの受信用アンテナとチューナとからなる。当該デジタル放送受信モジュール２２９は、１チャンネルのデジタル放送の受信のみならず、同時に複数チャンネルのデジタル放送を受信可能となされている。また、当該デジタル放送受信モジュール２２９は、デジタル放送に多重されたデータも受信可能となされている。なお、当該デジタル放送受信モジュール２２９にて受信されたデジタル放送データは、例えば制御・演算部２２４により圧縮等された後、メモリ部２２５等に記憶（つまり録画）することも可能となされている。
　カメラ部２３４は、静止画像や動画像の撮影のための撮像素子，光学系等とその周辺回路、および、撮影補助光を出射するためのライトの駆動回路などからなる。当該カメラ部２３４による撮影時の静止画データや動画像データは、プレビュー映像データとして映像信号処理部２３１に送られる。これにより、当該カメラ撮影時に、タッチパネルディスプレイ２３３にはプレビュー映像が表示される。また、カメラ部２３４にて撮影された静止画データや動画像データを記録する場合、当該撮影された静止画データや動画像データは、制御・演算部２２４に送られて圧縮された後、メモリ部２２５や外部メモリＩ／Ｆ部２３０に接続された記憶媒体に記憶される。
　非接触通信モジュール２２７は、非接触通信アンテナを通じて、例えばいわゆるRFID（Radio Frequency-Identification：電波方式認識）や非接触型ICカード等で用いられる非接触通信を行う。
　GPS（Global Positioning System）モジュール２２６は、GPSアンテナを有し、GPS測地衛星からのGPS信号を用いて自端末の現在位置の緯度及び経度を求める。このGPSモジュール２２６により得られたGPSデータ（緯度，経度を表す情報）は制御・演算部２２４へ送られる。これにより、制御・演算部２２４は、自端末の現在位置や移動などを知ることができる。
　各種センサ部２３８は、携帯電話端末の状態を検知するための端末状態検知センサ等の各種検知用センサとその周辺回路からなる。各種センサ部２３８は、一例として傾きセンサ、加速度センサ、方位センサ、温度センサ、湿度センサ、照度センサなどを挙げることができる。各種センサ部２３８による検知信号は、制御・演算部２２４に送られる。これにより、制御・演算部２２４は、携帯電話端末の状態（傾き、加速度、方位、温度、湿度、照度等）を知ることができる。
　メモリ部２２５は、この端末の内部に設けられている内蔵メモリと着脱可能なカード状メモリなどからなる。着脱可能なカード状メモリとしては、いわゆるSIM（Subscriber Identity Module）情報等を格納するカードなどを挙げることができる。内蔵メモリは、ROM（Read Only Memory）とRAM（Random Access Memory）とからなる。ROMは、OS（Operating System）、制御・演算部２２４が各部を制御するための制御プログラム、各種の初期設定値、辞書データ、文字予測変換辞書データ、各種音データ、各種アプリケーションプログラム等を格納している。このROMは、NAND型フラッシュメモリ（NAND-type flash memory）或いはEEPROM（Electrically Erasable Programmable Read-Only Memory）のような書き換え可能なROMを含み、電子メールデータ、電話帳やメールアドレス帳のデータ、静止画像や動画像コンテンツのデータ、その他、各種のユーザ設定値等を保存可能となされている。RAMは、制御・演算部２２４が各種のデータ処理を行う際の作業領域、バッファ領域として随時データを格納する。
　制御・演算部２２４は、CPU（中央処理ユニット）からなり、送受信回路部２２３、映像信号処理部２３１、音声信号処理部２３５、GPSモジュール２２６、非接触通信モジュール２２７、近距離無線通信モジュール２２８、デジタル放送受信モジュール２２９、外部メモリＩ／Ｆ部２３０、カメラ部２３４、各種センサ部２３８、外部入出力端子部２３９、キー操作部２４０、タッチパネル信号処理部２３２など各部を制御し、必要に応じて各種の演算を行う。また、制御・演算部２２４は、メモリ部２２５に記憶されている制御プログラムや各種アプリケーションプログラムを実行する。
　その他、携帯電話端末は、時間や時刻を計測する時計部、各部へ電力を供給するバッテリとその電力をコントロールするパワーマネージメントICなど、一般的な携帯電話端末に設けられる各構成要素についても当然ながら備えている。
＜７．変形例＞
＜第１の変形例＞
　上述した実施の形態では、タッチパネルディスプレイ８１においてユーザのタッチが検出されたとき、ホスト側プロセッサを経由した表示情報Aを表示する前に、ホスト側プロセッサを介さずにLCDモジュール８０内で処理した表示情報Bを表示させる例について説明した。以下では、ホスト側プロセッサを介さずにLCDモジュール８０内で表示情報Bを表示させる場合の変形例（応用例）について説明する。
　図１６は、第１の変形例に対応するタッチパネルディスプレイ８１の表示例を示している。
　タッチパネルディスプレイ８１においてユーザのタッチが検出され、ドライバIC８２の検出回路１０２から、タッチ位置に対応するセンサデータがドライバIC８３に供給された場合、ドライバIC８３は、表示画像の色（背景色）に応じて、表示情報Bの描画色を自動で決定（変更）し、表示情報Bを描画する。例えば、ドライバIC８３は、背景色と対照な色（補色）を、表示情報Bの描画色として決定して、描画する。
　図１６のAは、携帯電話端末３０１のタッチパネルディスプレイ８１に白色の背景画像が表示されている場合、ドライバIC８３が、表示情報Bとして、ユーザがスタイラス３１１でタッチしたタッチ位置を黒色で描画する例を示している。
　図１６のBは、携帯電話端末３０１のタッチパネルディスプレイ８１に黒色の背景画像が表示されている場合、ドライバIC８３が、表示情報Bとして、ユーザがスタイラス３１１でタッチしたタッチ位置を白色で描画する例を示している。
＜第２の変形例＞
　図１７は、第２の変形例に対応するタッチパネルディスプレイ８１の表示例を示している。
　第２の変形例は、表示情報Bを描画する場合の色や大きさを予め設定しておき、設定された色や大きさで表示情報Bを描画する例である。
　図１７のAは、表示情報Bを描画する場合の色や大きさを設定する設定画面の例を示している。
　図１７のAに示すような設定画面がタッチパネルディスプレイ８１に表示され、ユーザが表示情報Bを描画する場合の色や大きさを選択する。ユーザによって選択された色および大きさは、設定情報として、設定記憶部１１４に保存される。なお、図１７のAの設定画面では、表示情報Bの色の違いを模様（パターン）の違いで表している。
　図１７のBに示すように、ユーザがタッチパネルディスプレイ８１上の所定の位置をスタイラス３１１でタッチした場合に、ドライバIC８３は、設定記憶部１１４に記憶されている設定情報が示す色と大きさで、表示情報Bを描画する。これにより、ユーザが選択した任意の色と大きさで表示情報Bを描画することができる。
＜第３の変形例＞
　図１８は、第３の変形例に対応するタッチパネルディスプレイ８１の表示例を示している。
　第３の変形例は、スタイラス３１１等を用いて文字や絵を描画するアプリケーション等において、文字や絵を描画する際の色や大きさが設定されている場合、その設定された色や大きさを用いて表示情報Bを描画する例である。
　図１８のAは、文字や絵を描画するアプリケーションにおける、文字や絵を描画する際の色や大きさを設定する設定画面の例を示している。ここで設定される色および大きさは、ホスト処理部１４のCPU５１で実行されるアプリケーションによって生成される表示画像に反映されるため、ホスト側プロセッサを経由した表示情報Aの色および大きさに相当する。
　図１８のBに示すように、ユーザがタッチパネルディスプレイ８１上の所定の位置をスタイラス３１１でタッチした場合に、ドライバIC８３は、表示情報Aの描画色および大きさとして設定されているのと同一の色と大きさで、表示情報Bを描画する。これにより、ホスト側プロセッサを介さずに描画する表示情報Bと、ホスト側プロセッサを経由して描画される表示情報Aの描画色および色が同一となる。
　なお、本技術によれば、スタイラス３１１や指などを用いて文字や絵を描画する際、表示情報Bがタッチパネルディスプレイ８１上に先に描画され、次に、表示情報Aが、表示情報Bに置き換わる形で描画される。その際、置換の方法としては、瞬時に表示情報Aに置き換わっても良いが、表示情報Bに表示情報Aを重畳する際の透過率が徐々に変化することで、表示情報Bから表示情報Aに徐々に置換されるように表示制御しても良い。
＜第４の変形例＞
　図１９は、第４の変形例に対応するタッチパネルディスプレイ８１の表示例を示している。
　第４の変形例は、タッチパネルディスプレイ８１のタッチ入力領域を、表示情報Aと表示情報Bを描画することで、ユーザのタッチ入力に対して素早いフィードバックを提供する領域と、表示情報Aのみを描画する領域を分ける例である。
　例えば、図１９に示されるタッチパネルディスプレイ８１のタッチ入力領域のうち、所定の領域３２１については、ドライバIC８３は、ホスト側プロセッサを介さずに生成される表示情報Bと、ホスト側プロセッサを経由して生成される表示情報Aの両方を描画する。一方、領域３２１以外の領域３２２については、ホスト側プロセッサを経由した表示情報Aのみが描画される。
＜第５の変形例＞
　図２０は、第５の変形例に対応するタッチパネルディスプレイ８１の表示例を示している。
　第５の変形例は、表示情報Aと表示情報Bを描画し、ユーザのタッチ入力に対して素早いフィードバックを提供するかどうかを、アプリケーションによって区別する例である。
　例えば、ドライバIC８３は、図２０のAに示すように、アプリケーションソフトαでは、表示情報Aと表示情報Bを描画するが、図２０のBに示すように、アプリケーションソフトβでは、ホスト側プロセッサを経由した表示情報Aのみを描画する。ドライバIC８３は、例えば、ホスト側プロセッサを経由しない表示情報Bの描画を有効とするか否かのフラグをアプリケーションソフトから取得することで、表示情報Bを描画するかどうかを切り替えることができる。
　以上説明した変形例は、それぞれを個別に採用することができるほか、２つ以上の機能を併用して実行することも可能である。
　なお、本明細書において、フローチャートに記述されたステップは、記載された順序に沿って時系列的に行われる場合はもちろん、必ずしも時系列的に処理されなくとも、並列に、あるいは呼び出しが行われたとき等の必要なタイミングで実行されてもよい。
　本技術の実施の形態は、上述した実施の形態に限定されるものではなく、本技術の要旨を逸脱しない範囲において種々の変更が可能である。
　例えば、上述した複数の実施の形態の全てまたは一部を組み合わせた形態を採用することができる。
　例えば、上述のフローチャートで説明した各ステップは、１つの装置で実行する他、複数の装置で分担して実行することができる。さらに、１つのステップに複数の処理が含まれる場合には、その１つのステップに含まれる複数の処理は、１つの装置で実行する他、複数の装置で分担して実行することができる。
　なお、本技術は以下のような構成も取ることができる。
（１）
　タッチパネルディスプレイに対するユーザのタッチ入力位置を示す第１の表示データを、第１の処理部から第１のパスを介して取得するとともに、前記第１の表示データを用いて前記第１の処理部より処理量の多い表示画像生成処理を実行する第２の処理部から、第２のパスを介して第２の表示データを取得し、前記第１の表示データに基づく第１の表示情報と、前記第２の表示データに基づく第２の表示情報を前記タッチパネルディスプレイに表示させる制御を行う表示制御部
　を備える表示制御装置。
（２）
　前記第１の表示データを用いて前記第１の表示情報を表示する際の描画色を記憶する設定記憶部をさらに備え、
　前記表示制御部は、前記設定記憶部に設定されている描画色で、前記第１の表示情報を表示させる
　前記（１）に記載の表示制御装置。
（３）
　前記第１の表示データを用いて前記第１の表示情報を表示する際の描画色を設定する設定部をさらに備え、
　前記設定記憶部は、前記設定部で設定された前記描画色を記憶する
　前記（１）または（２）に記載の表示制御装置。
（４）
　前記表示制御部は、前記タッチパネルディスプレイに表示している表示画像の背景色に応じて、前記第１の表示情報の描画色を決定し、表示させる
　前記（１）乃至（３）のいずれかに記載の表示制御装置。
（５）
　前記表示制御部は、前記第２の表示情報の描画設定に応じて、前記第１の表示情報の描画設定を決定し、表示させる
　前記（１）乃至（４）のいずれかに記載の表示制御装置。
（６）
　前記表示制御部は、前記第１の表示情報と前記第２の表示情報の透過率を徐々に変化させることにより、前記第１の表示情報を前記第２の表示情報に置き換える
　前記（１）乃至（５）のいずれかに記載の表示制御装置。
（７）
　前記表示制御部は、前記第１の表示情報と前記第２の表示情報の両方を表示させる場合と、前記第２の表示情報のみを表示させる場合を、前記タッチパネルディスプレイの表示領域によって区別する
　前記（１）乃至（６）のいずれかに記載の表示制御装置。
（８）
　前記表示制御部は、前記第１の表示情報と前記第２の表示情報の両方を表示させる場合と、前記第２の表示情報のみを表示させる場合を、アプリケーションによって区別する
　前記（１）乃至（７）のいずれかに記載の表示制御装置。
（９）
　前記第１の表示データは、前記タッチ入力位置のセンサデータである
　前記（１）乃至（８）のいずれかに記載の表示制御装置。
（１０）
　前記第１の表示データは、前記タッチ入力位置のセンサデータに対してキャリブレーション演算した後のデータである
　前記（１）乃至（９）のいずれかに記載の表示制御装置。
（１１）
　前記タッチパネルディスプレイと、
　音声の集音を行うマイクロホンと、
　音声出力を行うスピーカと
　をさらに備える
　前記（１）乃至（１０）のいずれかに記載の表示制御装置。
（１２）
　タッチパネルディスプレイに対するユーザのタッチ入力位置を示す第１の表示データを、第１の処理部から第１のパスを介して取得するとともに、前記第１の表示データを用いて前記第１の処理部より処理量の多い表示画像生成処理を実行する第２の処理部から、第２のパスを介して第２の表示データを取得し、前記第１の表示データに基づく第１の表示情報と、前記第２の表示データに基づく第２の表示情報を前記タッチパネルディスプレイに表示させる制御を行う
　表示制御方法。
（１３）
　コンピュータに、
　タッチパネルディスプレイに対するユーザのタッチ入力位置を示す第１の表示データを、第１の処理部から第１のパスを介して取得するとともに、前記第１の表示データを用いて前記第１の処理部より処理量の多い表示画像生成処理を実行する第２の処理部から、第２のパスを介して第２の表示データを取得し、前記第１の表示データに基づく第１の表示情報と、前記第２の表示データに基づく第２の表示情報を前記タッチパネルディスプレイに表示させる制御を行う
　処理を実行させるためのプログラム。
　８０　LCDモジュール，　８１　タッチパネルディスプレイ，　８２，８３　ドライバIC，　１２１　ドライバLSI，　１４１　AD変換回路，　１４２　容量値保存レジスタ，　１４３　ラスタライザ，　１４４　座標変換回路，　１４５　システムインタフェース，　１４６　フレームメモリ，　１４７　設定記憶部，　１４８　表示データ生成部

Claims (13)

  1. 　タッチパネルディスプレイに対するユーザのタッチ入力位置を示す第１の表示データを、第１の処理部から第１のパスを介して取得するとともに、前記第１の表示データを用いて前記第１の処理部より処理量の多い表示画像生成処理を実行する第２の処理部から、第２のパスを介して第２の表示データを取得し、前記第１の表示データに基づく第１の表示情報と、前記第２の表示データに基づく第２の表示情報を前記タッチパネルディスプレイに表示させる制御を行う表示制御部
    　を備える表示制御装置。
  2. 　前記第１の表示データを用いて前記第１の表示情報を表示する際の描画色を記憶する設定記憶部をさらに備え、
    　前記表示制御部は、前記設定記憶部に設定されている描画色で、前記第１の表示情報を表示させる
    　請求項１に記載の表示制御装置。
  3. 　前記第１の表示データを用いて前記第１の表示情報を表示する際の描画色を設定する設定部をさらに備え、
    　前記設定記憶部は、前記設定部で設定された前記描画色を記憶する
    　請求項２に記載の表示制御装置。
  4. 　前記表示制御部は、前記タッチパネルディスプレイに表示している表示画像の背景色に応じて、前記第１の表示情報の描画色を決定し、表示させる
    　請求項１に記載の表示制御装置。
  5. 　前記表示制御部は、前記第２の表示情報の描画設定に応じて、前記第１の表示情報の描画設定を決定し、表示させる
    　請求項１に記載の表示制御装置。
  6. 　前記表示制御部は、前記第１の表示情報と前記第２の表示情報の透過率を徐々に変化させることにより、前記第１の表示情報を前記第２の表示情報に置き換える
    　請求項１に記載の表示制御装置。
  7. 　前記表示制御部は、前記第１の表示情報と前記第２の表示情報の両方を表示させる場合と、前記第２の表示情報のみを表示させる場合を、前記タッチパネルディスプレイの表示領域によって区別する
    　請求項１に記載の表示制御装置。
  8. 　前記表示制御部は、前記第１の表示情報と前記第２の表示情報の両方を表示させる場合と、前記第２の表示情報のみを表示させる場合を、アプリケーションによって区別する
    　請求項１に記載の表示制御装置。
  9. 　前記第１の表示データは、前記タッチ入力位置のセンサデータである
    　請求項１に記載の表示制御装置。
  10. 　前記第１の表示データは、前記タッチ入力位置のセンサデータに対してキャリブレーション演算した後のデータである
    　請求項１に記載の表示制御装置。
  11. 　前記タッチパネルディスプレイと、
    　音声の集音を行うマイクロホンと、
    　音声出力を行うスピーカと
    　をさらに備える
    　請求項１に記載の表示制御装置。
  12. 　タッチパネルディスプレイに対するユーザのタッチ入力位置を示す第１の表示データを、第１の処理部から第１のパスを介して取得するとともに、前記第１の表示データを用いて前記第１の処理部より処理量の多い表示画像生成処理を実行する第２の処理部から、第２のパスを介して第２の表示データを取得し、前記第１の表示データに基づく第１の表示情報と、前記第２の表示データに基づく第２の表示情報を前記タッチパネルディスプレイに表示させる制御を行う
    　表示制御方法。
  13. 　コンピュータに、
    　タッチパネルディスプレイに対するユーザのタッチ入力位置を示す第１の表示データを、第１の処理部から第１のパスを介して取得するとともに、前記第１の表示データを用いて前記第１の処理部より処理量の多い表示画像生成処理を実行する第２の処理部から、第２のパスを介して第２の表示データを取得し、前記第１の表示データに基づく第１の表示情報と、前記第２の表示データに基づく第２の表示情報を前記タッチパネルディスプレイに表示させる制御を行う
    　処理を実行させるためのプログラム。
PCT/JP2013/078275 2012-11-02 2013-10-18 表示制御装置、表示制御方法、およびプログラム WO2014069249A1 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2014544427A JP6202345B2 (ja) 2012-11-02 2013-10-18 表示制御装置、表示制御方法、およびプログラム
EP13851293.4A EP2916211B1 (en) 2012-11-02 2013-10-18 Display control device, display control method, and program
US14/430,640 US9886128B2 (en) 2012-11-02 2013-10-18 Display control device, display control method, and program
US15/852,983 US10198127B2 (en) 2012-11-02 2017-12-22 Display control device, display control method, and program

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2012-242412 2012-11-02
JP2012242412 2012-11-02

Related Child Applications (2)

Application Number Title Priority Date Filing Date
US14/430,640 A-371-Of-International US9886128B2 (en) 2012-11-02 2013-10-18 Display control device, display control method, and program
US15/852,983 Continuation US10198127B2 (en) 2012-11-02 2017-12-22 Display control device, display control method, and program

Publications (1)

Publication Number Publication Date
WO2014069249A1 true WO2014069249A1 (ja) 2014-05-08

Family

ID=50627162

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2013/078275 WO2014069249A1 (ja) 2012-11-02 2013-10-18 表示制御装置、表示制御方法、およびプログラム

Country Status (4)

Country Link
US (2) US9886128B2 (ja)
EP (1) EP2916211B1 (ja)
JP (1) JP6202345B2 (ja)
WO (1) WO2014069249A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015207287A (ja) * 2014-04-21 2015-11-19 三星ディスプレイ株式會社Ｓａｍｓｕｎｇ Ｄｉｓｐｌａｙ Ｃｏ．，Ｌｔｄ． 映像表示システム
JP2021033967A (ja) * 2019-08-29 2021-03-01 アルパイン株式会社 タッチパネル付表示装置

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9886128B2 (en) * 2012-11-02 2018-02-06 Sony Corporation Display control device, display control method, and program
WO2015166376A1 (en) 2014-05-02 2015-11-05 Semiconductor Energy Laboratory Co., Ltd. Display device and input/output device
KR101938215B1 (ko) * 2015-08-26 2019-01-14 주식회사 퓨처플레이 스마트 인터렉션 장치
KR20170037698A (ko) * 2015-09-25 2017-04-05 삼성디스플레이 주식회사 표시 장치
KR102370717B1 (ko) * 2015-12-31 2022-03-04 엘지디스플레이 주식회사 유기 발광 다이오드 표시 장치
JP2017126196A (ja) * 2016-01-14 2017-07-20 株式会社東海理化電機製作所 操作装置
CN108089758B (zh) * 2018-01-02 2020-05-15 京东方科技集团股份有限公司 触控与显示驱动器、驱动方法、主机及触控显示装置
TWI731691B (zh) * 2020-05-21 2021-06-21 緯創資通股份有限公司 發光二極體顯示系統及模組
CN112702636B (zh) * 2020-10-10 2022-12-20 广州奥缔飞梭数字科技有限公司 一种智能数字化展示系统

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0777964A (ja) * 1992-12-09 1995-03-20 Seiko Epson Corp 同期信号極性修正装置およびコンピュータシステム
JP2000148134A (ja) * 1998-11-13 2000-05-26 Seiko Epson Corp 画像表示方法および画像処理装置
JP2009009750A (ja) 2007-06-26 2009-01-15 Honda Motor Co Ltd 固体高分子型燃料電池
JP2012084125A (ja) * 2010-09-14 2012-04-26 Sanyo Electric Co Ltd 画像表示装置

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7003308B1 (en) * 2000-09-12 2006-02-21 At&T Corp. Method and system for handwritten electronic messaging
US8997015B2 (en) * 2006-09-28 2015-03-31 Kyocera Corporation Portable terminal and control method therefor
US9477395B2 (en) * 2007-09-04 2016-10-25 Apple Inc. Audio file interface
WO2010064389A1 (ja) * 2008-12-04 2010-06-10 三菱電機株式会社 表示入力装置
JP5170771B2 (ja) * 2009-01-05 2013-03-27 任天堂株式会社 描画処理プログラム、情報処理装置、情報処理システムおよび情報処理制御方法
KR20100104804A (ko) * 2009-03-19 2010-09-29 삼성전자주식회사 Ｄｄｉ, ｄｄｉ 제공방법 및 상기 ｄｄｉ를 포함하는 데이터 처리 장치
WO2010127175A2 (en) * 2009-04-30 2010-11-04 Synaptics Incorporated Control circuitry and method
EP3734405B1 (en) * 2011-02-10 2024-08-14 Samsung Electronics Co., Ltd. Portable device comprising a touch-screen display, and method for controlling same
JP2012185694A (ja) * 2011-03-07 2012-09-27 Elmo Co Ltd 描画システム
US9886128B2 (en) * 2012-11-02 2018-02-06 Sony Corporation Display control device, display control method, and program

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0777964A (ja) * 1992-12-09 1995-03-20 Seiko Epson Corp 同期信号極性修正装置およびコンピュータシステム
JP2000148134A (ja) * 1998-11-13 2000-05-26 Seiko Epson Corp 画像表示方法および画像処理装置
JP2009009750A (ja) 2007-06-26 2009-01-15 Honda Motor Co Ltd 固体高分子型燃料電池
JP2012084125A (ja) * 2010-09-14 2012-04-26 Sanyo Electric Co Ltd 画像表示装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP2916211A4 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015207287A (ja) * 2014-04-21 2015-11-19 三星ディスプレイ株式會社Ｓａｍｓｕｎｇ Ｄｉｓｐｌａｙ Ｃｏ．，Ｌｔｄ． 映像表示システム
JP2021033967A (ja) * 2019-08-29 2021-03-01 アルパイン株式会社 タッチパネル付表示装置

Also Published As

Publication number Publication date
US9886128B2 (en) 2018-02-06
US20150242049A1 (en) 2015-08-27
EP2916211A4 (en) 2016-06-29
US10198127B2 (en) 2019-02-05
JP6202345B2 (ja) 2017-09-27
EP2916211B1 (en) 2018-10-03
US20180121024A1 (en) 2018-05-03
JPWO2014069249A1 (ja) 2016-09-08
EP2916211A1 (en) 2015-09-09

Similar Documents

Publication Publication Date Title
JP6202345B2 (ja) 表示制御装置、表示制御方法、およびプログラム
US11861161B2 (en) Display method and apparatus
US11943530B2 (en) Electronic device and method for adjusting camera magnification
WO2018161534A1 (zh) 一种显示图像的方法、双屏终端和计算机可读的非易失性存储介质
KR102060153B1 (ko) 커버, 이를 이용하는 전자 장치 및 그 동작 방법
CN112955856B (zh) 在分屏上显示可执行应用的列表的电子装置及其操作方法
US11050968B2 (en) Method for driving display including curved display area, display driving circuit supporting the same, and electronic device including the same
CN111712786B (zh) 触摸输入处理方法及支持该方法的电子装置
US20230343305A1 (en) Electronic device and method for operating high speed screen of electronic device
CN109948581B (zh) 图文渲染方法、装置、设备及可读存储介质
CN108734662B (zh) 显示图标的方法和装置
CN113597595B (zh) 显示内容的电子装置及其方法
CN112513803B (zh) 在多个输出屏幕的环境中控制虚拟输入界面的显示的电子设备及其操作方法
CN117130516B (zh) 一种显示方法及电子设备
CN109639880B (zh) 一种天气信息显示方法及终端设备
CN109923606B (zh) 一种广色域图像显示方法及设备
US12033252B2 (en) Electronic device and method for controlling application thereof
JP2015032261A (ja) 表示装置および制御方法
CN112771605B (zh) 在基于水平同步信号进行放大期间延长时间间隔的电子装置及方法
CN114257755A (zh) 图像处理方法、装置、设备及存储介质
US11755171B2 (en) Electronic device and screenshot operation method for electronic device
US12014102B2 (en) Foldable electronic device for displaying user interface and method therefor
CN114144749B (zh) 基于触摸输入的操作方法及其电子装置
EP3618052B1 (en) Electronic device and method of partially updating screen using same
CN114139075A (zh) 搜索界面的显示方法、装置、终端、存储介质及产品

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 13851293

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2014544427

Country of ref document: JP

Kind code of ref document: A

WWE Wipo information: entry into national phase

Ref document number: 14430640

Country of ref document: US

WWE Wipo information: entry into national phase

Ref document number: 2013851293

Country of ref document: EP

NENP Non-entry into the national phase

Ref country code: DE