WO2013046670A1 - 触感呈示装置 - Google Patents

触感呈示装置 Download PDF

Info

Publication number
WO2013046670A1
WO2013046670A1 PCT/JP2012/006155 JP2012006155W WO2013046670A1 WO 2013046670 A1 WO2013046670 A1 WO 2013046670A1 JP 2012006155 W JP2012006155 W JP 2012006155W WO 2013046670 A1 WO2013046670 A1 WO 2013046670A1
Authority
WO
WIPO (PCT)
Prior art keywords
input mode
tactile sensation
touch sensor
unit
battery
Prior art date
Application number
PCT/JP2012/006155
Other languages
English (en)
French (fr)
Inventor
毅史 山根
Original Assignee
京セラ株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 京セラ株式会社 filed Critical 京セラ株式会社
Priority to US14/347,609 priority Critical patent/US9448629B2/en
Publication of WO2013046670A1 publication Critical patent/WO2013046670A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04105—Pressure sensors for measuring the pressure or force exerted on the touch surface without providing the touch position
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04106—Multi-sensing digitiser, i.e. digitiser using at least two different sensing technologies simultaneously or alternatively, e.g. for detecting pen and finger, for saving power or for improving position detection

Definitions

  • the present invention relates to an apparatus that detects an operation input to a touch sensor and presents a tactile sensation.
  • an input device including a touch sensor such as a touch panel or a touch switch as an input device such as an operation unit or a switch that detects an operation input by a user.
  • input devices equipped with touch sensors are widely used in information devices such as calculators and ticket machines, household appliances such as microwave ovens, televisions, and lighting equipment, and industrial equipment (FA devices). .
  • any type of touch sensor detects contact with a finger or a stylus pen, and the touch sensor itself does not physically move like a mechanical push button switch even when touched. .
  • the display mode may be changed by changing the display color of an input object (hereinafter simply referred to as “object”) such as an input button displayed on the display unit corresponding to the input position.
  • object an input object
  • the feedback method that works on hearing is difficult to confirm in a noisy environment and cannot be used when the device in use is in a silent mode. Also, in the case of a feedback method that works visually, if the size of the object displayed on the display unit is small, especially when inputting with the finger, the object is hidden under the finger and the display mode change cannot be confirmed There is.
  • vibration can be transmitted to an operator's fingertip or the like when an operation input to the touch sensor is detected. Therefore, an operator who performs input using such an input device can recognize that the operation input performed on the touch sensor is detected by the input device.
  • vibration does not occur even if there is contact with a touch sensor at a position where no object such as a key or button exists, but if there is contact with a touch sensor at a position where an object such as a key or button exists, vibration is generated. A tactile sensation can be presented.
  • Patent Document 1 and Patent Document 2 merely vibrate the touch sensor according to the contact when the touch sensor detects the contact. For this reason, in particular, when a button switch such as a mechanical push button switch (push button switch) is drawn on the touch sensor, the touch sensor can be touched only by lightly touching (touching) a finger. It will be presented. Accordingly, since the operator reacts only by performing a light touching operation (touch) before the operator presses (pushes) the touch sensor, there is a possibility that an erroneous operation is induced. In addition, even if the operator does not intend to push the drawn button switch (even if force is not applied), a tactile sensation is presented in response to a light touch operation (touch) before pushing the touch sensor. As a result, the operator feels uncomfortable.
  • a button switch such as a mechanical push button switch (push button switch)
  • a tactile sensation hereinafter referred to as a click tactile sensation
  • release the operator feels that the pressed switch returns to the original non-pressed state in the process of weakening the applied pressing force (hereinafter referred to as release). Expect to be presented).
  • release the operator expects that no click feeling or release tactile sensation will be presented even if the pressing position is touched or traced with a very weak pressing force.
  • the applicant of the present application provides an input device that can present a tactile sensation as if a key configured by a mechanical switch is operated when detecting a slide input using a touch sensor.
  • Invented and already filed a patent application with the Japan Patent Office Japanese Patent Laid-Open No. 2011-048685.
  • the input device includes a pressure detection unit that detects pressure on the touch surface of the touch sensor, so that data based on pressure detected by the pressure detection unit (for example, a voltage value detected by the piezoelectric element) has a predetermined reference.
  • the tactile sensation providing unit presents a tactile sensation in a satisfied state, that is, in a state where the touch sensor is pressed. Therefore, this input device can prevent tactile sensation even when an operation input by a light touch unintended by the operator is detected. Furthermore, since this input device presents a tactile sensation in a state where pressure is given to the operator, a realistic tactile sensation as presented when operating an actual push button switch, which could not be presented by a conventional device. Can be presented.
  • the above-described input device has a remarkable effect that a realistic tactile sensation can be presented, since a press detection unit is added, electric power for detecting a press is required. Furthermore, since this input device also has a tactile sensation providing unit, it requires electric power to drive it and present a tactile sensation.
  • the electric power for activating the pressure detection unit when detecting the pressure can be set so as not to increase as much as the standby power.
  • the tactile sensation providing unit presents a tactile sensation, power is consumed every time the operator's operation input is detected and the tactile sensation is presented as long as the tactile sensation providing unit operates in the input mode for presenting the tactile sensation.
  • the input device can receive power supply from the outside, even if the power consumption increases somewhat, there is no particular problem from the viewpoint of ecology.
  • the power consumption of the battery is consumed by presenting a number of tactile sensations in order to improve the operational feeling, and the operating time of the entire terminal is shortened. It can also be considered.
  • since it is normal for an operator not to know how much power is consumed by presenting tactile sensation it is easy to predict how much the remaining battery level will be affected by presenting tactile sensation is not. Even in such a situation, when the remaining battery level is low, the operator generally wants to give priority to the operation of the terminal body to be operated over the operation feeling due to the tactile sensation. It is thought that.
  • an object of the present invention made in view of such circumstances is to provide a tactile sensation presentation device that can balance operation time by detecting operation input to a touch sensor and presenting a realistic tactile sensation. There is to do.
  • the invention of the tactile sensation providing apparatus is as follows: A touch sensor; A pressure detection unit for detecting pressure on the touch surface of the touch sensor; A tactile sensation providing unit that vibrates the touch surface; A battery information acquisition unit for acquiring battery information; Data based on a first input mode (touch panel input mode) in which a predetermined process is executed when the touch sensor detects a contact, or a pressure detected by the pressure detection unit in a state where the touch sensor detects a contact When a predetermined condition is satisfied, a second input mode (haptic input mode) that controls the tactile sensation providing unit to execute a predetermined process so as to present a tactile sensation with respect to a pressing target that is pressing the touch surface. ), And a control unit that controls the switchable, The control unit switches between the first input mode (touch panel input mode) and the second input mode (haptic input mode) based on the battery information acquired by the battery information acquisition unit. It is something to control.
  • the invention according to the second aspect is the tactile sensation providing apparatus according to the first aspect,
  • the control unit determines that the remaining amount of the battery does not reach a predetermined threshold value during operation in the second input mode (haptic input mode)
  • the control unit sets the second input mode to the first input mode. It is controlled to switch to the mode (touch panel input mode).
  • the invention according to a third aspect is the tactile sensation providing apparatus according to the first aspect,
  • the control unit determines that the remaining amount of the battery satisfies a predetermined threshold during operation in the first input mode (touch panel input mode)
  • the control unit sets the first input mode to the second input mode. It controls to switch to (haptic input mode).
  • the invention according to a fourth aspect is the tactile sensation providing apparatus according to any one of the first to third aspects.
  • a display unit; The control unit controls to display on the display unit that the switching between the first input mode and the second input mode has been performed.
  • FIG. 1 It is a block diagram which shows schematic structure of the tactile sense presentation apparatus which concerns on embodiment of this invention. It is a figure which shows an example of the mounting structure of the tactile sense presentation apparatus which concerns on embodiment of this invention. It is a flowchart explaining the process at the time of detecting operation input in the touchscreen input mode by embodiment of this invention. It is a flowchart explaining the process at the time of detecting operation input in the haptic input mode by embodiment of this invention. It is a flowchart explaining the process in the case of starting detection of the operation input in a touch panel input mode or a haptic input mode in the tactile sensation presentation apparatus which concerns on embodiment of this invention. It is a flowchart explaining the setting process of the input mode according to the battery residual amount by this Embodiment. It is a figure which shows the example of a mode that the remaining charge of a rechargeable battery reduces, when operating a tactile sense presentation apparatus with a general rechargeable battery. It is a flowchart explaining the detail of the input mode switching process shown in FIG.
  • FIG. 1 is a functional block diagram showing a schematic configuration of a tactile sensation providing apparatus according to an embodiment of the present invention.
  • the tactile sensation providing apparatus according to the present embodiment includes, for example, an input device used when an operator inputs characters or numbers on a portable terminal, an ATM installed in a bank, an input device used in a ticket vending machine installed in a station, etc.
  • the touch sensor can be applied to any input device as long as it detects contact by the operator.
  • the tactile sensation providing apparatus 1 includes a touch sensor 11, a press detection unit 12, a tactile sensation providing unit 13, a display unit 14, a control unit 15, and a battery 16.
  • the touch sensor 11 is usually disposed in front of the display unit 14 and makes contact with an object such as a key or button (hereinafter simply referred to as “keys”) displayed on the display unit 14 by an operator's finger or stylus. , It is detected by the touch surface of the corresponding touch sensor 11.
  • the touch sensor 11 is configured by a known method such as a resistance film method, a capacitance method, and an optical method. Note that it is not essential for the operator's finger or the like to physically touch the touch sensor 11 when the touch sensor 11 detects the contact.
  • the touch sensor 11 when the touch sensor 11 is an optical type, the touch sensor 11 detects a position where the infrared rays on the touch sensor 11 are blocked by a finger or the like, so that the operator's finger or the like does not touch the touch sensor 11. It is unnecessary.
  • the press detection unit 12 detects a press when the user performs an operation on the touch surface of the touch sensor 11, for example, physical or electrical characteristics (distortion, resistance, voltage, etc.) according to the press. It is configured using an element such as a strain gauge sensor or a piezoelectric element that changes.
  • the press detection unit 12 is configured using, for example, a piezoelectric element or the like, the piezoelectric element of the press detection unit 12 has a magnitude (or load (force) of a load (force) related to the press on the touch sensor 11.
  • the magnitude of the voltage voltage (voltage value (hereinafter referred to as data based on pressing)), which is an electrical characteristic, changes.
  • the control part 15 is controlled to perform a predetermined process, for example based on an application, etc., when the data based on a press are more than a predetermined threshold value.
  • the control unit 15 notifies the control unit 15 of the data based on the press by the press detection unit 12 or detects the data based on the press of the press detection unit 12 based on the press. Get the data. That is, the control unit 15 acquires data based on the pressure applied to the touch sensor 11 from the pressure detection unit 12. Note that the data based on the pressure may be the magnitude of the load applied to the pressure, the power value, the resistance value, or the like instead of the voltage value.
  • the press detection unit 12 may measure a change in the gap between the touch sensor 11 and the display unit 14 that occurs when the touch sensor 11 is pressed by the user.
  • the data based on the pressure corresponds to the change value of the gap.
  • the press detection part 12 may measure the change of the clearance gap between the touch sensor 11 and other components, for example, a circuit board.
  • the press detection part 12 can be comprised according to the contact detection system in the touch sensor 11.
  • FIG. when the touch sensor 11 is a resistive film type, the magnitude of the resistance according to the size of the contact area is associated with the load (force) of pressing against the touch surface of the touch panel, thereby allowing a strain gauge sensor or a piezoelectric element. It is possible to configure without using the above.
  • the touch sensor 11 is a capacitance type, it is configured without using a strain gauge sensor or a piezoelectric element by associating the size of the capacitance with a load (force) of pressing against the touch panel. Can do.
  • the tactile sensation providing unit 13 vibrates the touch surface of the touch sensor 11.
  • the tactile sensation providing unit 13 is configured using, for example, a piezoelectric element.
  • the tactile sensation providing unit 13 can transmit vibration to the object in contact with the touch sensor 11.
  • the tactile sensation providing unit 13 can also be configured to indirectly vibrate the touch surface of the touch sensor 11 by transmitting vibration from a vibration motor (eccentric motor) or the like to the tactile sensation providing apparatus 1.
  • a vibration motor eccentric motor
  • the tactile sensation providing unit 13 vibrates the tactile sensation providing unit 13 in accordance with the press detected by the press detecting unit 12 (press on the touch sensor 11), thereby generating vibration and presenting a tactile sensation to the user's finger or the like. It can be sensuously understood that the user who is pressing the touch sensor 11 has operated.
  • the press detection part 12 can also be comprised integrally with the tactile sense presentation part 13. FIG.
  • the press detection unit 12 and the tactile sensation providing unit 13 are configured using a piezoelectric element, it is also possible to configure a press detection unit / tactile sensation providing unit by using the piezoelectric element in common. This is because the piezoelectric element generates a voltage when pressure is applied and deforms when the voltage is applied.
  • the tactile sensation providing unit 13 is configured such that when the voltage level (voltage value (data)) of the piezoelectric element that also serves as the pressure detecting unit 12 satisfies a predetermined standard (when the touch sensor 11 is pressed), Vibration can also be generated by driving the element.
  • the voltage level (voltage value (data)) of the piezoelectric element satisfies a predetermined reference
  • the voltage value (data) may reach a predetermined reference value, It may be when the value (data) exceeds a predetermined reference value or when a voltage value (data) equal to the predetermined reference value is detected.
  • the display unit 14 displays an object such as an input button such as a push button switch (push-type button switch), and is configured by, for example, a liquid crystal display (LCD) or an organic EL display.
  • an input button such as a push button switch (push-type button switch)
  • LCD liquid crystal display
  • organic EL display In addition to performing display corresponding to each application, the display unit 14 draws and displays a user interface including various keys and buttons for detecting the operation of the operator on the touch sensor 11 in a predetermined display area. .
  • the control unit 15 controls and manages the operation of the tactile sensation providing apparatus 1 as a whole.
  • the battery 16 supplies power for operating the entire tactile sensation providing apparatus 1.
  • the battery 16 can store electric power by charging in advance.
  • the battery 16 detects the position of contact by the operator with the touch sensor 11, the pressure detection unit 12 detects the pressure on the touch surface of the touch sensor 11, and the tactile sensation providing unit 13 is predetermined. A case where power necessary for presenting the tactile sensation is supplied will be mainly described.
  • the control unit 15 includes a battery information acquisition unit 17 therein.
  • the battery information acquisition unit 17 can acquire information related to the remaining amount of the battery 16 by detecting, for example, a voltage of the battery 16.
  • FIG. 2 shows an example of the mounting structure of the tactile sensation providing apparatus 1 shown in FIG. 1, FIG. 2 (a) is a cross-sectional view of the main part, and FIG. 2 (b) is a plan view of the main part.
  • the display unit 14 is housed and held in the housing 21.
  • the touch sensor 11 is held on the display unit 14 via an insulator 22 made of an elastic member.
  • the display unit 14 and the touch sensor 11 are rectangular in plan view.
  • the touch sensor 11 is held on the display unit 14 via the insulators 22 arranged at the four corners deviated from the display area A of the display unit 14 indicated by virtual lines in FIG. Is done.
  • the casing 21 is provided with an upper cover 23 so as to cover the surface area of the touch sensor 11 deviated from the display area of the display unit 14, and an elastic member is provided between the upper cover 23 and the touch sensor 11.
  • An insulator 24 is provided.
  • the front surface member having the touch surface 11a is made of, for example, a transparent film or glass, and the back surface member is made of glass or acrylic.
  • the touch sensor 11 has a structure in which when the touch surface 11a is pressed, the pressed portion is slightly bent (distorted) according to the pressing force, or the structure itself is bent slightly.
  • a strain gauge sensor 31 for detecting a load (pressing force) applied to the touch sensor 11 is provided in the vicinity of each side covered with the upper cover 23 by adhesion or the like. Further, on the back surface of the touch sensor 11, a piezoelectric vibrator 32 for vibrating the touch sensor 11 is provided by adhesion or the like in the vicinity of two opposing sides. That is, in the tactile sensation providing apparatus shown in FIG. 2, the press detection unit 12 shown in FIG. 1 is configured using four strain gauge sensors 31, and the tactile sensation providing unit 13 is configured using two piezoelectric vibrators 32. Yes. The tactile sensation providing unit 13 vibrates the touch surface 11 a by vibrating the touch sensor 11. In FIG. 2B, the casing 21, the upper cover 23, and the insulator 24 shown in FIG. 2A are not shown.
  • a conventional input mode in which a predetermined process is executed by detecting contact using only the touch sensor 11 is referred to as a “touch panel input mode”.
  • an input mode for executing a predetermined process by detecting both a touch and a predetermined press by combining the functions of both the touch sensor 11 and the press detection unit 12 is referred to as “haptic input”. “Mode”.
  • FIG. 3 is a flowchart for explaining processing when executing predetermined processing in the above-described “touch panel input mode”.
  • the flowchart shown in FIG. 3 shows an operation of presenting a tactile sensation and performing a predetermined process when the tactile sensation providing apparatus 1 detects a contact and the contact is at a position corresponding to an object such as a key.
  • an object such as a key is displayed on the display unit 14 of the tactile sensation providing apparatus 1 before detecting contact with the touch surface of the touch sensor 11.
  • the object in the present embodiment can be an image that suggests to the operator a part for detecting an operation input. For example, an image representing a key or the like in which numbers and characters are drawn on the key top is displayed on the display unit 14 as an object image.
  • the control unit 15 monitors the operation input to the touch sensor 11.
  • the process illustrated in FIG. 3 starts from the point in time when contact by the operator is detected on the touch surface of the touch sensor 11.
  • step S11 in a predetermined area on the touch sensor 11 corresponding to the area where the object is displayed on the display unit 14, the touch sensor 11 detects contact by a pressing target (pressed object) such as an operator's finger or stylus pen.
  • the control unit 15 performs the processing from step S12 onward.
  • the “predetermined area” is an area in the touch sensor 11 corresponding to a position where an object for detecting an operation input such as a key or a button is displayed on the display unit 14. Since this “predetermined area” is an area corresponding to a key or the like, hereinafter, it is simply referred to as “key area” as appropriate.
  • the control unit 15 changes the display mode of the object corresponding to the position where the contact is detected, and displays it on the display unit 14 (step S12).
  • the change in the display mode of the object performed in step S12 is, for example, an object drawing in which a key is depressed when a mechanical push button switch is pressed by an operator (hereinafter referred to as “key press display”). And the like.
  • the display may be performed in such a manner as to emphasize the detection of the contact by the operator by changing the color or brightness of the object instantaneously. .
  • step S13 After performing the key press display in step S12, the control unit 15 executes a predetermined process according to a preset procedure (step S13).
  • the “predetermined process” in step S13 means a predetermined process assigned to the object that has detected contact. For example, when the object that detected contact is a character input key, the control unit 15 performs a process of outputting (displaying) the character. In addition, when the object whose contact is detected is an execution key for some function, the control unit 15 performs a process for starting the execution of the function.
  • the processing in the touch panel input mode described above is performed by detecting contact by the operator in an input device including a normal touch sensor, notifying the operator that the contact has been detected by display or vibration, and the like. This can be performed in the same manner as a conventional process of performing a process related to contact.
  • a predetermined process is executed in the “touch panel input mode”
  • a process of presenting a tactile sensation by vibrating the tactile sensation providing unit 13 as described later is not performed. That is, in the “touch panel input mode”, no tactile sensation is presented even when an operation input is detected.
  • FIG. 4 is a flowchart for explaining a process when a predetermined process is executed in the “haptic input mode” described above.
  • the flowchart shown in FIG. 4 is based on the pressure detected by the pressure detection unit 12 without performing predetermined processing yet when the tactile sensation providing device 1 detects the contact, and the contact is a position corresponding to a key or the like.
  • an operation of presenting a tactile sensation and performing a predetermined process is shown.
  • an object such as a key is displayed on the display unit 14 of the tactile sensation providing apparatus 1 before detecting contact with the touch surface of the touch sensor 11.
  • the control unit 15 monitors the operation input to the touch sensor 11 and detects it by the press detection unit 12. Monitor data based on pressed pressure.
  • the process illustrated in FIG. 4 also starts from the point in time when contact by the operator is detected on the touch surface of the touch sensor 11.
  • step S21 when the touch sensor 11 detects a contact by a pressing target (pressed object) such as an operator's finger or stylus pen in the key area, the control unit 15 performs the processing in step S22 and subsequent steps.
  • a pressing target pressed object
  • the control unit 15 performs the processing in step S22 and subsequent steps.
  • step S22 the control unit 15 determines whether or not the data based on the pressure detected by the pressure detection unit 12 satisfies a predetermined standard while increasing due to the pressing of the touch sensor 11 by the operator.
  • the press detection part 12 detects a load from the average value of the output of the four strain gauge sensors 31, for example.
  • the fact that the data based on the pressure satisfies a predetermined standard corresponds to a value such as 1N (Newton) or a voltage value corresponding to a load based on the pressure when the operator performs a normal pressing operation. It is preferable that data is set in advance and the setting can be changed thereafter.
  • this predetermined standard is used to prevent the operator from starting a predetermined process when the operator touches lightly unintentionally, and to give the operator a pressure sensation for real touch feeling described later. Therefore, an excessively low reference is not set in consideration of the pressure at the time of the pressure input based on the operator's intention (for example, an average value). Even if contact with the key area of the touch sensor 11 is detected in step S21, if the data based on the pressure detected by the pressure detection unit 12 in step S22 does not satisfy the predetermined standard, the control unit 15 proceeds to step S21. Return and continue processing.
  • control unit 15 changes the display mode of the object corresponding to the position where contact is detected and displays it on the display unit 14 (step S23). ).
  • the change of the object display mode performed in step S23 can be performed in the same manner as in step S12 described above.
  • the control unit 15 drives the tactile sensation providing unit 13 with a predetermined drive signal, and vibrates the touch sensor 11 with a predetermined vibration pattern set in advance to present the tactile sensation (Ste S24).
  • the tactile sensation providing unit 13 drives the two piezoelectric vibrators 32 in the same phase, for example. In this way, in the “haptic input mode”, the tactile sensation providing apparatus 1 detects an operation input and starts a predetermined process by a push operation based on the operator's intention.
  • the tactile sensation that the tactile sensation providing unit 13 presents to the object to be pressed in step S24 is preferably the click tactile sensation described above.
  • the tactile sensation providing apparatus 1 performs the following operation to stimulate the tactile sensation while stimulating the operator's pressure sensation. That is, the control unit 15 stimulates the pressure sense until the data based on the pressure applied to the touch sensor 11 satisfies a standard for presenting a tactile sensation (for example, a standard corresponding to data based on a 1N pressure). When the data based on the press satisfies the reference, the control unit 15 drives the piezoelectric vibrator 32 with a predetermined drive signal to vibrate the touch surface 11a to stimulate the sense of touch.
  • the tactile sensation providing apparatus 1 can present to the operator a click tactile sensation similar to that obtained when a button switch such as a push button switch (push button switch) is pressed. Therefore, even if the push button switch is drawn on the touch sensor, the operator inputs an operation input to the touch sensor 11 while obtaining a realistic click feeling similar to that when the actual push button switch is operated. You can do it, so you don't feel uncomfortable. In addition, since the operation input can be performed in conjunction with the consciousness of “pressing” the touch sensor 11, an input error due to simple contact can be prevented.
  • the driving signal when presenting the click sensation described above that is, the constant frequency, period (wavelength), waveform, and amplitude for stimulating the sense of touch can be appropriately set according to the click sensation presented.
  • the tactile sensation providing unit 13 is driven by a drive signal for one cycle including a sine wave having a constant frequency of 170 Hz.
  • the tactile sensation providing unit 13 is driven by such a drive signal, and the touch surface 11a is vibrated by about 15 ⁇ m in a state where the data based on the press satisfies a predetermined standard. Thereby, it is possible to present the operator with a realistic click feeling as if the user had clicked on an actual key.
  • step S25 the control unit 15 executes a predetermined process according to a preset procedure.
  • the “predetermined process” in step S25 is the same as the predetermined process described in step S13.
  • the processing in the haptic input mode described above is different from that in an input device having a normal touch sensor, and is pressed when the data based on the press satisfies a predetermined standard in a state in which contact by the operator is detected. Present a realistic tactile sensation as if the button switch was pressed.
  • the tactile sensation providing apparatus 1 when the tactile sensation providing apparatus 1 is started up, such as when the tactile sensation providing apparatus 1 is turned on, the operator's operation input is performed according to one of the preset touch panel input mode or haptic input mode. A mode of detecting the will be described.
  • the tactile sensation providing apparatus 1 according to the present embodiment executes processing corresponding to the detected operation input by detecting contact and / or press by the operator in the set touch panel input mode or haptic input mode. Can do.
  • FIG. 5 is a flowchart for explaining processing when input detection is started in the touch panel input mode or the haptic input mode when the tactile sensation providing apparatus 1 is activated, such as when the power is turned on. In this way, the present process can be started when the tactile sensation providing apparatus 1 is activated, for example, when the power is turned on.
  • the control unit 15 When the present process is started by turning on the power switch of the tactile sensation providing apparatus 1, the control unit 15 first activates the touch sensor 11, the press detection unit 12, and the tactile sensation presentation unit 13. Each functional unit is allowed to operate at any time (step S31). That is, the touch sensor 11 detects a contact by the operator, and makes a preparation for scanning the position where the contact is detected and notifying the control unit 15. In addition, the press detection unit 12 detects a press on the touch surface of the touch sensor 11 and makes preparations so that data based on the press can be transmitted to the control unit 15. Furthermore, the tactile sensation providing unit 13 makes preparations such that the touch surface of the touch sensor 11 can be vibrated at any time by being notified of control information from the control unit 15.
  • step S31 the control unit 15 determines whether or not the touch sensor 11 has detected contact by the operator (step S32). That is, in step S32, it is determined whether or not any operation input by the operator has been made to the touch sensor 11.
  • step S33 the control unit 15 determines whether or not the set input mode is a haptic input mode. Thereafter, when the set input mode is the haptic input mode, the input detection process by the haptic input mode described in FIG. 4 is performed (step S34). On the other hand, when the set input mode is the touch panel input mode, the input detection process by the touch panel input mode described in FIG. 3 is performed (step S35).
  • the haptic input mode is continued even when the power consumption of the battery 16 related to the operation of the tactile sensation providing apparatus 1 progresses and the remaining amount of the battery 16 decreases. As a result, the power consumption of the battery 16 further proceeds. As the power consumption of the battery 16 progresses in this manner, it is assumed that the operation of the entire tactile sensation providing device 1 cannot be maintained soon because the remaining amount of the battery 16 is insufficient. Therefore, in the present embodiment, the input mode setting is changed according to the remaining battery level.
  • FIG. 6 is a flowchart for explaining the input mode setting process according to the remaining battery level according to the present embodiment.
  • the process shown in FIG. 6 describes a process that should be started after the execution of the process shown in FIG. 5 is completed.
  • the battery information acquisition unit 17 of the control unit 15 detects information regarding the remaining amount of the battery 16 by detecting the voltage of the battery 16 or the like. Obtain (step S41).
  • the control unit 15 determines whether or not the remaining amount of the battery 16 satisfies a predetermined threshold based on the acquired battery information (step S42).
  • the “predetermined threshold value” of the remaining amount of the battery 16 is a value such as a voltage set while the power charged in the battery 16 is reduced by the power related to the operation of the tactile sensation providing apparatus 1. is there.
  • FIG. 7 is a diagram showing an example of how the remaining amount of the rechargeable battery decreases when the tactile sensation providing apparatus 1 is operated by a general rechargeable battery (battery 16). Since the power of the battery 16 is consumed by continuing the operation of the tactile sensation providing apparatus 1, the curve shown in FIG. 7 gradually decreases.
  • FIG. 7 shows a state in which the battery voltage decreases as an example.
  • the “predetermined threshold value” of the remaining amount of the battery 16 in step S42 is based on a voltage value or the like that makes it impossible for the operation of the tactile sensation providing device 1 to be continued soon when the remaining amount of the battery 16 decreases further in the haptic input mode. Set in advance. For example, the voltage threshold Vth shown in FIG. 7 can be set as the “predetermined threshold” in step S42.
  • the “predetermined threshold value” is a voltage value that can maintain the operation of the tactile sensation providing apparatus 1 for a certain period of time if an operation for presenting a tactile sensation is not performed in the haptic input mode (for example, in the touch panel input mode). It is preferable to set based on
  • control unit 15 sets the input mode to “haptic input mode” (step S43) and executes the next input mode switching process (step S43). Step S44).
  • FIG. 8 is a flowchart for explaining the details of the input mode switching process shown in step S44 of FIG.
  • the control unit 15 determines whether or not the input mode set in the previous step (step S43) is different from the current input mode (step S51). Originally operating in the haptic input mode, when the set input mode is the haptic input mode, it is not necessary to switch the input mode, so the processing in FIG. 8 is terminated (No in step S51).
  • step S43 determines whether or not the set input mode is a haptic input mode (step S52).
  • step S53 since the haptic input mode is set in step S43, the control unit 15 activates the press detection unit 12 and the tactile sensation providing unit 13 (step S53). Furthermore, the control unit 15 displays on the display unit 14 that the input mode has been switched to the “haptic input mode” (step S54).
  • step S44 in FIG. 6 When the input mode switching process (step S44 in FIG. 6) shown in FIG. 8 is completed, the control unit 15 performs the input detection process in the haptic input mode described in FIG. 4 in step S45 shown in FIG. When the remaining amount of the battery 16 remains equal to or greater than a predetermined threshold by the above processing, the operation input detection processing in the haptic input mode is performed.
  • step S54 If it is displayed in step S54 that the mode has been switched to the “haptic input mode”, that is, after step S45 in FIG. 6, while the input mode setting process according to the remaining battery level is being performed according to the present embodiment, The control unit 15 returns to step S41 and continues the process (step S46).
  • the setting process of the input mode according to the remaining battery level may be a setting that is always performed, or, for example, “balance mode”, etc. It is also possible to perform input mode setting processing according to the amount.
  • the time for which the process is performed so that the process described in FIG. 6 is continued (step S46). Is controlled by a timer built in the control unit 15.
  • step S42 when it is determined in step S42 that the remaining amount of the battery 16 does not satisfy the predetermined threshold, the control unit 15 sets the input mode to “touch panel input mode” (step S47), and performs the next input mode switching process. Is executed (step S48).
  • step S48 the input mode switching process shown in FIG. 8 is performed.
  • the control unit 15 determines whether or not the input mode set in the previous step (step S47) is different from the current input mode (step S51). Originally operating in the touch panel input mode, when the set input mode is the touch panel input mode, it is not necessary to switch the input mode, so the processing of FIG. 8 is terminated (No in step S51).
  • step S47 determines whether or not the set input mode is the haptic input mode (step S52). ).
  • the control unit 15 deactivates the press detection unit 12 and the tactile sensation providing unit 13 (step S55). Furthermore, the control unit 15 displays on the display unit 14 that the input mode has been switched to the “touch panel input mode” (step S56).
  • step S48 in FIG. 6 the control unit 15 performs the input detection process in the touch panel input mode described in FIG. 3 in step S49 shown in FIG.
  • the remaining amount of the battery 16 does not remain as much as a predetermined threshold by the processing as described above, the operation input detection processing in the touch panel input mode is performed.
  • the haptic input mode is set to the touch panel input. Switch to mode.
  • the tactile sensation providing apparatus 1 when the battery information acquisition unit 17 determines that the remaining amount satisfies a predetermined threshold due to the battery 16 being charged or the like while operating in the touch panel input mode.
  • the touch panel input mode is switched to the haptic input mode. Accordingly, the tactile sensation providing apparatus 1 presents a realistic tactile sensation again when the battery has a sufficient remaining amount due to charging or the like from a state where the remaining amount of the battery has decreased.
  • the touch panel input mode and the haptic input mode are switched according to the remaining battery level. Therefore, according to the present invention, it is possible to balance a realistic tactile sensation when detecting an operation input to the touch sensor and an operation time as an input device using a battery. For this reason, the operator can maintain the function as an input device to the maximum, without being particularly conscious, when the remaining battery level becomes low during operation input using the tactile sensation presentation device. Can be made. In addition, the operator can charge the battery when the remaining battery level is low, so that a realistic tactile sensation can be presented again when an operation input to the touch sensor is detected.
  • the present invention is not limited to the above embodiment, and many variations or modifications are possible.
  • a click feeling is presented, and the release feeling is not particularly mentioned.
  • the release feeling can be presented.
  • these click sensations and release sensations are different from each other, a tactile sensation closer to a real push button switch can be presented, but these click sensations and release sensations can be the same. .
  • the tactile sensation providing apparatus 1 is used when touch is detected (touch panel input mode), or when data based on pressing satisfies a predetermined standard and presents a tactile sensation (haptic input mode).
  • touch panel input mode touch panel input mode
  • haptic input mode data based on pressing satisfies a predetermined standard
  • An example of performing a predetermined process has been described.
  • the presentation of tactile sensation and / or execution of the predetermined process is not performed when the data based on the detection of the contact or the pressure satisfies the predetermined standard, but the data based on the detection of the release of the contact or the data based on the pressure It may be performed when the predetermined standard is not satisfied.
  • the battery information acquisition part 17 demonstrated the aspect which detects the voltage value etc. of the battery 16 continuously (according to the loop shown in FIG. 6), when the tactile sense presentation apparatus 1 is working.
  • the battery information acquisition part 17 can also acquire the information regarding the remaining amount of the battery 16 by detecting the voltage value of the battery 16 etc. for every predetermined period. In this way, it can be expected that the operating time of the tactile sensation providing apparatus 1 is further increased.
  • the tactile sensation providing unit in the above-described embodiment can be configured using an arbitrary number of piezoelectric vibrators, can be configured by providing a transparent piezoelectric element on the entire surface of the touch sensor, or can express vibrations that provide tactile sensation.
  • the eccentric motor can be configured to rotate once in one cycle of the drive signal.
  • the tactile sensation providing apparatus drives the tactile sensation providing unit when the data based on the pressure detected by the pressure detection unit satisfies a criterion for presenting the tactile sensation.
  • the data based on the pressure detected by the pressure detection unit satisfies the standard for presenting the tactile sensation
  • the data based on the pressure detected by the pressure detection unit reaches a reference value for presenting the tactile sensation.
  • it may be when the data based on the press corresponding to the reference value for presenting the tactile sensation is detected by the press detection unit.
  • the tactile sensation providing apparatus according to the present invention does not necessarily have such a configuration, and the touch sensor 11 and the display unit 14 may be separated from each other.
  • the touch sensor 11 is arranged so as to overlap the upper surface of the display unit 14, the operator can easily recognize the correspondence between the displayed image and the generated vibration.
  • the display unit 14 and the touch sensor 11 in the description of the present embodiment are configured by an integrated device, for example, by providing both functions of the display unit and the touch sensor (contact detection unit) on a common substrate. You may do it.
  • a plurality of photoelectric conversion elements such as photodiodes are regularly arranged in a matrix electrode array of pixel electrodes included in the liquid crystal panel.
  • This device displays an image with a liquid crystal panel structure, while reflecting the light of a backlight for liquid crystal display at the tip of a pen that touches and inputs a desired position on the surface of the panel. The reflected light is reflected by peripheral photoelectric conversion elements.
  • the touch position can be detected by receiving the light.

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Position Input By Displaying (AREA)
  • User Interface Of Digital Computer (AREA)
  • Power Sources (AREA)

Abstract

　タッチセンサ１１と、タッチ面に対する押圧を検出する押圧検出部１２と、タッチ面を振動させる触感呈示部１３と、バッテリの情報を取得するバッテリ情報取得部１７と、タッチセンサ１１が接触を検出すると所定の処理を実行する第１の入力モード、またはタッチセンサ１１が接触を検出した状態で押圧検出部１２が検出する押圧に基づくデータが所定の基準を満たすと触感を呈示するように触感呈示部１３を制御するとともに所定の処理を実行する第２の入力モード、を切換可能に制御する制御部１５と、を備え、制御部１５は、バッテリ情報取得部１７が取得したバッテリの情報に基づいて、第１の入力モードと、第２の入力モードとを切り換えるように制御する。

Description

触感呈示装置 関連出願の相互参照
　本出願は、２０１１年９月２７日に出願された日本国特許出願２０１１－２１０８９５号の優先権を主張するものであり、この先の出願の開示全体を、ここに参照のために取り込む。
　本発明は、タッチセンサに対する操作入力を検出して触感を呈示する装置に関するものである。
　近年、携帯電話等の携帯端末において、ユーザによる操作入力を検出する操作部やスイッチ等の入力装置として、タッチパネルやタッチスイッチ等のタッチセンサを備える入力装置が採用されているものがある。携帯端末以外に、電卓、券売機等の情報機器や、電子レンジ、テレビ、照明器具等の家電製品、産業用機器（ＦＡ機器）等にも、タッチセンサを備える入力装置は広く使用されている。
　このようなタッチセンサには、抵抗膜方式、静電容量方式、光学式等の種々の方式が知られている。しかしながら、いずれの方式のタッチセンサにおいても、指やスタイラスペンによる接触を検出するものであって、タッチセンサ自体は、タッチされても、機械式の押しボタンスイッチのようには物理的に変位しない。
　このように、タッチセンサがタッチされても、タッチセンサ自体は物理的に変位しないので、入力装置が接触を検出しても、操作者は入力に対するフィードバックを得ることができない。このため、操作者は、操作入力を行う際の「押下した／押下を解除した」という操作感が得られず、同じ位置を何度もタッチする等の繰り返し入力が生じ易く、操作者にストレスを与える場合がある。
　このような不要な繰り返し入力を防止するものとして、例えば、接触を検出して、音を鳴らすようにしたものが知られている。また、例えば、当該入力位置に対応して表示部に画像表示されている入力ボタン等の入力用オブジェクト（以下、単に「オブジェクト」と記す）の表示色を変更するなど表示態様を変更したりして、聴覚や視覚により操作入力の結果を確認できるようにしたものも知られている。
　しかしながら、聴覚に働きかけるフィードバック方法の場合は、騒音環境下での確認が困難になるとともに、使用機器がマナーモード等の消音状態にあるときは、対応できない。また、視覚に働きかけるフィードバック方法の場合は、表示部に表示されているオブジェクトのサイズが小さいと、特に指で入力を行う際に、指の下にオブジェクトが隠れて表示態様の変化が確認できない場合がある。
　そこで、聴覚や視覚によらず、タッチセンサが操作入力を検出すると、タッチセンサを振動させて、操作者の指先などに振動を伝えるようにしたフィードバック方法も提案されている（例えば、特許文献１および特許文献２参照）。
特開２００３－２８８１５８号公報 特開２００８－１３００５５号公報
　上記特許文献１および特許文献２に開示の技術によれば、タッチセンサに対する操作入力を検出した際に、操作者の指先などに振動を伝えることができる。したがって、このような入力装置を用いて入力を行う操作者は、タッチセンサに対して行った操作入力が入力装置に検出されたことを認識することができる。
　また、これらの技術を入力装置に適用すれば、タッチセンサからの位置情報により、入力ボタン等のオブジェクトが表示部に画像表示されている位置に対応する位置のタッチセンサに操作入力があった場合にのみ、振動を発生させることもできる。すなわち、キーやボタンなどのオブジェクトが存在しない位置のタッチセンサに接触があっても振動は発生しないが、キーやボタンなどのオブジェクトが存在する位置のタッチセンサに接触があれば振動を発生させて触感を呈示することができる。
　しかしながら、上記特許文献１および特許文献２に開示の技術は、単にタッチセンサが接触を検出すると、当該接触に応じてタッチセンサを振動させているに過ぎない。このため、特に、機械式の押しボタンスイッチ（プッシュ式ボタンスイッチ）のようなボタンスイッチがタッチセンサ上に描画されている場合、タッチセンサに指などが軽く触れた（タッチした）だけで触感が呈示されてしまう。したがって、操作者がタッチセンサを押圧（プッシュ）する前段階で、軽く触れる操作（タッチ）を行っただけで反応するため、誤操作を誘発するおそれがある。また、描画されたボタンスイッチを操作者がプッシュする意図はなくても（力を入れていなくても）、タッチセンサをプッシュする前段階の軽く触れる操作（タッチ）に応じて触感が呈示されるため、操作者に違和感を与えることにもなる。
　機械式の押しボタンスイッチの場合、操作者は、ある程度の押圧力を加えてスイッチを押下した際に、当該スイッチが押下された触感（以下、クリック触感という）が呈示されると期待するはずである。同様に、機械式の押しボタンスイッチの場合、操作者は、加えていた押圧力を弱めていく過程で、当該押下されていたスイッチが、元の押下されていない状態に戻る触感（以下、リリース触感という）が呈示されると期待する。また、機械式の押しボタンスイッチの場合、操作者は、非常に弱い押圧力により押圧位置を触れたりなぞったりしても、クリック触感やリリース触感は呈示されないものと期待する。
　そこで、本願出願人は、タッチセンサを用いてスライド入力を検出する際に、機械式のスイッチにより構成されるキー等を操作しているかのごとき触感を呈示することができるようにした入力装置を発明し、日本国特許庁に既に特許出願している（特開２０１１－０４８６８５号公報）。
　上記入力装置は、タッチセンサのタッチ面に対する押圧を検出する押圧検出部を付加することにより、押圧検出部が検出する押圧に基づくデータ（例えば圧電素子が検出する電圧値など）が所定の基準を満たしている状態、すなわちタッチセンサが押圧された状態で、触感呈示部が触感を呈示する。したがって、この入力装置は、操作者の意図しない軽いタッチによる操作入力が検出されても触感を呈示しないようにできる。さらに、この入力装置は、操作者に圧覚を与えた状態で触感を呈示するため、従来の装置では呈示できなかった、実際の押しボタンスイッチを操作する際に呈示されるような、リアルな触感を呈示することができる。
　しかしながら、上述の入力装置は、リアルな触感が呈示できるという顕著な効果を有するものの、押圧検出部を追加しているため、押圧を検出するための電力を必要とする。さらに、この入力装置は、触感呈示部も追加しているため、これを駆動して触感を呈示するための電力も必要とする。押圧を検出するにあたり押圧検出部を起動しておくための電力は、いわば待機電力のように、それほど大きくならないようにもできる。一方、触感呈示部が触感を呈示するための電力は、触感を呈示する入力モードで動作している限り、操作者の操作入力を検出して触感を呈示するたびに消費するものである。このため、１回の触感を呈示するための電力は大したものではないとしても、入力装置として絶えず操作入力を検出して触感を呈示している場合においては、操作入力が相当な回数になれば、消費する電力もそれだけ大きくなる。したがって、このような入力装置は、押圧検出部および触感呈示部を備えない通常のタッチパネルによる入力装置と比べると、多少なりとも消費する電力が大きくなる。
　外部から電力の供給を受けることができる入力装置であれば、消費電力が多少大きくなっても、エコロジーの観点を別にすれば、特段の問題は生じない。しかしながら、特に携帯端末のようにバッテリの容量が制限されている場合、操作感を向上させるために触感を多数回呈示することによりバッテリの電力を消費して、端末全体の稼動時間が短縮されてしまうことも考えられる。一方、操作者にとっては、触感の呈示により電力がどの程度消費されるのか分からないのが通常であるため、触感の呈示によってバッテリの残量がどの程度の影響を受けるのかを予測することは容易ではない。このような状況においても、操作者は、バッテリの残量が少なくなってきた場合、触感の呈示による操作感よりも、操作する端末本体の稼動が持続されることを優先させたいのが一般的であると考えられる。このように、例えば携帯端末などに備えられる入力装置の場合、リアルな触感の呈示と、入力装置本体のバッテリによる稼動時間のバランスを取ることが望まれることを考慮する必要がある。
　したがって、かかる事情に鑑みてなされた本発明の目的は、タッチセンサに対する操作入力を検出してリアルな触感を呈示することと、バッテリによる稼働時間とのバランスをとることができる触感呈示装置を提供することにある。
　上記目的を達成する第１の観点に係る触感呈示装置の発明は、
　タッチセンサと、
　前記タッチセンサのタッチ面に対する押圧を検出する押圧検出部と、
　前記タッチ面を振動させる触感呈示部と、
　バッテリの情報を取得するバッテリ情報取得部と、
　前記タッチセンサが接触を検出すると所定の処理を実行する第１の入力モード（タッチパネル入力モード）、または、前記タッチセンサが接触を検出している状態で前記押圧検出部が検出する押圧に基づくデータが所定の基準を満たすと、前記タッチ面を押圧している押圧対象に対して触感を呈示するように前記触感呈示部を制御するとともに所定の処理を実行する第２の入力モード（ハプテッィク入力モード）、を切換可能に制御する制御部と、を備え、
　前記制御部は、前記バッテリ情報取得部が取得した前記バッテリの情報に基づいて、前記第１の入力モード（タッチパネル入力モード）と、前記第２の入力モード（ハプテッィク入力モード）とを切り換えるように制御するものである。
　第２の観点に係る発明は、第１の観点に係る触感呈示装置において、
　前記制御部は、前記第２の入力モード（ハプテッィク入力モード）で動作中に、前記バッテリの残量が所定の閾値に満たなくなったと判定した場合、当該第２の入力モードを前記第１の入力モード（タッチパネル入力モード）に切り換えるように制御するものである。
　第３の観点に係る発明は、第１の観点に係る触感呈示装置において、
　前記制御部は、前記第１の入力モード（タッチパネル入力モード）で動作中に、前記バッテリの残量が所定の閾値を満たしたと判定した場合、当該第１の入力モードを前記第２の入力モード（ハプテッィク入力モード）に切り換えるように制御するものである。
　第４の観点に係る発明は、第１～第３の何れか１つの観点に係る触感呈示装置において、
　表示部をさらに備え、
　前記制御部は、前記第１の入力モードと前記第２の入力モードとの切り換えが行われた旨を前記表示部に表示するように制御するものである。
　本発明によれば、タッチセンサに対する操作入力を検出してリアルな触感を呈示することと、バッテリによる入力装置としての稼働時間とのバランスをとることができる。
本発明の実施の形態に係る触感呈示装置の概略構成を示すブロック図である。 本発明の実施の形態に係る触感呈示装置の実装構造の一例を示す図である。 本発明の実施の形態によるタッチパネル入力モードで操作入力を検出する際の処理を説明するフローチャートである。 本発明の実施の形態によるハプティック入力モードで操作入力を検出する際の処理を説明するフローチャートである。 本発明の実施の形態に係る触感呈示装置においてタッチパネル入力モードまたはハプティック入力モードで操作入力の検出を開始する場合の処理を説明するフローチャートである。 本実施の形態によるバッテリ残量に応じた入力モードの設定処理を説明するフローチャートである。 一般的な充電池により触感呈示装置の動作を行う場合に充電池の残量が減少する様子の例を示す図である。 図７に示した入力モード切換処理の詳細を説明するフローチャートである。
　以下、本発明の実施の形態について、図面を参照して説明する。
　図１は、本発明の実施の形態に係る触感呈示装置の概略構成を示す機能ブロック図である。本実施の形態に係る触感呈示装置は、例えば携帯端末で操作者が文字または数字を入力する際に用いる入力装置や、銀行に設置されるＡＴＭ、駅に設置される券売機に用いる入力装置など、タッチセンサにより操作者による接触を検出するものであれば、任意の入力装置に適用することができる。
　図１に示すように、本実施の形態に係る触感呈示装置１は、タッチセンサ１１、押圧検出部１２、触感呈示部１３、表示部１４、制御部１５、およびバッテリ１６を備える。
　タッチセンサ１１は、通常は表示部１４の前面に配置して、表示部１４に表示したキーやボタン等（以下、単に「キー等」という）のオブジェクトに対する操作者の指やスタイラスなどによる接触を、対応するタッチセンサ１１のタッチ面により検出する。このタッチセンサ１１は、例えば抵抗膜方式、静電容量方式、光学式等の公知の方式のもので構成する。なお、タッチセンサ１１が接触を検出する上で、操作者の指などがタッチセンサ１１に物理的に接触することは必須ではない。例えば、タッチセンサ１１が光学式である場合は、タッチセンサ１１はタッチセンサ１１上の赤外線が指などで遮られた位置を検出するため、操作者の指などがタッチセンサ１１に接触することは不要である。
　押圧検出部１２は、タッチセンサ１１のタッチ面に対してユーザが操作を行う際の押圧を検出するもので、例えば、押圧に応じて物理的または電気的な特性（歪み、抵抗、電圧等）が変化する歪みゲージセンサや圧電素子等の素子等を用いて構成する。押圧検出部１２が、例えば、圧電素子等を用いて構成された場合、押圧検出部１２の圧電素子は、タッチセンサ１１に対する押圧に係る荷重（力）の大きさ（または、荷重（力）の大きさが変化する速さ（加速度））に応じて、電気的な特性である電圧の大きさ（電圧値（以下、押圧に基づくデータと称する））が変化する。そして、制御部１５は、押圧に基づくデータが所定の閾値以上である場合に、例えばアプリケーション基づくなどして、所定の処理を行うように制御する。
　制御部１５は、押圧検出部１２が押圧に基づくデータを制御部１５に通知することにより、または、制御部１５が、押圧検出部１２の押圧に基づくデータを検出することにより、当該押圧に基づくデータを取得する。つまり、制御部１５は、タッチセンサ１１に対する押圧に基づくデータを押圧検出部１２から取得する。なお、押圧に基づくデータは、電圧値の代わりに、押圧に係る荷重の大きさ、電力値、抵抗値等でもよい。
　また、押圧検出部１２は、タッチセンサ１１がユーザに押圧されたときに生じる、タッチセンサ１１と表示部１４との隙間の変化を測定するものであってもよい。この場合、押圧に基づくデータは、隙間の変化値に対応する。なお、押圧検出部１２は、タッチセンサ１１と他の部品、例えば回路基板との隙間の変化を測定するものであってもよい。
　また、押圧検出部１２は、タッチセンサ１１における接触検出方式に応じて構成することができる。例えば、タッチセンサ１１が抵抗膜方式の場合には、接触面積の大きさに応じた抵抗の大きさを、タッチパネルのタッチ面に対する押圧の荷重（力）に対応付けることにより、歪みゲージセンサや圧電素子等を用いることなく構成することができる。あるいは、タッチセンサ１１が静電容量方式の場合には、静電容量の大きさを、タッチパネルに対する押圧の荷重（力）に対応付けることにより、歪みゲージセンサや圧電素子等を用いることなく構成することができる。
　触感呈示部１３は、タッチセンサ１１のタッチ面を振動させる。この触感呈示部１３は、例えば圧電素子等を用いて構成する。この触感呈示部１３によって、タッチセンサ１１に接触している対象に対して振動を伝えることができる。また、触感呈示部１３は、振動モータ（偏心モータ）などによる振動を触感呈示装置１に伝達させることにより、タッチセンサ１１のタッチ面を間接的に振動させるように構成することもできる。
　この触感呈示部１３は、押圧検出部１２が検出する押圧（タッチセンサ１１に対する押圧）に応じて触感呈示部１３を振動させることにより、振動を発生してユーザの指などに触感を呈示して、タッチセンサ１１を押圧しているユーザに操作したことが感覚的に分かるようにできる。なお、押圧検出部１２は、触感呈示部１３と一体化して構成することもできる。特に、押圧検出部１２および触感呈示部１３は、圧電素子を用いて構成する場合は、圧電素子を共用して押圧検出部兼触感呈示部を構成することもできる。圧電素子は、圧力が加わると電圧を発生し、電圧が加えられると変形するためである。
　また、触感呈示部１３は、押圧検出部１２も兼ねる圧電素子の電圧の大きさ（電圧値（データ））が所定の基準を満たした際に（タッチセンサ１１がプレスされると）、当該圧電素子を駆動することにより振動を発生するようにもできる。ここで、圧電素子の電圧の大きさ（電圧値（データ））が所定の基準を満たした際とは、電圧値（データ）が所定の基準値に達した際であってもよいし、電圧値（データ）が所定の基準値を超えた際でもよいし、所定の基準値と等しい電圧値（データ）が検出された際でもよい。　
　表示部１４は、押しボタンスイッチ（プッシュ式ボタンスイッチ）のような入力ボタン等のオブジェクトを表示するもので、例えば液晶ディスプレイ（ＬＣＤ）または有機ＥＬディスプレイなどにより構成する。この表示部１４は、各アプリケーションに対応する表示を行う他、タッチセンサ１１に対する操作者の操作を検出するための各種キーやボタンなどで構成するユーザインタフェースを所定の表示領域に描画して表示する。
　制御部１５は、触感呈示装置１全体の動作を制御および管理する。バッテリ１６は、触感呈示装置１の全体を稼動させるための電力を供給する。触感呈示装置１を稼動させる電力を供給するために、バッテリ１６は、予め充電することにより、電力を蓄えることができる。本実施の形態においては、特に、バッテリ１６が、タッチセンサ１１が操作者による接触の位置を検出し、押圧検出部１２がタッチセンサ１１のタッチ面に対する押圧を検出し、触感呈示部１３が所定の触感を呈示するのに必要な電力を供給する場合について、重点的に説明する。また、制御部１５は、その内部にバッテリ情報取得部１７を含んでいる。このバッテリ情報取得部１７は、バッテリ１６の例えば電圧などを検出することにより、バッテリ１６の残量などに係る情報を取得することができる。
　図２は、図１に示した触感呈示装置１の実装構造の一例を示すもので、図２（ａ）は要部断面図であり、図２（ｂ）は要部平面図である。表示部１４は、筐体２１内に収納保持される。表示部１４上には、弾性部材からなるインシュレータ２２を介して、タッチセンサ１１が保持される。なお、本実施の形態に係る触感呈示装置１は、表示部１４およびタッチセンサ１１を、平面視で矩形状としてある。また、本実施の形態において、タッチセンサ１１は、図２（ｂ）に仮想線で示す表示部１４の表示領域Ａから外れた４隅に配設したインシュレータ２２を介して表示部１４上に保持される。
　また、筐体２１には、表示部１４の表示領域から外れたタッチセンサ１１の表面領域を覆うようにアッパカバー２３が設けられ、このアッパカバー２３とタッチセンサ１１との間に、弾性部材からなるインシュレータ２４が配設される。
　なお、図２に示すタッチセンサ１１において、タッチ面１１ａを有する表面部材は、例えば透明フィルムやガラスで構成され、裏面部材はガラスやアクリルで構成される。タッチセンサ１１は、タッチ面１１ａが押圧されると、押圧部分が押圧力に応じて微少量撓む（歪む）、または構造体そのものが微少量撓む構造のものを用いる。
　タッチセンサ１１の表面上には、アッパカバー２３で覆われる各辺の近傍に、タッチセンサ１１に加わる荷重（押圧力）を検出するための歪みゲージセンサ３１がそれぞれ接着等により設けられる。また、タッチセンサ１１の裏面上には、対向する２つの辺の近傍に、タッチセンサ１１を振動させるための圧電振動子３２がそれぞれ接着等により設けられる。すなわち、図２に示す触感呈示装置は、図１に示した押圧検出部１２が４つの歪みゲージセンサ３１を用いて構成され、触感呈示部１３が２つの圧電振動子３２を用いて構成されている。そして、触感呈示部１３は、タッチセンサ１１を振動させることにより、タッチ面１１ａを振動させるようにしている。なお、図２（ｂ）は、図２（ａ）に示した筐体２１、アッパカバー２３およびインシュレータ２４の図示を省略している。
　次に、本実施の形態による、２つの入力モードについて説明する。本実施の形態においては、タッチセンサ１１のみを用いて接触を検出することにより所定の処理を実行する従来方式の入力モードを、「タッチパネル入力モード」と記す。また、本実施の形態による、タッチセンサ１１および押圧検出部１２の双方の機能を組み合わせて、接触を検出するとともに所定の押圧も検出することにより所定の処理を実行する入力モードを、「ハプティック入力モード」と記す。
　図３は、上述の「タッチパネル入力モード」で所定の処理を実行する際の処理を説明するフローチャートである。図３に示すフローチャートは、触感呈示装置１が接触を検出した際、当該接触がキー等のオブジェクトに対応する位置である場合、触感を呈示して所定の処理を行う動作を示すものである。なお、図３のフローチャートに示す動作を開始するにあたり、タッチセンサ１１のタッチ面に対する接触を検出する前に、触感呈示装置１の表示部１４にキー等のオブジェクトを表示しておく。本実施の形態におけるオブジェクトは、操作入力を検出する部位を操作者に示唆する画像とすることができる。例えば、オブジェクトの画像として、数字や文字がキートップに描画されているキーなどを表す画像を表示部１４に表示する。
　本実施の形態に係る触感呈示装置１において「タッチパネル入力モード」で操作入力を検出する動作が開始すると、制御部１５は、タッチセンサ１１への操作入力を監視する。図３に示す処理は、タッチセンサ１１のタッチ面に対して、操作者による接触が検出された時点から開始する。
　ステップＳ１１において、表示部１４にオブジェクトが表示された領域に対応するタッチセンサ１１上の所定領域において、タッチセンサ１１が操作者の指やスタイラスペン等の押圧対象（押圧物）による接触を検出した場合、制御部１５は、ステップＳ１２以下の処理を行う。本実施の形態において、「所定領域」とは、キーやボタンなどの操作入力を検出するオブジェクトが表示部１４に表示された位置に対応する、タッチセンサ１１における領域のことである。この「所定領域」は、キー等に対応する領域であるため、以下、適宜、単に「キー領域」と記す。
　ステップＳ１１において検出された接触の位置がキー領域内にある場合、制御部１５は、接触を検出している位置に対応するオブジェクトの表示態様を変更して表示部１４に表示する（ステップＳ１２）。ステップＳ１２にて行うオブジェクトの表示態様の変更は、例えば、オブジェクトの描画を、機械式の押しボタンスイッチが操作者により押下された際のキーが凹んだような表示（以下、キーの「押下表示」という）に変更するなどの態様が考えられる。その他、オブジェクトの表示態様を変更する際には、オブジェクトの色や輝度などを瞬間的に変更するなどして、操作者による接触を検出したことを強調するような態様の表示を行ってもよい。
　ステップＳ１２においてキーの押下表示を行ったら、制御部１５は、予め設定した手順に従って、所定の処理を実行する（ステップＳ１３）。ステップＳ１３における「所定の処理」とは、接触を検出したオブジェクトに割り当てられている、予め規定された処理を意味する。例えば、接触を検出したオブジェクトが文字入力のキーである場合には、制御部１５は、当該文字を出力（表示）する処理を行う。また、接触を検出したオブジェクトが何かの機能の実行キーである場合には、制御部１５は、当該機能の実行を開始する処理を行う。
　以上説明した、タッチパネル入力モードにおける処理は、通常のタッチセンサを備える入力装置において、操作者による接触を検出して、当該接触を検出したことを表示や振動などで操作者に通知して、当該接触に係る処理を行う、という従来方式の処理と同様に行うことができる。なお、本実施の形態において、「タッチパネル入力モード」で所定の処理を実行する際、後述するような、触感呈示部１３を振動させて触感を呈示する処理は行わない。すなわち、「タッチパネル入力モード」では、操作入力を検出しても触感は呈示しない。しかしながら、操作者による接触が正常に検出されたことを、上述したように表示部１４における表示により示したり、または音声出力部（図示せず）から効果音を出力する等により示すことができる。
　図４は、上述の「ハプティック入力モード」で所定の処理を実行する際の処理を説明するフローチャートである。図４に示すフローチャートは、触感呈示装置１が接触を検出した時点ではまだ所定の処理は行わずに、当該接触がキー等に対応する位置であって、押圧検出部１２が検出する押圧に基づくデータが所定の基準を満たした場合に、触感を呈示して所定の処理を行う動作を示すものである。なお、図４のフローチャートに示す動作を開始するに際しても、タッチセンサ１１のタッチ面に対する接触を検出する前に、触感呈示装置１の表示部１４にキー等のオブジェクトを表示しておく。
　本実施の形態に係る触感呈示装置１において「ハプティック入力モード」で操作入力を検出する動作が開始すると、制御部１５は、タッチセンサ１１への操作入力を監視するとともに、押圧検出部１２で検出される押圧に基づくデータを監視する。図４に示す処理も、タッチセンサ１１のタッチ面に対して、操作者による接触が検出された時点から開始する。
　ステップＳ２１において、タッチセンサ１１が、キー領域において操作者の指やスタイラスペン等の押圧対象（押圧物）による接触を検出した場合、制御部１５は、ステップＳ２２以下の処理を行う。
　ステップＳ２２において、制御部１５は、押圧検出部１２により検出される押圧に基づくデータが、操作者によるタッチセンサ１１の押圧によって増加しながら所定の基準を満たしたか否かを判定する。なお、押圧検出部１２は、例えば、４つの歪みゲージセンサ３１の出力の平均値から荷重を検出する。ここで、押圧に基づくデータが所定の基準を満たすとは、操作者が通常の押圧操作を行う際の押圧に基づいて、例えば１Ｎ（ニュートン）などの値や荷重に相当する電圧値に対応するデータを予め設定し、その後も設定変更できるようにするのが好適である。また、この所定の基準は、操作者が意図せずに軽く触れてしまったような場合は所定の処理を開始しないようにするため、および後述するリアルな触感のための圧覚を操作者に与えるために、操作者の意図に基づく押圧入力の際の押圧を考慮して（例えば平均値など）、過度に低い基準を設定しないようにする。ステップＳ２１においてタッチセンサ１１のキー領域に対する接触が検出されていても、ステップＳ２２において押圧検出部１２が検出する押圧に基づくデータが所定の基準を満たしていない場合、制御部１５は、ステップＳ２１に戻って処理を続行する。
　ステップＳ２２において検出された押圧に基づくデータが所定の基準を満たしたら、制御部１５は、接触を検出している位置に対応するオブジェクトの表示態様を変更して表示部１４に表示する（ステップＳ２３）。ステップＳ２３にて行うオブジェクトの表示態様の変更は、上述したステップＳ１２と同様に行うことができる。
　ステップＳ２３においてキーの押下表示を行ったら、制御部１５は、触感呈示部１３を所定の駆動信号で駆動して、予め設定した所定の振動パターンでタッチセンサ１１を振動させて触感を呈示する（ステップＳ２４）。触感呈示部１３は、例えば、２つの圧電振動子３２を同相で駆動する。このようにして、触感呈示装置１は、「ハプティック入力モード」においては、操作者の意図に基づくプッシュ動作により、操作入力を検出して所定の処理を開始する。
　なお、ステップＳ２４において触感呈示部１３が押圧対象に対して呈示する触感は、上述したクリック触感とするのが好適である。操作者に対してリアルなクリック触感を呈示するためには、触感呈示装置１は、以下のような動作を行うことにより、操作者の圧覚を刺激した状態で触覚を刺激する。すなわち、制御部１５は、タッチセンサ１１に加わる押圧に基づくデータが、触感を呈示する基準（例えば１Ｎの押圧に基づくデータに対応する基準）を満たすまでは、圧覚を刺激するようにする。そして、押圧に基づくデータが当該基準を満たしたら、制御部１５は、圧電振動子３２を所定の駆動信号で駆動してタッチ面１１ａを振動させて触覚を刺激する。これにより、触感呈示装置１は、押しボタンスイッチ（プッシュ式ボタンスイッチ）のようなボタンスイッチを押した際に得られるのと同様なクリック触感を、操作者に呈示することができる。したがって、操作者は、タッチセンサ上に描画された押しボタンスイッチであっても、現実の押しボタンスイッチを操作した場合と同様のリアルなクリック触感を得ながら、タッチセンサ１１に対して操作入力を行うことができるので、違和感を覚えることがない。また、タッチセンサ１１を「押した」という意識との連動で操作入力を行うことができるので、単なる接触による入力ミスも防止することができる。
　上述したクリック触感を呈示する際の駆動信号、すなわち触覚を刺激する一定周波数、周期（波長）、波形、振幅は、呈示するクリック触感に応じて適宜設定することができる。例えば、携帯端末に使用されているメタルドームスイッチに代表されるクリック触感を呈示する場合、例えば、１７０Ｈｚの一定周波数のＳｉｎ波からなる１周期分の駆動信号により触感呈示部１３を駆動する。このような駆動信号により触感呈示部１３を駆動させて、タッチ面１１ａを、押圧に基づくデータが所定の基準を満たしている状態で、約１５μｍ振動させる。これにより、実際のキーをクリックした場合のような、リアルなクリック触感を操作者に呈示することができる。
　ステップＳ２４において触感を呈示したら、制御部１５は、予め設定した手順に従って、所定の処理を実行する（ステップＳ２５）。ステップＳ２５における「所定の処理」とは、ステップＳ１３において説明した所定の処理と同じである。
　以上説明した、ハプティック入力モードにおける処理は、通常のタッチセンサを備える入力装置とは異なり、操作者による接触を検出している状態で、押圧に基づくデータが所定の基準を満たした際に、押しボタンスイッチを押下したかのようなリアルな触感を呈示する。
　次に、本実施の形態による入力検出処理について説明する。本実施の形態においては、触感呈示装置１に電源を投入した際などの触感呈示装置１の起動時に、予め設定されたタッチパネル入力モードまたはハプティック入力モードのいずれかの入力モードにより操作者の操作入力を検出する態様について説明する。本実施の形態の触感呈示装置１は、設定されたタッチパネル入力モードまたはハプティック入力モードにて、操作者による接触および／または押圧を検出することにより、検出した操作入力に対応する処理を実行することができる。
　図５は、電源を投入した際などの触感呈示装置１の起動時に、タッチパネル入力モードまたはハプティック入力モードで入力検出を開始する場合の処理を説明するフローチャートである。本処理は、このように、例えば電源を投入した際などの触感呈示装置１の起動時に開始することができる。
　触感呈示装置１の電源スイッチをオンにする等して本処理を開始すると、制御部１５は、まず、タッチセンサ１１と、押圧検出部１２と、触感呈示部１３とをアクティブ化して、これらの各機能部がいつでも動作できるようにする（ステップＳ３１）。すなわち、タッチセンサ１１は、操作者による接触を検出して、当該接触が検出された位置をスキャンして制御部１５に通知できるような準備を行う。また、押圧検出部１２は、タッチセンサ１１のタッチ面に対する押圧を検出して、当該押圧に基づくデータを制御部１５に伝えることができるような準備を行う。さらに、触感呈示部１３は、制御部１５からの制御情報を通知されることによりタッチセンサ１１のタッチ面をいつでも振動させることができるような準備を行う。
　ステップＳ３１において各機能部がアクティブ化されたら、制御部１５は、タッチセンサ１１が操作者による接触を検出したか否かを判定する（ステップＳ３２）。すなわち、ステップＳ３２においては、操作者による何らかの操作入力がタッチセンサ１１に対してなされたか否かを判定する。
　ステップＳ３２において接触が検出された場合、制御部１５は、設定された入力モードがハプティック入力モードであるか否かを判定する（ステップＳ３３）。以後、設定された入力モードがハプティック入力モードである場合は、図４において説明したハプティック入力モードによる入力検出処理を行う（ステップＳ３４）。一方、設定された入力モードがタッチパネル入力モードである場合は、図３において説明したタッチパネル入力モードによる入力検出処理を行う（ステップＳ３５）。
　以上のような処理により、触感呈示装置１の起動時に、タッチパネル入力モードまたはハプティック入力モードの何れにおいて操作入力の検出を開始しても、それぞれの入力モードに対応して操作入力を検出して、当該操作入力に対応する処理を行うことができる。
　しかしながら、ハプティック入力モードにおいて操作入力の検出を開始した場合、触感呈示装置１の動作に係るバッテリ１６の電力の消費が進行して、バッテリ１６の残量が少なくなった場合でもハプティック入力モードを継続すると、バッテリ１６の電力の消費はますます進行する。このようにしてバッテリ１６の電力の消費が進行すると、バッテリ１６の残量が不足することにより、やがてすぐに触感呈示装置１全体の動作が維持できなくなることが想定される。そこで、本実施の形態においては、バッテリの残量に応じて入力モードの設定を変更する。
　図６は、本実施の形態によるバッテリ残量に応じた入力モードの設定処理を説明するフローチャートである。図６に示す処理は、図５に示した処理の実行が終了した後に、続けて開始すべき処理を説明している。
　本実施の形態によるバッテリ残量に応じた入力モードの設定処理が開始すると、制御部１５のバッテリ情報取得部１７は、バッテリ１６の電圧を検出する等により、バッテリ１６の残量に係る情報を取得する（ステップＳ４１）。ステップＳ４１においてバッテリの情報が取得されたら、制御部１５は、当該取得したバッテリ情報に基づいて、バッテリ１６の残量が所定の閾値を満たしているか否かを判定する（ステップＳ４２）。ここで、バッテリ１６の残量の「所定の閾値」とは、触感呈示装置１の動作に係る電力によって、バッテリ１６に充電された電力が減少して行く途中に設定される電圧等の値である。
　図７は、一般的な充電池（バッテリ１６）により触感呈示装置１の動作を行う場合に、当該充電池の残量が減少する様子の例を示す図である。触感呈示装置１の動作を継続することによりバッテリ１６の電力を消費するため、図７に示す曲線は徐々に減少している。図７においては、例として、バッテリの電圧が減少する様子を示している。ステップＳ４２におけるバッテリ１６の残量の「所定の閾値」は、ハプティック入力モードのままバッテリ１６の残量がこれ以上低下すると、近いうちに触感呈示装置１の動作が持続できなくなる電圧値などに基づいて予め設定する。例えば、図７に示す電圧の閾値ＶｔｈをステップＳ４２における「所定の閾値」とすることができる。なお、この「所定の閾値」は、ハプティック入力モードによって触感を呈示する動作を行わなければ（例えばタッチパネル入力モードであれば）、依然としてある程度の時間、触感呈示装置１の動作を持続できる電圧値などに基づいて設定するのが好適である。
　ステップＳ４２においてバッテリ１６の残量がまだ所定の閾値を満たしている場合、制御部１５は、入力モードの設定を「ハプティック入力モード」として（ステップＳ４３）、次の入力モード切換処理を実行する（ステップＳ４４）。
　図８は、図６のステップＳ４４に示した入力モード切換処理の詳細を説明するフローチャートである。図８に示す入力モード切換処理が開始すると、制御部１５は、以前のステップ（ステップＳ４３）において設定された入力モードが現在の入力モードと異なるか否かを判定する（ステップＳ５１）。もともとハプティック入力モードで動作していたところ、設定された入力モードがハプティック入力モードである場合は、入力モードを切り換える必要はないため、図８の処理を終了する（ステップＳ５１のＮｏ）。
　しかしながら、以前のステップ（ステップＳ４３）において設定された入力モードが現在の入力モードと異なる場合、制御部１５は、当該設定された入力モードがハプティック入力モードであるか否かを判定する（ステップＳ５２）。ここでは、ステップＳ４３においてハプティック入力モードに設定されたため、制御部１５は、押圧検出部１２および触感呈示部１３をアクティブ化する（ステップＳ５３）。さらに、制御部１５は、入力モードが「ハプティック入力モード」に切り換えられた旨を表示部１４に表示する（ステップＳ５４）。
　図８に示した入力モード切換処理（図６のステップＳ４４）が終了したら、制御部１５は、図６に示すステップＳ４５において、図４において説明したハプティック入力モードによる入力検出処理を行う。以上のような処理により、バッテリ１６の残量が所定の閾値以上残留している場合は、ハプティック入力モードによる操作入力検出処理が行われる。
　ステップＳ５４において「ハプティック入力モード」に切り換えられた旨を表示したら、すなわち図６のステップＳ４５の後は、本実施の形態によるバッテリ残量に応じた入力モードの設定処理が行われている間、制御部１５は、ステップＳ４１に戻って処理を続行する（ステップＳ４６）。本実施の形態において、このようなバッテリ残量に応じた入力モードの設定処理は、常に行われる設定にしてもよいし、あるいは、例えば「バランスモード」等として、操作者の選択により、バッテリ残量に応じた入力モードの設定処理が行われるようにすることもできる。本実施の形態においては、バッテリ残量に応じた入力モードの設定処理が行われている間は、図６にて説明した処理が続行されるように（ステップＳ４６）、当該処理が行われる時間を制御部１５が内蔵するタイマなどにより制御する。
　一方、ステップＳ４２においてバッテリ１６の残量が所定の閾値を満たさなくなったと判定された場合、制御部１５は、入力モードの設定を「タッチパネル入力モード」として（ステップＳ４７）、次の入力モード切換処理を実行する（ステップＳ４８）。
　ステップＳ４８においても、図８に示した入力モード切換処理を行う。図８に示す入力モード切換処理が開始すると、制御部１５は、以前のステップ（ステップＳ４７）において設定された入力モードが現在の入力モードと異なるか否かを判定する（ステップＳ５１）。もともとタッチパネル入力モードで動作していたところ、設定された入力モードがタッチパネル入力モードである場合は、入力モードを切り換える必要はないため、図８の処理を終了する（ステップＳ５１のＮｏ）。
　しかしながら、以前のステップ（ステップＳ４７）において設定された入力モードが現在の入力モードと異なる場合、制御部１５は、当該設定された入力モードがハプティック入力モードであるか否かを判定する（ステップＳ５２）。ここでは、ステップＳ４７においてタッチパネル入力モードに設定されたため、制御部１５は、押圧検出部１２および触感呈示部１３を非アクティブ化する（ステップＳ５５）。さらに、制御部１５は、入力モードが「タッチパネル入力モード」に切り換えられた旨を表示部１４に表示する（ステップＳ５６）。
　なお、ステップＳ５６における「タッチパネル入力モード」に切り換えられた旨の表示においては、さらに「バッテリの残量が僅少になったため、押圧の検出は行われず、触感も呈示されない」旨もあわせて表示すれば、操作者に誤解を招くことを回避できる。
　図８に示した入力モード切換処理（図６のステップＳ４８）が終了したら、制御部１５は、図６に示すステップＳ４９において、図３において説明したタッチパネル入力モードによる入力検出処理を行う。以上のような処理により、バッテリ１６の残量が所定の閾値ほど残留していない場合は、タッチパネル入力モードによる操作入力検出処理が行われる。
　このように、本実施の形態によれば、ハプテッィク入力モードで動作中に、バッテリ１６の残量が所定の閾値に満たなくなったとバッテリ情報取得部１７により判定された場合、ハプテッィク入力モードがタッチパネル入力モードに切り換えられる。また、本実施の形態による触感呈示装置１によれば、タッチパネル入力モードで動作中に、バッテリ１６が充電される等により残量が所定の閾値を満たしたとバッテリ情報取得部１７により判定された場合、タッチパネル入力モードがハプテッィク入力モードに切り換えられる。したがって、触感呈示装置１は、バッテリの残量が少なくなった状態から充電などによりバッテリが充分な残量を有するようになれば、再びリアルな触感を呈示する。
　以上説明したように、本発明によれば、バッテリの残量に応じて、タッチパネル入力モードと、ハプティック入力モードとが切り換えられる。したがって、本発明によれば、タッチセンサに対する操作入力を検出した際にリアルな触感を呈示することと、バッテリによる入力装置としての稼働時間とのバランスをとることができる。このため、操作者は、触感呈示装置を使用して操作入力を行っている最中にバッテリの残量が少なくなってきた場合、特に意識せずとも、入力装置としての機能を最大限に維持させることができる。また、操作者は、バッテリの残量が少なくなってきた場合には充電することにより、再び、タッチセンサに対する操作入力を検出した際にリアルな触感が呈示されるようにできる。
　なお、本発明は、上記実施の形態にのみ限定されるものではなく、幾多の変形または変更が可能である。例えば、上述した実施の形態においては、押圧検出部１２が検出する押圧に基づくデータが所定の基準を満たした際にクリック触感を呈示し、リリース触感については特に言及していない。しかしながら、クリック触感と同様に、押圧検出部１２が検出する押圧に基づくデータが所定の基準を満たさなくなった場合、リリース触感を呈示するようにもできる。また、これらのクリック触感とリリース触感とを異なる触感とすれば、実物の押しボタンスイッチに一層近い触感を呈示することができるが、これらのクリック触感とリリース触感とを同じ触感とすることもできる。
　また、例えば、上述した実施の形態においては、動作が行われる際に音声を発生させるか否かについては特に言及していない。しかしながら、上記各実施の形態による動作と共に、当該動作と連動する音声を適宜発生させるようにすれば、触感呈示装置の操作性をさらに向上させ、誤操作の発生を一層低減することができる。
　また、上述した各実施の形態において、触感呈示装置１は、接触の検出時（タッチパネル入力モード）に、または押圧に基づくデータが所定の基準を満たして触感を呈示した時（ハプティック入力モード）に、所定の処理を行う例について説明した。しかしながら、触感の呈示および／または所定の処理の実行は、接触の検出時または押圧に基づくデータが所定の基準を満たした際に行うのではなく、接触の解除の検出時または押圧に基づくデータが所定の基準を満たさなくなった際に行うようにしてもよい。
　さらに、上述した各実施の形態において、バッテリ情報取得部１７は、触感呈示装置１が稼働中は、（図６に示したループに従って）絶えずバッテリ１６の電圧値などを検出する態様について説明した。しかしながら、バッテリ情報取得部１７が、所定の期間ごとにバッテリ１６の電圧値などを検出することにより、バッテリ１６の残量に係る情報を取得するようにもできる。このようにすれば、触感呈示装置１の稼動時間をさらに長くすることが期待できる。
　また、上述した実施の形態における触感呈示部は、任意の個数の圧電振動子を用いて構成したり、タッチセンサの全面に透明圧電素子を設けて構成したり、触感を呈示する振動を表現できるのであれば、偏心モータを駆動信号の１周期で１回転させるようして構成したり、することもできる。
　また、本発明に係る触感呈示装置は、押圧検出部が検出する押圧に基づくデータが、触感を呈示する基準を満たした際に、触感呈示部を駆動させる。しかしながら、上記押圧検出部が検出する押圧に基づくデータが触感を呈示する基準を満たした際とは、押圧検出部が検出する押圧に基づくデータが触感を呈示する基準値に達した際であってもよいし、押圧検出部が検出する押圧に基づくデータが触感を呈示する基準値を超えた際でもよい。また、押圧検出部により、触感を呈示する基準値に対応する押圧に基づくデータが検出された際でもよい。
　上述した実施の形態においては、タッチセンサ１１を表示部１４の上面に重ねて配置した構成を想定して説明した。本発明による触感呈示装置は、このような構成にすることは必須ではなく、タッチセンサ１１と表示部１４とを離間した構成にすることもできる。しかしながら、タッチセンサ１１を表示部１４の上面に重ねて配置した構成とする方が、表示される画像と発生する振動との対応関係を、操作者に容易に認識させることができる。
　また、本実施の形態の説明における表示部１４およびタッチセンサ１１は、表示部とタッチセンサ（接触検出部）との両機能を共通の基板に持たせる等により、一体化した装置によって構成されるようにしてもよい。このように表示部と接触検出部との両機能を一体化した装置の構成の一例としては、液晶パネルが有するマトリクス状配列の画素電極群に、フォトダイオード等の複数の光電変換素子を規則的に混在させたものを挙げることができる。この装置は、液晶パネル構造によって画像を表示する一方で、パネル表面の所望位置をタッチ入力するペンの先端で液晶表示用のバックライトの光を反射し、この反射光を周辺の光電変換素子が受光することによって、タッチ位置を検出することができる。
１１　タッチセンサ
１１ａ　タッチ面
１２　押圧検出部
１３　触感呈示部
１４　表示部
１５　制御部
１６　バッテリ
１７　バッテリ情報取得部
２１　筐体
２２　インシュレータ
２３　アッパカバー
２４　インシュレータ
３１　歪みゲージセンサ
３２　圧電振動子
 
 

Claims (4)

  1. 　タッチセンサと、
    　前記タッチセンサのタッチ面に対する押圧を検出する押圧検出部と、
    　前記タッチ面を振動させる触感呈示部と、
    　バッテリの情報を取得するバッテリ情報取得部と、
    　前記タッチセンサが接触を検出すると所定の処理を実行する第１の入力モード、または、前記タッチセンサが接触を検出している状態で前記押圧検出部が検出する押圧に基づくデータが所定の基準を満たすと、前記タッチ面を押圧している押圧対象に対して触感を呈示するように前記触感呈示部を制御するとともに所定の処理を実行する第２の入力モード、を切換可能に制御する制御部と、を備え、
    　前記制御部は、前記バッテリ情報取得部が取得した前記バッテリの情報に基づいて、前記第１の入力モードと、前記第２の入力モードとを切り換えるように制御する、触感呈示装置。
  2. 　前記制御部は、前記第２の入力モードで動作中に、前記バッテリの残量が所定の閾値に満たなくなったと判定した場合、当該第２の入力モードを前記第１の入力モードに切り換えるように制御する、請求項１に記載の触感呈示装置。
  3. 　前記制御部は、前記第１の入力モードで動作中に、前記バッテリの残量が所定の閾値を満たしたと判定した場合、当該第１の入力モードを前記第２の入力モードに切り換えるように制御する、請求項１に記載の触感呈示装置。
  4. 　表示部をさらに備え、
    　前記制御部は、前記第１の入力モードと前記第２の入力モードとの切り換えが行われた旨を前記表示部に表示するように制御する、請求項１ないし３の何れか１項に記載の触感呈示装置。
     
PCT/JP2012/006155 2011-09-27 2012-09-26 触感呈示装置 WO2013046670A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US14/347,609 US9448629B2 (en) 2011-09-27 2012-09-26 Multi-mode tactile sensation providing device

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2011210895 2011-09-27
JP2011-210895 2011-09-27

Publications (1)

Publication Number Publication Date
WO2013046670A1 true WO2013046670A1 (ja) 2013-04-04

Family

ID=47994749

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2012/006155 WO2013046670A1 (ja) 2011-09-27 2012-09-26 触感呈示装置

Country Status (3)

Country Link
US (1) US9448629B2 (ja)
JP (1) JPWO2013046670A1 (ja)
WO (1) WO2013046670A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104866092A (zh) * 2014-02-21 2015-08-26 意美森公司 触觉功耗管理

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9411780B1 (en) * 2013-06-03 2016-08-09 Amazon Technologies, Inc. Employing device sensor data to determine user characteristics
JP6194716B2 (ja) * 2013-09-19 2017-09-13 株式会社デンソーウェーブ リモートコントローラー
EP3202623B1 (en) * 2014-10-03 2023-06-28 Kyocera Corporation Vehicle and steering unit
KR101618272B1 (ko) * 2014-11-25 2016-05-04 주식회사 이노칩테크놀로지 단말기 제어 장치 및 이를 이용한 제어 방법
US10180339B1 (en) * 2015-05-08 2019-01-15 Digimarc Corporation Sensing systems
CN104898946B (zh) * 2015-05-25 2018-08-31 联想(北京)有限公司 一种控制方法及电子设备
US10353503B2 (en) 2015-10-29 2019-07-16 Texas Instruments Incorporated Integrated force sensing element
JP6613170B2 (ja) * 2016-02-23 2019-11-27 京セラ株式会社 車両用コントロールユニット及びその制御方法
JP7020998B2 (ja) * 2018-05-22 2022-02-16 京セラ株式会社 測定装置及び測定装置の制御方法
US10656763B1 (en) * 2019-01-04 2020-05-19 Sensel, Inc. Dynamic adjustment of a click threshold corresponding to a force-based tactile sensor

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010258553A (ja) * 2009-04-22 2010-11-11 Nec Corp 携帯電話装置、電池消耗防止方法、電池消耗防止プログラムおよびプログラム記録媒体
JP2011048685A (ja) * 2009-08-27 2011-03-10 Kyocera Corp 入力装置
JP2011082623A (ja) * 2009-10-02 2011-04-21 Nec Corp 通信端末

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003288158A (ja) 2002-01-28 2003-10-10 Sony Corp タクタイル・フィードバック機能を持つ携帯型機器
US7584376B2 (en) * 2006-08-23 2009-09-01 Palm, Inc. Method and apparatus for power management
JP4968515B2 (ja) * 2006-11-15 2012-07-04 ソニー株式会社 基板支持振動構造、触覚機能付きの入力装置及び電子機器
JP2008130055A (ja) 2006-11-27 2008-06-05 Sony Corp タッチパネルディスプレイ装置および駆動方法並びに電子機器
JP4897596B2 (ja) * 2007-07-12 2012-03-14 ソニー株式会社 入力装置、記憶媒体、情報入力方法及び電子機器
JP5766398B2 (ja) * 2009-12-21 2015-08-19 京セラ株式会社 触感呈示装置
US9880622B2 (en) 2009-12-21 2018-01-30 Kyocera Corporation Tactile sensation providing apparatus and control method for tactile sensation providing apparatus when using an application that does not support operation of tactile sensation
JP5635274B2 (ja) 2010-01-27 2014-12-03 京セラ株式会社 触感呈示装置および触感呈示方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010258553A (ja) * 2009-04-22 2010-11-11 Nec Corp 携帯電話装置、電池消耗防止方法、電池消耗防止プログラムおよびプログラム記録媒体
JP2011048685A (ja) * 2009-08-27 2011-03-10 Kyocera Corp 入力装置
JP2011082623A (ja) * 2009-10-02 2011-04-21 Nec Corp 通信端末

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
SHITTE TOKU SURU: "INFOBAR A01", NO BATTERY SETSUYAKUJUTSU, 1 July 2011 (2011-07-01), Retrieved from the Internet <URL:http://andronavi.com/2011/07/101136> [retrieved on 20121012] *
TAKAYUKI HORIN ET AL.: "Dekiru Series Henshubu", DEKIRU POCKET + OPTIMUS BRIGHT, 1 July 2011 (2011-07-01), pages 182, 201 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104866092A (zh) * 2014-02-21 2015-08-26 意美森公司 触觉功耗管理
JP2015165391A (ja) * 2014-02-21 2015-09-17 イマージョン コーポレーションＩｍｍｅｒｓｉｏｎ Ｃｏｒｐｏｒａｔｉｏｎ ハプティック電力消費管理

Also Published As

Publication number Publication date
US20140232677A1 (en) 2014-08-21
US9448629B2 (en) 2016-09-20
JPWO2013046670A1 (ja) 2015-03-26

Similar Documents

Publication Publication Date Title
WO2013046670A1 (ja) 触感呈示装置
EP2600227B1 (en) Input device
US9952705B2 (en) Input apparatus
JP4672075B2 (ja) 入力装置
US8830187B2 (en) Input apparatus and control method of input apparatus
US8816969B2 (en) Input apparatus
US9904363B2 (en) Input apparatus for generating tactile sensations and control method of input apparatus
US9641173B2 (en) Input apparatus and control method for input apparatus
US11144150B2 (en) Tactile sensation providing apparatus
JP5539788B2 (ja) 触感呈示装置
US9880622B2 (en) Tactile sensation providing apparatus and control method for tactile sensation providing apparatus when using an application that does not support operation of tactile sensation
US11099648B2 (en) Tactile sensation providing apparatus
JP5398640B2 (ja) 触感呈示装置
JP5797385B2 (ja) 触感呈示装置
JP2011048833A (ja) 入力装置
JP2011095925A (ja) 入力装置
JP2011048854A (ja) 入力装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 12837511

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2013535918

Country of ref document: JP

Kind code of ref document: A

WWE Wipo information: entry into national phase

Ref document number: 14347609

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 12837511

Country of ref document: EP

Kind code of ref document: A1