CN112513802A - 触觉呈现装置以及触觉呈现方法 - Google Patents

触觉呈现装置以及触觉呈现方法 Download PDF

Info

Publication number
CN112513802A
CN112513802A CN201980051747.0A CN201980051747A CN112513802A CN 112513802 A CN112513802 A CN 112513802A CN 201980051747 A CN201980051747 A CN 201980051747A CN 112513802 A CN112513802 A CN 112513802A
Authority
CN
China
Prior art keywords
image
tactile sensation
trajectory
candidate
presentation device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201980051747.0A
Other languages
English (en)
Inventor
小野泰弘
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tokai Rika Co Ltd
Original Assignee
Tokai Rika Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tokai Rika Co Ltd filed Critical Tokai Rika Co Ltd
Publication of CN112513802A publication Critical patent/CN112513802A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/018—Input/output arrangements for oriental characters
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/023—Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
    • G06F3/0233—Character input methods
    • G06F3/0237—Character input methods using prediction or retrieval techniques
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G06F3/0418—Control or interface arrangements specially adapted for digitisers for error correction or compensation, e.g. based on parallax, calibration or alignment
    • G06F3/04186—Touch location disambiguation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/143—Touch sensitive instrument input devices
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10—Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/22—Display screens
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/25—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using haptic output

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Position Input By Displaying (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明的触觉呈现装置(1)的控制部(18)构成为，从显示于显示画面(100)的多个图像(101)中提取已被选择的选择图像(102)的随后有可能被选择的至少一个候选图像(103)，基于在操作面(120)进行的描摹操作在显示画面(100)上的轨迹(110)，从候选图像(103)预测随后被选择的随后选择图像(104)，即使轨迹(110)超过在选择图像(102)与随后选择图像(104)之间作为呈现触觉的触发的边界线(105)，也不呈现触觉，而在到达随后选择图像(104)时呈现触觉。

Description

触觉呈现装置以及触觉呈现方法
关联申请的交叉引用
本申请主张在2018年9月12日申请的日本专利申请2018-170533号的优先权，通过参照将日本专利申请2018-170533号的所有内容引用到本申请中。
技术领域
本发明涉及触觉呈现装置以及触觉呈现方法。
背景技术
公知有一种触摸面板装置，该触摸面板装置具备：使触摸面板振动的振动元件；检测触摸面板表面上的触摸位置的触摸位置检测部；以及以与触摸位置对应的振动频率或者振动间隔或者振动强度来使振动元件振动的振动控制部(例如，参照专利文献1。)。
对于该触摸面板装置而言，当从下向上描摹触摸面板表面时，振动根据触摸位置而逐渐变大，当从上向下描摹时，振动根据触摸位置而逐渐变小。
专利文献1：日本特开2006-79238号公报
对于专利文献1所公开的触摸面板装置而言，若迅速地描摹触摸面板表面，则振动以较短的间隔被呈现，有可能用户感到厌烦。
发明内容
本发明的目的在于提供能够抑制厌烦感的触觉呈现装置以及触觉呈现方法。
基于本发明的一个实施方式的触觉呈现装置具有：显示部，在显示画面显示多个图像；操作部，具有供触摸操作进行的操作面，上述触摸操作作为选择显示于上述显示部的上述多个图像的一个的操作；振动呈现部，根据上述触摸操作，使上述操作面振动来呈现触觉；以及控制部，从显示于上述显示画面的上述多个图像中提取在上述操作面中已被选择的选择图像的随后有可能被选择的至少一个候选图像，基于作为在上述操作面进行的上述触摸操作的描摹操作在上述显示画面上的轨迹，从上述候选图像预测随后被选择的随后选择图像，即使上述轨迹越过在上述选择图像与上述随后选择图像之间作为呈现触觉的触发的边界线，也不呈现基于上述振动呈现部的触觉，而在到达上述随后选择图像时呈现基于上述振动呈现部的触觉。
基于本发明的其他的实施方式的触觉呈现方法包括以下：从显示于显示画面的多个图像中提取已被选择的选择图像的随后有可能被选择的至少一个候选图像，基于在操作面进行的描摹操作在显示画面上的轨迹，从候选图像预测随后被选择的随后选择图像，即使轨迹越过在选择图像与随后选择图像之间作为呈现触觉的触发的边界线，也不呈现触觉，而在到达随后选择图像时呈现触觉。
根据本发明的一个实施方式以及其他的实施方式，能够提供抑制厌烦感的触觉呈现装置以及触觉呈现方法。
附图说明
图1A是表示配置有第一实施方式所涉及的触觉呈现装置的车辆内部的说明图。
图1B是表示第一实施方式所涉及的触觉呈现装置的框图。
图1C是表示第一实施方式所涉及的触觉呈现装置构成一部分的触觉呈现系统的框图。
图2A是表示第一实施方式所涉及的触觉呈现装置的显示部和触摸面板的说明图。
图2B是用于说明在第一实施方式所涉及的触觉呈现装置中作为呈现触觉的触发的边界线的说明图。
图3A是用于说明第一实施方式所涉及的触觉呈现装置的频度信息的说明图。
图3B是表示第一实施方式所涉及的触觉呈现装置的显示部所显示的五十音图的说明图。
图3C是在第一实施方式所涉及的触觉呈现装置的显示部所显示的五十音图中用于说明选择图像的说明图。
图4A是用于说明第一实施方式所涉及的触觉呈现装置的控制部预测的轨迹与随后选择图像的关系的说明图。
图4B是用于说明图4A的边界线的局部放大图。
图5是用于说明第一实施方式所涉及的触觉呈现装置的动作的流程图。
图6是用于说明第二实施方式所涉及的触觉呈现装置的动作的流程图。
具体实施方式
(实施方式的概要)
实施方式所涉及的触觉呈现装置具有控制部，该控制部从显示于显示画面的多个图像中提取已被选择的选择图像的随后有可能被选择的至少一个候选图像，基于在操作面进行的描摹操作在显示画面上的轨迹，从候选图像预测随后被选择的随后选择图像，即使轨迹越过在选择图像与随后选择图像之间作为呈现触觉的触发的边界线也不呈现触觉，而在到达随后选择图像时呈现触觉。
对于该触觉呈现装置而言，即使在选择图像与随后选择图像之间存在作为呈现触觉的触发的边界线也不呈现触觉，因此与每次轨迹超过边界线就呈现触觉的情况相比，不会连续地呈现触觉，能够抑制厌烦感。
[第一实施方式]
(触觉呈现装置1的概要)
以下对于本实施方式所涉及的触觉呈现装置1，参照各图并进行说明。此外，在以下所记载的实施方式所涉及的各图中，存在图形间的比例与实际的比例不同的情况。另外，在图1B以及图1C中，用箭头表示主要的信号、信息的流向。
触觉呈现装置1作为一个例子，如图1A所示，搭载于车辆8，但并不限定于此。该触觉呈现装置1例如如图1B所示，具有显示部10、触摸面板12、载荷传感器14、振动呈现部16以及控制部18。
该控制部18构成为，例如如图2A以及图2B所示，从显示于显示画面100的多个图像101中提取已被选择的选择图像102的随后有可能被选择的至少一个候选图像103，基于在操作面120进行的描摹操作在显示画面100上的轨迹110，从候选图像103预测随后被选择的随后选择图像104，即使轨迹110越过在选择图像102与随后选择图像104之间作为呈现触觉的触发的边界线105也不呈现触觉，而在到达随后选择图像104时呈现触觉。
轨迹例如如图2A所示，被认为是在操作面120上描摹的操作手指9的轨迹、在触摸面板12检测出的操作手指9的检测点121的轨迹122(实线)、以及使该轨迹122与显示画面100适应的轨迹110(虚线)。触觉的呈现例如作为对显示画面100中所显示的图像101的操作的反馈来进行。因此，所谓轨迹主要表示轨迹110。
另外，图像101是显示于显示画面100的图像。选择图像102是通过操作手指9进行按压操作的图像。候选图像103是选择图像102的随后有可能被选择的图像。而且，随后选择图像104是被预测为基于操作手指9的轨迹110而被选择的图像。
边界线105是被确定为当轨迹110交叉时作为呈现触觉的触发的线。例如，如图2B所示，每当轨迹110与边界线105交叉时，控制部18呈现触觉。该边界线105是划分区域的线、确定图像101的外形的线、为了在轨迹110即将到达图像101之前呈现触觉而设置的包围图像101的线等。
此外，例如，如图2A以及图2B所示，本实施方式的控制部18构成为，即使在从选择图像102到随后选择图像104之间存在边界线105、图像101，轨迹110交叉的情况下，也不呈现触觉。
触觉呈现装置1的显示部10以及触摸面板12例如作为搭载于车辆8的电子设备的显示部以及操作输入部发挥功能。因此，触觉呈现装置1例如如图1C所示，构成车辆8的触觉呈现系统85的一部分。该触觉呈现系统85作为一个例子，具有触觉呈现装置1、车辆LAN(Local Area Network：局域网)86、车载装置87、车辆控制部88。
车辆LAN86例如是能够通过有线、无线相互交换信号、信息等的CAN(ControllerArea Network：控制器域网)、LIN(Local Interconnect Network：内部互联网)、以及CXPI(Clock Extension Peripheral Interface：时钟扩展外围接口)等车辆用网络。
车载装置87例如是导航装置、空调装置、音乐以及视频播放装置等。触觉呈现装置1例如基于从车载装置87输出的显示图像信息S5将车载装置87所要求的图像显示在显示画面100上。另外，触觉呈现装置1例如基于触摸面板12所接受的输入操作而生成输入操作信息S6并向车载装置87输出。
车辆控制部88例如是由根据所存储的程序，对所获取的数据进行运算、加工等的CPU(Central Processing Unit：中央处理器)、作为半导体存储器的RAM(Random AccessMemory：随机存取存储器)以及ROM(Read Only Memory：只读存储器)等构成的微型计算机。该车辆控制部88例如综合地控制车辆LAN86等。
(显示部10的结构)
显示部10例如如图1A所示配置于车辆8的中控台80。该显示部10例如是液晶监视器。显示部10例如基于从控制部18输出的显示控制信号S1在显示画面100上显示图像。控制部18例如基于从车载装置87获取的显示图像信息S5、以及经由触摸面板12进行的操作等生成显示控制信号S1。
(触摸面板12的结构)
触摸面板12例如如图2A所示，与显示部10重叠。也就是说，用户能够以直接触摸显示部10的显示画面100进行操作的感觉来操作触摸面板12。
此外，作为变形例，触觉呈现装置1例如如图1A所示，也可以构成为代替触摸面板12或者并用，通过配置于与显示部10分离的场所的触摸板82进行输入操作。该触摸板82例如是静电电容方式的触摸板，配置于位于驾驶座与副驾驶座之间的地板操控座81。
触摸面板12检测例如用户的身体的一部分(例如，操作手指)、专用笔触碰的操作面120上的位置。用户例如在操作面120上进行操作，从而能够进行对于车载装置87的输入操作。作为触摸面板12，例如，能够使用电阻膜方式、红外线方式、静电电容方式等的触摸面板。本实施方式的触摸面板12作为一个例子是静电电容方式的触摸面板。
触摸面板12例如具有在操作面120的下方保持绝缘的同时交叉的多个驱动电极和多个检测电极。该驱动电极以及检测电极是使用ITO(掺锡氧化铟：Indium Tin Oxide)等的透明电极。
触摸面板12扫描该多个驱动电极和多个检测电极的全部组合，读出每个组合的静电电容，作为静电电容信息S2向控制部18输出。
控制部18基于静电电容信息S2和触摸阈值200，根据触摸阈值200以上的静电电容来计算检测出检测对象的检测点121。该检测点121的计算例如使用加权平均来进行。
(载荷传感器14的结构)
载荷传感器14例如配置于显示部10或者触摸面板12的背面侧，在用户进行操作时，检测附加到触摸面板12的载荷。此外，载荷传感器14例如也可以形成为片状，配置于显示部10与触摸面板12之间。该载荷传感器14例如是使用压电体、电阻膜等的传感器。本实施方式的载荷传感器14由具有电阻膜的应变仪构成。
载荷传感器14例如将作为检测出的载荷的信息的载荷信息S3向控制部18输出。在基于载荷信息S3的载荷成为载荷阈值201以上的情况下，控制部18判定为进行操作面120被按下、即按压操作。
(振动呈现部16的结构)
振动呈现部16例如是具备金属板和压电体的单压电晶片型的压电致动器。该单压电晶片型压电致动器是仅由一个压电体弯曲的构造的致动器。此外，作为振动呈现部16的变形例，也可以是将两个压电体设置于金属板的两面的双压电晶片型压电致动器。
振动呈现部16例如基于控制部18所输出的驱动信号S4反复伸缩和伸长，使操作面120振动并向用户呈现触觉。该触觉例如是相对于按压操作按下开关的触觉。另外，跨过边界线105时呈现的触觉、以及表示通过描摹操作进入显示有检测点121的图像内的触觉例如是至少使操作面120振动一次的触觉。
(控制部18的结构)
控制部18例如是由根据所存储的程序，对所获取的数据进行运算、加工等的CPU、作为半导体存储器的RAM以及ROM等构成的微型计算机。在该ROM中例如储存有用于使控制部18动作的程序。RAM例如用作暂时储存运算结果等的存储区域。另外，控制部6例如在RAM、ROM中具有触摸阈值200、载荷阈值201以及频度信息202。
触摸阈值200是用于判定触摸面板12是否检测出检测对象的阈值。控制部18在从触摸面板12获取的静电电容信息S2的静电电容为触摸阈值200以上的情况下，作为检测出检测对象而计算检测点121。另外，控制部18在所计算出的检测点121连续地移动的情况下，判定为进行描摹操作。
载荷阈值201是用于判定是否进行了按压操作的阈值。控制部18在计算出检测点121并且所检测出的载荷为载荷阈值201以上的情况下，判定为进行了按压操作。
此外，控制部18还可以具有针对用于检测检测对象的接触的载荷的阈值。该情况下，控制部18在检测出触摸阈值200以上的静电电容并且检测出相对于该载荷的阈值以上的载荷的情况下，判定为检测对象与操作面120接触。
频度信息202是将选择图像102随后被选择的图像的历史与频度建立关联的信息。该频度信息202例如由控制部18生成但并不局限于此，也可以为控制部18获取由在显示部10上显示图像的车载装置87等外部装置生成的信息。
·关于随后选择图像104的预测
控制部18构成为基于选择图像102随后被选择的频度或者历史而提取候选图像103。本实施方式的控制部18如上述那样，根据基于频度信息202的频度而提取候选图像103。此外，作为变形例，控制部18也可以构成为具有历史信息，基于随后被选择的历史提取候选图像103。
另外，控制部18构成为基于轨迹110的方向，从候选图像103预测随后选择图像104。
图2A表示作为一个例子，在选择了图像(选择图像102)之后，使操作手指9朝向作为下一个选择对象的图像(随后选择图像104)移动的情况。
控制部18例如如图2A所示，若相对于图像(选择图像102)进行按压操作，则基于频度信息202而提取随后被选择的候选图像103。
在图2A中，提取四个候选图像103和随后选择图像104。该四个候选图像103和随后选择图像104是在图2A所示的显示画面100上显示的八个图像中在过去选择图像102随后被选择的图像。
为了从所提取的候选图像103中预测随后被选择的图像，控制部18预测描摹操作的方向。在图2A中用虚线表示的轨迹110是将所计算出的多个检测点121相连的轨迹。因此，控制部18例如基于进行按压操作的检测点121、按压操作以后所计算的检测点121来预测描摹操作的方向。
此外，轨迹110的方向例如可以使用连续的检测点121进行预测，也可以使用跳越的检测点121进行预测，也可以使用进行了按压操作并经过了预先规定的时间后的多个检测点121进行预测，也可以根据预测后的多个方向的平均等来预测方向，并不限定于此。在本实施方式中，使用进行了按压操作并经过了预先规定的时间后的多个检测点121进行预测。
在图2A中，在轨迹110的通过点存在图像101。该图像101例如既不是候选图像103也不是随后选择图像104，而是在选择图像102之后没有被选择过的图像。
在没有选择任何图像的情况下，若轨迹110到达位于描摹操作的中途的图像，则控制部18向用户呈现触觉，以通知图像的存在。
但是，控制部18在对选择图像102进行了按压操作后的描摹操作中，在通过图像101时不呈现触觉，在到达随后选择图像104时呈现触觉。
例如，如图2B所示，即使在选择图像102与随后选择图像104之间存在多个作为呈现触觉的触发的边界线105，这也是同样的。
在这里，控制部18例如在轨迹110偏离随后选择图像104时，在候选图像103位于偏离的方向的情况下，将该候选图像103设为随后选择图像104，在偏离的方向不存在候选图像103的情况下，在通常的条件下呈现触觉。该通常的条件例如是在轨迹110超过边界线105的情况下呈现触觉这样的条件。
控制部18例如在基于周期性地计算出的检测点121而周期性地计算轨迹110，该轨迹110的延长线不与随后选择图像104交叉的情况下，判定为轨迹110偏离随后选择图像104，但也可以通过其他的方法进行判定。
下面，参照图3A～图4B对输入字符串的情况进行说明。
图3B以及图3C表示作为一个例子，针对作为导航装置的车载装置87，用户输入目的地的名称的情况。该输入的显示画面100由“あ”～“ん”的五十音图101等构成。此外，图3B等中的被粗实线的框包围的图像表示选择图像102。另外，被粗虚线的框包围的图像表示候选图像103。
若用户对“ふ”的图像101进行按压操作，则控制部18基于频度信息202提取接着“ふ”输入的字符串。
作为一个例子，如图3A～图3C所示，在该提取的字符串是“ふなばし”(频度40％)、“ふくしま”(频度30％)、“ふちゅう”(频度20％)、以及“ふらの”(频度10％)的情况下，有可能接着“ふ”的选择图像102被选择的图像101是“な”、“く”、“ち”以及“ら”，该图像101成为候选图像103。此外，在选择“ふ”、“な”的情况下，接着“ふな”被选择的图像101基于频度信息202而成为候选图像103。
接下来，控制部18根据触摸面板12所检测到的检测点121的移动来预测轨迹110的方向。在图4A中，通过箭头表示根据检测点121的移动预测到的轨迹110的方向的一个例子。
在候选图像103存在于所预测的轨迹110的方向、即轨迹110的延长上的情况下，控制部18将该候选图像103设为随后选择图像104。在图4A中，将“く”设为随后选择图像104。
而且，即使轨迹110超过存在于选择图像102与随后选择图像104之间的边界线105，也就是说操作手指9通过描摹操作而通过，控制部18也不呈现触觉。在图4B中，作为一个例子，示出“ぬ”、“つ”以及“せ”的图像101的边界线105。即使描摹操作的轨迹110超过该边界线105，控制部18也不呈现触觉。
而且，若轨迹110超过“す”和作为随后选择图像104的“く”的边界线105a，则控制部18呈现触觉。此外，控制部18在对随后选择图像104进行了按压操作时也呈现触觉。
在这里，例如，在位于所预测的轨迹110的方向的“ぬ”、“つ”、“す”、“う”等是候选图像103的情况下，控制部18可以将其中频度最高的候选图像103作为随后选择图像104呈现触觉，也可以将这些候选图像103作为随后选择图像104呈现触觉。
在以下，参照图5的流程图对本实施方式的触觉呈现装置1的动作的一个例子进行说明。
(动作)
控制部18在步骤1的“是”成立、即基于从触摸面板12获取的静电电容信息S2和触摸阈值200而检测出操作手指的接触并且基于从载荷传感器14获取的载荷信息S3和载荷阈值201而检测出按压操作的情况下(步骤1：是)，基于进行了按压操作的图像(选择图像102)和频度信息202来提取候选图像103(步骤2)。
接下来，控制部18根据检测点121的移动来预测描摹操作的轨迹110，基于所预测的描摹操作的轨迹110的方向从候选图像103预测随后选择图像104(步骤3)。
接下来，控制部18停止触觉的呈现，直到基于描摹操作的轨迹110到达随后选择图像104(步骤4)。
接下来，控制部18在轨迹110到达随后选择图像104、即轨迹110超过随后选择图像104的边界线105a的情况下(步骤5：是)，将驱动信号S4输出到振动呈现部16并呈现触觉(步骤6)。
在这里，在步骤5中，控制部18在轨迹110偏离而没有到达随后选择图像104的情况下(步骤5：否)，从确定为轨迹110偏离的时刻开始每当超过边界线105时呈现触觉(步骤7)。
(第一实施方式的效果)
本实施方式所涉及的触觉呈现装置1能够抑制厌烦感。具体而言，触觉呈现装置1即使在选择图像102与随后选择图像104之间存在作为呈现触觉的触发的边界线105、图像101也不呈现触觉，因此与在每次轨迹超过边界线等就呈现触觉的情况相比，不会连续地呈现触觉，能够抑制厌烦感。特别是在用户迅速地进行描摹操作的情况下，触觉呈现装置1抑制以较短的间隔呈现触觉，因此能够进一步抑制厌烦感。
触觉呈现装置1仅在到达预测为用户进行操作的随后选择图像104时，才呈现触觉作为基于振动的反馈，因此与不采用该结构的情况相比，能够抑制厌烦感从而提高操作性。
触觉呈现装置1根据频度来提取候选图像103，并且基于轨迹110的方向从候选图像103预测随后选择图像104，因此与不采用该结构的情况相比，能够预测之后被操作的可能性高的随后选择图像104。
[第二实施方式]
第二实施方式与第一实施方式不同的点在于选择并提取频度高的候选图像。
此外，在以下所记载的实施方式中，具有与第一实施方式相同的功能以及结构的部分标注与第一实施方式相同的附图标记，省略其说明。
本实施方式的控制部18构成为提取选择图像102随后被选择的频度高的候选图像103。控制部18提取从最高位到预先规定的位次的具有高频度的候选图像103。
作为一个例子，控制部18提取频度高的从第1位到第5位作为候选图像103，在预测的轨迹110的方向没有从第1位到第5位的候选图像103、即没有随后选择图像104的情况下，重新提取从第6位以下到任意位次的频度的图像作为候选图像103。
此外，控制部18可以反复提取候选图像103直到存在随后选择图像104，也可以预先规定提取的次数、所提取的候选图像103的总数。在候选图像103中不存在随后选择图像104的情况下，每当轨迹110超过边界线105时，控制部18就呈现触觉。
在以下，根据图6的流程图对本实施方式的触觉呈现装置1的动作进行说明。
(动作)
控制部18在步骤10的“是”成立、即基于从触摸面板12获取的静电电容信息S2和触摸阈值200而检测到操作手指的接触并且基于从载荷传感器14获取的载荷信息S3和载荷阈值201而检测到按压操作的情况下(步骤10：是)，基于进行了按压操作的图像(选择图像102)和频度信息202来提取候选图像103(步骤11)。作为一个例子，控制部18提取频度高的前5个的候选图像103。
接下来，控制部18根据检测点121的移动来预测描摹操作的轨迹110，基于所预测的描摹操作的轨迹110的方向从候选图像103预测随后选择图像104(步骤12)。
接下来，控制部18在预测的结果不存在相应的随后选择图像104的情况下(步骤13：是)，进一步基于下位的频度来提取候选图像103(步骤14)。
接下来，控制部18在能够提取候选图像103的情况下(步骤15：是)，在步骤12进行处理。作为一个例子，如上述那样，控制部18预先规定提取的次数、候选图像103的数量，在超过该条件的情况下，判定为无法提取。
在这里，在步骤13中，控制部18在存在随后选择图像104的情况下(步骤13)，在图5的步骤4中进行处理。
另外，在步骤15中，控制部18在无法进行候选图像103的提取的情况下(步骤15：否)，在通常的条件下呈现触觉(步骤16)。该通常的条件例如如上述那样是在轨迹110超过边界线105的情况下呈现触觉的条件。
(第二实施方式的效果)
本实施方式的触觉呈现装置1以频度高的候选图像103为对象来预测随后选择图像104，因此与将至今为止所选择的全部图像作为对象的情况相比，缩短了预测随后选择图像104的时间。
在这里，其他的实施方式作为执行触觉呈现方法的程序、记录该程序的计算机中可读取的记录介质被提供，触觉呈现方法包括：从显示于显示画面的多个图像之中提取已被选择的选择图像的随后有可能被选择的至少一个候选图像，基于在操作面进行的描摹操作在显示画面上的轨迹从候选图像预测随后被选择的随后选择图像，即使轨迹超过在选择图像与随后选择图像之间作为呈现触觉的触发的边界线也不呈现触觉，而在到达随后选择图像时呈现触觉。
根据以上所述的至少一个实施方式的触觉呈现装置1，能够抑制厌烦感。
上述的实施方式以及变形例所涉及的触觉呈现装置1例如根据用途，其一部分也可以通过计算机所执行的程序、ASIC(Application Specific Integrated Circuit：特定用途集成电路)以及FPGA(Field Programmable Gate Array：现场可编程逻辑门阵列)等来实现。
以上，对本发明的几个实施方式以及变形例进行了说明，但这些实施方式以及变形例只不过是一个例子，并不限定权利要求书所涉及的发明。这些新的实施方式以及变形例能够以其他的各种方式来实施，能够在不脱离本发明的主旨的范围内，进行各种省略、置换、变更等。另外，这些实施方式以及变形例中所说明的特征的组合的全部不一定是用于解决发明的课题的方法所必需的。并且，这些实施方式以及变形例包含于发明的范围以及主旨，并且包含于权利要求书所记载的发明和其等同的范围。
附图标记说明
1…触觉呈现装置；6…控制部；10…显示部；12…触摸面板；16…振动呈现部；18…控制部；100…显示画面；101…图像；102…选择图像；103…候选图像；104…随后选择图像；105…边界线；105a…边界线；110…轨迹；120…操作面。

Claims (10)

1.一种触觉呈现装置，其特征在于，具备：
显示部，在显示画面中显示多个图像；
操作部，具有供触摸操作进行的操作面，所述触摸操作为选择显示于所述显示部的所述多个图像的一个的操作；
振动呈现部，根据所述触摸操作，使所述操作面振动从而呈现触觉；以及
控制部，从显示于所述显示画面的所述多个图像之中提取在所述操作面中已被选择的选择图像的随后有可能被选择的至少一个候选图像，基于作为在所述操作面进行的所述触摸操作的描摹操作在所述显示画面上的轨迹，从所述候选图像预测随后被选择的随后选择图像，即使所述轨迹超过在所述选择图像与所述随后选择图像之间作为呈现触觉的触发的边界线，也不呈现基于所述振动呈现部的触觉，而在到达所述随后选择图像时呈现基于所述振动呈现部的触觉。
2.根据权利要求1所述的触觉呈现装置，其特征在于，
所述控制部基于所述选择图像的随后被选择的频度或者历史来提取所述候选图像。
3.根据权利要求1所述的触觉呈现装置，其特征在于，
所述控制部提取所述选择图像的随后被选择的频度高的所述候选图像。
4.根据权利要求1所述的触觉呈现装置，其特征在于，
所述控制部提取所述选择图像的随后被选择的频度处于从最高位至预先规定的位次之间的所述候选图像。
5.根据权利要求1～4中任一项所述的触觉呈现装置，其特征在于，
所述控制部基于所述轨迹的方向从所述候选图像预测所述随后选择图像。
6.根据权利要求1～4中任一项所述的触觉呈现装置，其特征在于，
在所述轨迹的方向偏离所述随后选择图像时，在所述候选图像位于偏离的方向的情况下，所述控制部将该候选图像设为所述随后选择图像。
7.根据权利要求1～4中任一项所述的触觉呈现装置，其特征在于，
在所述轨迹的方向偏离所述随后选择图像时，在偏离的方向上没有所述候选图像的情况下，在所述轨迹超过所述边界线的情况下，所述控制部使所述振动呈现部提示触觉。
8.根据权利要求5～7中任一项所述的触觉呈现装置，其特征在于，
所述控制部检测自所述选择图像的选择起经过了预先规定的时间之后的所述操作部中的多个触摸位置，来预测所述轨迹的方向。
9.根据权利要求1～8中任一项所述的触觉呈现装置，其特征在于，
所述操作部是与所述显示部重叠的触摸面板。
10.一种触觉呈现方法，其特征在于，
从显示于显示画面的多个图像之中提取已被选择的选择图像的随后有可能被选择的至少一个候选图像，
基于在操作面进行的描摹操作在所述显示画面上的轨迹，从所述候选图像预测随后被选择的随后选择图像，
即使所述轨迹超过在所述选择图像与所述随后选择图像之间作为呈现触觉的触发的边界线，也不呈现触觉，而在到达所述随后选择图像时呈现触觉。
CN201980051747.0A 2018-09-12 2019-08-20 触觉呈现装置以及触觉呈现方法 Pending CN112513802A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2018-170533 2018-09-12
JP2018170533A JP2020042625A (ja) 2018-09-12 2018-09-12 触覚呈示装置及び触覚呈示方法
PCT/JP2019/032481 WO2020054332A1 (ja) 2018-09-12 2019-08-20 触覚呈示装置及び触覚呈示方法

Publications (1)

Publication Number Publication Date
CN112513802A true CN112513802A (zh) 2021-03-16

Family

ID=69777815

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201980051747.0A Pending CN112513802A (zh) 2018-09-12 2019-08-20 触觉呈现装置以及触觉呈现方法

Country Status (5)

Country Link
US (1) US11327569B2 (zh)
JP (1) JP2020042625A (zh)
CN (1) CN112513802A (zh)
DE (1) DE112019004555T5 (zh)
WO (1) WO2020054332A1 (zh)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120256858A1 (en) * 2011-04-07 2012-10-11 Kyocera Corporation Character input device, character-input control method, and storage medium storing character input program
CN103460164A (zh) * 2012-02-03 2013-12-18 松下电器产业株式会社 触觉提示装置以及触觉提示装置的驱动方法、驱动程序
CN103620541A (zh) * 2011-07-11 2014-03-05 Kddi株式会社 能够在多个模式下进行通过手指触摸的输入的用户界面装置、输入操作判断方法和程序
US20140176455A1 (en) * 2012-12-26 2014-06-26 Panasonic Corporation Touch panel device and method of controlling a touch panel device
US20140237356A1 (en) * 2013-01-21 2014-08-21 Keypoint Technologies (Uk) Limited Text input method and device
CN104636049A (zh) * 2011-02-10 2015-05-20 夏普株式会社 显示装置、其操作方法以及控制装置
US20170168681A1 (en) * 2015-12-15 2017-06-15 ID2me A/S Drag and release navigation

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006079238A (ja) 2004-09-08 2006-03-23 Alpine Electronics Inc タッチパネル装置
JP4416644B2 (ja) * 2004-12-28 2010-02-17 マイクロソフト コーポレーション 予測機能付き文字処理装置、方法、記録媒体およびプログラム
JP2008276459A (ja) * 2007-04-27 2008-11-13 Sanyo Electric Co Ltd 入力文字列予測装置、入力文字列予測プログラムおよび電子カルテシステム
US9417695B2 (en) * 2010-04-08 2016-08-16 Blackberry Limited Tactile feedback method and apparatus
GB201200643D0 (en) 2012-01-16 2012-02-29 Touchtype Ltd System and method for inputting text
JP2012198863A (ja) * 2011-03-23 2012-10-18 Ntt Docomo Inc 情報通信端末、通信システム及び予測変換表示方法
JP5826755B2 (ja) * 2011-03-29 2015-12-02 パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ 文字入力予測装置、方法、及び文字入力システム
JP5352619B2 (ja) * 2011-04-13 2013-11-27 株式会社日本自動車部品総合研究所 操作入力装置
CN104007832B (zh) * 2013-02-25 2017-09-01 上海触乐信息科技有限公司 连续滑行输入文本的方法、系统及设备
JP6483379B2 (ja) * 2014-09-10 2019-03-13 三菱電機株式会社 触感制御システムおよび触感制御方法
US10437359B1 (en) * 2017-02-28 2019-10-08 Apple Inc. Stylus with external magnetic influence

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104636049A (zh) * 2011-02-10 2015-05-20 夏普株式会社 显示装置、其操作方法以及控制装置
US20120256858A1 (en) * 2011-04-07 2012-10-11 Kyocera Corporation Character input device, character-input control method, and storage medium storing character input program
CN103620541A (zh) * 2011-07-11 2014-03-05 Kddi株式会社 能够在多个模式下进行通过手指触摸的输入的用户界面装置、输入操作判断方法和程序
CN103460164A (zh) * 2012-02-03 2013-12-18 松下电器产业株式会社 触觉提示装置以及触觉提示装置的驱动方法、驱动程序
US20140176455A1 (en) * 2012-12-26 2014-06-26 Panasonic Corporation Touch panel device and method of controlling a touch panel device
US20140237356A1 (en) * 2013-01-21 2014-08-21 Keypoint Technologies (Uk) Limited Text input method and device
US20170168681A1 (en) * 2015-12-15 2017-06-15 ID2me A/S Drag and release navigation

Also Published As

Publication number Publication date
US11327569B2 (en) 2022-05-10
DE112019004555T5 (de) 2021-07-01
US20210342005A1 (en) 2021-11-04
JP2020042625A (ja) 2020-03-19
WO2020054332A1 (ja) 2020-03-19

Similar Documents

Publication Publication Date Title
JP5352619B2 (ja) 操作入力装置
US9696805B2 (en) Electronic device
JP4876982B2 (ja) 表示装置および携帯情報機器
US9983672B2 (en) Electrostatic haptic actuator and user interface with an electrostatic haptic actuator
US9201503B2 (en) User interface device, image forming apparatus, user interface control method, and computer program product
JPWO2007007682A1 (ja) タッチパネル表示装置および携帯機器
US20180335851A1 (en) Input device, display device, method of controlling input device, and program
JP4924164B2 (ja) タッチ式入力装置
JP5220898B2 (ja) 押圧によるスクロール制御が可能なユーザインタフェース装置、画像スクロール方法及びプログラム
US10558310B2 (en) Onboard operation apparatus
JP2017130021A (ja) 触覚呈示装置
JP2011090422A (ja) 入力処理装置
JP2008186279A (ja) 遠隔操作式入力装置
JP6120898B2 (ja) 電子機器および電子機器の制御方法
WO2017145746A1 (ja) 車両用コントロールユニット
JP2013196464A (ja) 押圧力最大値によるスクロール制御が可能なユーザインタフェース装置、画像スクロール方法及びプログラム
CN112513802A (zh) 触觉呈现装置以及触觉呈现方法
JP6137714B2 (ja) 押圧の度合いに応じて異なる触覚応答を付与可能なユーザインタフェース装置、触覚応答付与方法及びプログラム
JP6770718B2 (ja) 触覚呈示装置
JP2014102658A (ja) 操作支援システム、操作支援方法及びコンピュータプログラム
US20100164861A1 (en) Image system capable of switching programs corresponding to a plurality of frames projected from a multiple view display and method thereof
EP3179348B1 (en) Touch device providing tactile feedback
JP2017199200A (ja) タッチ操作デバイス
JP5148547B2 (ja) キーボードからジェスチャ入力が可能なコンピュータ
JP2017049689A (ja) 入力装置、表示装置、入力装置の制御方法およびプログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination