CN109240633B - 显示装置以及信息终端操作方法 - Google Patents

显示装置以及信息终端操作方法 Download PDF

Info

Publication number
CN109240633B
CN109240633B CN201811110778.2A CN201811110778A CN109240633B CN 109240633 B CN109240633 B CN 109240633B CN 201811110778 A CN201811110778 A CN 201811110778A CN 109240633 B CN109240633 B CN 109240633B
Authority
CN
China
Prior art keywords
information
touch
information terminal
display device
touch operation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201811110778.2A
Other languages
English (en)
Other versions
CN109240633A (zh
Inventor
奈良宪和
佐野克己
松本佑介
松雪克哉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Faurecia Clarion Electronics Co Ltd
Original Assignee
Clarion Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Clarion Co Ltd filed Critical Clarion Co Ltd
Publication of CN109240633A publication Critical patent/CN109240633A/zh
Application granted granted Critical
Publication of CN109240633B publication Critical patent/CN109240633B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416Control or interface arrangements specially adapted for digitisers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/002Specific input/output arrangements not covered by G06F3/01 - G06F3/16
    • G06F3/005Input arrangements through a video camera
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/023Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
    • G06F3/0231Cordless keyboards
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03547Touch pads, in which fingers can move on a surface
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/038Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/038Indexing scheme relating to G06F3/038
    • G06F2203/0381Multimodal input, i.e. interface arrangements enabling the user to issue commands by simultaneous use of input devices of different nature, e.g. voice plus gesture on digitizer
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/038Indexing scheme relating to G06F3/038
    • G06F2203/0383Remote input, i.e. interface arrangements in which the signals generated by a pointing device are transmitted to a PC at a remote location, e.g. to a PC in a LAN
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/038Indexing scheme relating to G06F3/038
    • G06F2203/0384Wireless input, i.e. hardware and software details of wireless interface arrangements for pointing devices

Abstract

与信息终端连接显示装置具备:图像接收部,其从信息终端接收包含光标的画面的图像信息;触摸面板,其根据由图像接收部接收到的图像信息显示画面,并检测通过触摸操作指定的触摸位置;以及发送部,其将与触摸操作对应的操作信息发送给信息终端。在连续进行了触摸操作的情况下,发送部延迟发送操作信息。

Description

显示装置以及信息终端操作方法
本申请为2014年3月4日递交的、申请号为201480014777.1、发明名称为“显示装置”的专利申请的分案申请。
技术领域
本发明涉及一种显示装置。
背景技术
以前,已知以下的技术,将与便携电话的各操作键对应的多个触摸开关与便携电话的显示画面一起显示在车载装置的显示器上,如果操作了任意一个触摸开关,则从车载装置向便携电话供给与该触摸开关对应的操作键的操作命令,由此能够操作便携电话(参照专利文献1)。
现有技术文献
专利文献
专利文献1:日本特开2003-244343号公报
发明内容
发明要解决的问题
近年来,除了使用操作键进行操作的现有的便携电话以外,还广泛利用了通过使用触摸屏而能够进行直观的操作的智能手机。在这样的智能手机的情况下,无法利用专利文献1的现有技术实现从车载装置的操作。在这样的现有技术中,并没有提出在通过显示装置显示了智能手机那样的应用了触摸屏操作的信息终端的显示画面时,用于从显示装置操作信息终端的技术。
用于解决课题的手段
根据本发明的第1方式,与信息终端连接显示装置具备:图像接收部,其从信息终端接收包含光标的画面的图像信息;触摸面板,其根据图像接收部接收到的图像信息显示画面,并检测通过触摸操作指定的触摸位置;以及发送部,其向信息终端发送与触摸操作对应的操作信息。在连续进行了触摸操作的情况下,发送部延迟发送操作信息。
根据本发明的第2方式,在第1方式的显示装置中,优选的是,发送部在通过触摸操作指定了触摸位置时,发送用于使光标从预定的基准位置移动至触摸位置的第1操作信息,在发送第1操作信息后解除了触摸位置的指定时,发送用于使光标从触摸位置返回到基准位置的第2操作信息,在发送第2操作信息后,当在预定的间隔时间以内进行了下次的触摸操作时,延迟发送下次的第1操作信息。
根据本发明的第3方式,在第2方式的显示装置中,优选的是,操作信息包含用于表示光标的移动量的移动量信息,发送部发送与从基准位置到触摸位置的距离对应的移动量信息作为第1操作信息,并发送与基准位置对应的预定的移动量信息作为第2操作信息。
根据本发明的第4方式,在第2或3方式的显示装置中,优选的是,发送部在通过触摸操作指定了触摸位置时,在发送第1操作信息后,发送用于表示预定的按钮操作的第3操作信息,在发送第3操作信息后解除了触摸位置的指定时,在发送表示按钮操作的解除的第4操作信息后,发送第2操作信息。
根据本发明的第5方式,在第4方式的显示装置中,优选的是,发送部在第3操作信息和第4操作信息中,使光标的移动量为0。
根据本发明的第6方式,在第2或3方式的显示装置中,优选的是,发送部在触摸操作中移动触摸位置时,在发送第1操作信息后,发送包含用于表示预定的按钮操作的按钮操作信息和与触摸位置的移动量对应的移动量信息的操作信息。
根据本发明的第7方式,在第4或5方式的显示装置中,发送部在触摸操作中移动触摸位置时,可以在发送第1操作信息和第3操作信息后,发送包含用于表示按钮操作的按钮操作信息和与触摸位置的移动量对应的移动量信息的操作信息。
根据本发明的第8方式,在第2至7中的任意方式的显示装置中,优选的是,该显示装置还可以具备间隔时间信息取得部,其从信息终端取得与间隔时间相关的间隔时间信息。在该显示装置中,发送部根据间隔时间信息取得部取得的间隔时间信息,判断是否延迟发送操作信息。
根据本发明的第9方式,在第8的方式的显示装置中,优选的是,根据从预定的服务器装置向信息终端传送的策略文件,从信息终端发送间隔时间信息。
根据本发明的第10方式,在第1至9中的任一方式的显示装置中,发送部可以利用蓝牙或USB的鼠标用通信格式发送操作信息。
根据本发明的第11方式,与信息终端连接的显示装置具备:图像接收部,其从信息终端接收包含光标的画面的图像信息;触摸面板,其根据图像接收部接收到的图像信息显示画面,并检测通过触摸操作指定的触摸位置;以及发送部,其向信息终端发送与触摸操作对应的操作信息。发送部在触摸操作中移动触摸位置时,发送包含表示预定的按钮操作的按钮操作信息和与触摸位置的移动量对应的移动量信息的操作信息。
发明效果
根据本发明,在通过显示装置显示了应用了触摸屏操作的信息终端的显示画面时,能够从显示装置操作信息终端。
附图说明
图1是表示本发明的一实施方式的车载信息系统的结构的图。
图2是表示车载装置和便携终端的结构的框图。
图3是表示便携终端的软件的概要结构的图。
图4是说明在车载装置进行了触摸操作时的车载装置与便携终端的动作的图。
图5是表示与触摸操作相关的车载装置、便携终端以及服务器装置之间的信息的流动的顺序图。
图6是表示在向便携终端传送的策略文件中记录的信息的例子的图。
图7是与车载装置中执行的触摸操作相关的处理的流程图。
图8是说明在车载装置进行了滑动(flick)操作时的车载装置和便携终端的动作的图。
图9是表示与滑动操作相关的车载装置、便携终端以及服务器装置之间的信息的流动的顺序图。
图10是与车载装置中执行的滑动操作相关的处理的流程图。
具体实施方式
第1实施方式
图1是表示本发明的一实施方式的车载信息系统的结构的图。图1所示的车载信息系统安装在车辆中来使用,通过将车载装置1和便携终端2经由近距离无线通信和影像/声音电缆3的有线通信相互连接而实现。车载装置1被固定在车辆内,例如设置在车辆的仪表面板内等。便携终端2是用户能够携带的便携式的信息终端,例如是便携电话、智能手机等。此外,对于在车载装置1和便携终端2之间进行的近距离无线通信例如可以使用Bluetooth(蓝牙)(注册商标)等。另外,对于经由影像/声音电缆3的有线通信例如可以使用HDMI(注册商标)等。
在车载装置1中设置有显示部11。显示部11是能够显示各种图像、影像的触摸屏,例如组合电阻膜方式的触摸屏和液晶显示器而构成。用户通过用手指等在显示部11中触摸操作任意的位置来指定在该位置显示的图标、操作按键等,能够使便携终端2执行希望的功能。此外,除了显示部11以外,还可以在车载装置1中设置与规定的操作对应的操作开关。
在便携终端2中设置有显示部21。显示部21是能够显示各种图像、影像的触摸屏,例如组合静电电容方式的触摸屏开关和液晶显示器而构成。用户对应于在显示部21中显示的图像、影像的内容,用手指等在显示部21上触摸任意的位置,由此能够使便携终端2执行希望的功能。此外,在此说明了将显示部21作为触摸屏的例子,但也可以设为不是触摸屏的普通的显示器。在该情况下,优选在便携终端2中设置与便携终端2执行的处理的内容对应的各种操作开关。或者,也可以将显示部21设为触摸屏式的显示器,并在便携终端2中还设置与规定的操作对应的操作开关。
图2是表示车载装置1和便携终端2的结构的框图。如图2所示,车载装置1具备控制部10、显示部11、操作部12、声音输出部13、存储部14、近距离无线通信接口部15以及影像/声音信号输入部16。另一方面,便携终端2具备控制部20、显示部21、操作部22、声音输出部23、存储部24、近距离无线通信接口部25、影像/声音信号输入部26、无线通信部27、以及GPS(全球定位系统)接收部28。
在车载装置1中,控制部10由微处理器、各种外围电路、RAM、ROM等构成,根据存储在存储部14中的控制程序来执行各种处理。通过由该控制部10进行的处理,来执行各种图像显示处理、声音输出处理等。
并且,控制部10取得从车辆输出的车速信号和停车信号。根据该车速信号和停车信号,控制部10判断车辆的行驶状态是正在行驶中和已停车中的哪一个。此外,例如经由设置在车辆内的通信网络即未图示的CAN(控制器局域网),从安装在车辆中的车速传感器输出车速脉冲,由此从车辆向控制部10输出车速信号和停车信号。
如使用图1上述的那样,显示部11是由液晶显示器等构成的显示器。操作部12是用于检测用户对显示部11的触摸操作的部分,相当于上述触摸屏开关。此外,在图2中,分别表示了显示部11和操作部12,但实际上它们一体地构成一个触摸屏。另外,如上述那样在车载装置1中设置了触摸屏以外的操作开关的情况下,该操作开关也包含在操作部12中。用户向操作部12进行的输入操作内容被输出到控制部10,反映在控制部10进行的处理中。
声音输出部13具有放大器、扬声器等,能够通过控制部10的控制输出各种声音。例如从声音输出部13输出对从便携终端2或未图示的记录介质读出的音乐数据进行重放的音乐、用于将车辆引导到目的地的引导声音等。
存储部14是非易失性的数据存储装置,例如由HDD(硬盘驱动器)、闪速存储器等实现。在存储部14中,例如存储有在控制部10中使用的上述控制程序等各种数据。通过控制部10的控制,根据需要进行存储部14中的数据的读出和写入。
近距离无线通信接口部15根据控制部10的控制进行在与便携终端2之间进行近距离无线通信时所需要的无线接口处理。例如,将从控制部10输出的信息变换为规定的无线信号形式而向便携终端2发送,或者接收从便携终端2以规定的无线信号形式输出的信息然后向控制部10输出。依照蓝牙等规定的通信规格进行近距离无线通信接口部15的接口处理。
影像/声音信号输入部16接收经由影像/声音电缆3从便携终端2输入的影像信号和声音信号,将这些信号分别变换为画面显示用的图像(影像)数据和声音输出用的声音数据并向控制部10输出。如果从影像/声音信号输入部16向控制部10输出了图像数据和声音数据,则控制部10控制显示部11使显示部11对基于该图像数据的图像进行画面显示,并且控制声音输出部13使声音输出部13输出基于该声音数据的声音。
另一方面,在便携终端2中,控制部20与车载装置1的控制部10同样地,由微处理器、各种外围电路、RAM、ROM等构成,根据记录在存储部24中的控制程序执行各种处理。
显示部21是上述那样的触摸屏式的显示器。操作部22是用于检测用户的输入操作的部分。此外,在图2中,将显示部21和操作部22显示为各自的结构,但实际上与上述显示部11同样地,显示部21和操作部22一体地构成一个触摸屏。另外,如上述那样在便携终端2中设置了触摸屏以外的操作开关的情况下,该操作开关也包含在操作部22中。用户向操作部22进行的输入操作内容被输出到控制部20,反映在控制部20进行的处理中。
声音输出部23具有放大器、扬声器等,能够通过控制部20的控制输出各种声音。例如,在使用便携终端2进行通话时,从声音输出部23输出通话对方的声音。
存储部24是与车载装置1的存储部14相同的非易失性的数据存储装置,存储有用于在控制部20的处理中利用的各种数据。在该存储部24中,存储有用户预先得到的各种应用程序(以下简称为应用)。用户通过从存储在存储部24中的各种应用中选择任意一个而使控制部20执行,能够在便携终端2中实现各种功能。
近距离无线通信接口部25与车载装置1的近距离无线通信接口部15同样地,进行基于规定的通信规格的无线接口处理。即,近距离无线通信接口部15和近距离无线通信接口部25相互通过无线通信收发信息,由此实现车载装置1和便携终端2之间的信息通信。
影像/声音信号输出部26将通过控制部20生成的图像(影像)和声音分别变换为例如与HDMI等规定的通信规格对应的影像信号和声音信号,经由影像/声音电缆3向车载装置1输出。如果该影像信号和声音信号在车载装置1中输入到影像/声音信号输入部16,则在车载装置1的显示部11中还显示与在便携终端2中显示在显示部21中的图像相同的图像(画面)。另外,从车载装置1的声音输出部13还输出与在便携终端2中从声音输出部23输出的声音相同的声音。将这样的功能称为视频镜像。
无线通信部27进行经由未图示的无线通信线路网将便携终端2与其他便携终端、服务器连接的无线通信。便携终端2能够通过无线通信部27进行的无线通信,在与其他便携终端之间进行通话,或者从服务器下载任意的应用。此外,在无线通信部27进行的无线通信中,例如能够利用便携电话线路网、经由无线LAN的因特网线路网等作为无线通信线路网。
GPS接收部28接收从GPS卫星发送的GPS信号并向控制部20输出。在GPS信号中,作为用于求出便携终端2的当前位置和当前时刻的信息,包含与发送了该GPS信号的GPS卫星的位置和发送时刻相关的信息。因此,通过从规定个数以上的GPS卫星接收GPS信号,能够在控制部20中根据这些信息计算当前位置和当前时刻。
接着,说明本车载信息系统的车载装置1和便携终端2的协作功能。车载信息系统具有车载装置1和便携终端2的协作功能。通过使用该协作功能,如果在车载装置1和便携终端2相互连接的状态下在便携终端2中执行各种应用,则能够在车载装置1中进行与该应用对应的图像显示、声音输出。另外,能够将用户对车载装置1进行的操作内容反映到在便携终端2中正在执行的应用的动作中。
例如,通过在便携终端2中执行导航用的应用,能够进行用于将车辆引导到目的地的导航处理。在该导航处理中,在便携终端2中生成描绘了当前位置附近的地图的地图画面,通过上述影像信号,将表示该地图画面的图像信息从影像/声音信号输出部26经由影像/声音电缆3向影像/声音信号输入部16输出。由此,能够从便携终端2向车载装置1发送地图画面,而在车载装置1的显示部11中显示当前位置附近的地图画面。另外,如果用户操作车载装置1的操作部12或便携终端2的操作部22来设定目的地,则将车辆的当前位置作为出发地,在便携终端2中探索从此处到设定的目的地为止的推荐路径。然后,如果车辆接近推荐路径上的引导地点,则从便携终端2向车载装置1发送与该引导地点的车辆的行进方向对应的引导声音。由此,能够从车载装置1的声音输出部13输出引导声音。此外,这时,也可以与引导声音输出的开始和结束的定时对应地,从便携终端2向车载装置1分别输出规定的信号。由此,即使在车载装置1中正在输出收音机广播或正在重放的CD等的声音的情况下,也能够在引导声音的输出过程中降低该声音的音量,使用户容易听到引导声音。如以上说明的那样,通过在显示部11中显示地图图像,或者从声音输出部13输出引导声音,车载装置1向用户进行报告使得用户能够不会迷路地将车辆驾驶到目的地。
此外,便携终端2执行导航用的应用所需要的地图数据等各种数据也可以使用预先存储在便携终端2的存储部24中的数据。或者也可以只将必要最小限的数据存储在存储部24中,在便携终端2执行了导航用的应用时,使用无线通信部27与规定的服务器连接,每次取得必要的数据。
在便携终端2中,执行包含上述那样的导航用的应用的多个应用中的被用户选择的应用。用户在显示在便携终端2的显示部21中的菜单画面中,对操作部22进行操作来选择希望的应用,由此能够选择使便携终端2执行的应用。在该菜单画面中,例如并排地显示有能够利用协作功能的各应用的图标。如果用户在菜单画面上通过触摸屏操作等选择了任意一个图标,则在便携终端2中执行与该图标对应的应用。
并且,便携终端2根据来自影像/声音信号输出部26的影像信号,向车载装置1发送菜单画面。车载装置1根据从便携终端2发送的影像信号,在显示部11上显示菜单画面。如果在该菜单画面中,用户通过作为触摸屏的一部分的操作部12的触摸操作选择了希望的应用,则通过近距离无线通信接口部15从车载装置1向便携终端2发送与该触摸操作对应的操作信息。
在便携终端2中通过近距离无线通信接口部25接收从车载装置1发送的操作信息,向控制部20输出。根据这样接收到的操作信息,控制部20识别在车载装置1中用户选择了哪个应用,执行该应用。由此,与使用显示在便携终端2的显示部21中的菜单画面的情况同样地,用户能够在车载装置1中选择希望的应用,使便携终端2执行。
此外,控制部20能够在前台或后台执行各应用。在前台执行的情况下,该应用在车载装置1和便携终端2中成为图像显示、操作输入的对象。另一方面,在后台执行的情况下,通过控制部20执行与该应用对应的处理,但该应用在车载装置1和便携终端2中不成为图像显示、操作输入的对象。但是,对于声音,也可以从正在后台执行的应用输出。
为了将车载装置1和便携终端2相互连接来实现上述那样的协作功能,在便携终端2中预先安装被称为应用管理器的应用,存储在存储部24中。即,在存储部24中,存储有包含应用管理器的多个应用。如果便携终端2与车载装置1连接,则从存储部24读出该应用管理器,并在控制部20执行。
图3是表示便携终端2中的软件的概要结构的图。在图3中,应用管理器201具有子应用Ma和子应用Ms。
子应用Ma具有用于启动应用管理器201以外的应用的启动器功能、用于取得记录有车载装置1和便携终端2的协作处理所需要的各种信息的策略文件的策略文件取得功能。控制部20通过在前台执行子应用Ma,能够利用这些功能。例如,能够使用启动器功能,调用其他应用,代替子应用Ma使控制部20在前台执行该应用。此外,可以使用策略文件取得功能,从外部的服务器装置等取得被称为策略文件的数据文件。在该策略文件中记录有表示针对各应用的车辆行驶中的动作限制的内容的限制信息、显示部21的分辨率信息、以后所述的间隔时间信息等。将取得的策略文件存储在存储部24中。
子应用Ms具有用于将便携终端2与车载装置1连接的通信功能、用于进行车辆行驶中的动作限制的动作限制功能。控制部20通过在后台执行子应用Ms,能够利用这些功能。例如,可以使用通信功能,参照在存储部24中存储的策略文件,在便携终端2和车载装置1之间交换在协作时所需要的各种通信信息。另外,可以使用动作限制功能,参照在存储部24中存储的策略文件所示的限制信息,判断针对在前台正在执行的应用的车辆行驶中的动作限制的内容。通过上述通信功能将该判断结果作为从便携终端2向车载装置1的通信信息进行发送,在车载装置1中进行车辆行驶中的动作限制时使用。
如以上说明的那样,应用管理器201分为在控制部20中在前台执行的子应用Ma和在控制部20中在后台执行的子应用Ms而构成。由此,能够使应用管理器201的功能分担最优化,成为适合于在前台和后台分别执行的功能分担。
应用管理器201通过子应用Ma的启动器功能,调用在应用202中包含的各应用中的任意一个应用。这样,通过控制部20,代替子应用Ma在前台执行该应用。此外,在以下的对图3的说明中,说明为正在执行应用A。
OS(操作系统)203是用于管理便携终端2的全体动作的软件。在将便携终端2与车载装置1连接的情况下,OS203对在控制部20中在后台执行的子应用Ms和在SPP配置204和HID配置205之间输入输出的信息进行中介。SPP配置204和HID配置205是在车载装置1和便携终端2之间进行的近距离无线通信中使用的驱动器,被标准化为在蓝牙中使用的规格的一部分。
SPP配置204通过子应用Ms的通信功能,进行在便携终端2与车载装置1之间输入输出的通信信息的收发处理。在从便携终端2向车载装置1发送的通信信息中包含表示基于子应用Ms的动作限制功能的动作限制内容的判断结果的信息、在已取得的策略文件中表示的显示部21的分辨率信息、间隔时间信息等。在从车载装置1向便携终端2发送的通信信息中包含与车辆的行驶状态对应的行驶信息等。另一方面,HID配置205进行用于接收与车载装置1中的用户的操作内容对应地从车载装置1输出的操作信息的处理。把通过SPP配置204和HID配置205接收到的各信息的内容经由OS203输出到子应用Ms,通过子应用Ms的通信功能向正在执行的应用进行交接。此外,在车载装置1的近距离无线通信接口部15和便携终端2的近距离无线通信接口部25之间通过无线通信进行这些各信息的收发。
在控制部20中在前台正在执行子应用Ma的情况下,子应用Ma通过上述启动器功能,生成用于使用户选择执行的应用的菜单画面的图像。另外,在控制部20中在前台正在执行应用A的情况下,应用A根据需要利用从子应用Ms交接的行驶信息、操作信息,生成规定的图像、声音。在将这些图像、声音暂时存储在声音/图像存储器206中后,输出到HDMI驱动器207。
HDMI驱动器207进行以下处理,依照在HDMI中确定的方式,将通过子应用Ma或应用A生成的图像、声音变换为影像信号、声音信号。通过影像/声音信号输出部26,经由影像/声音电缆3将该影像信号、声音信号向车载装置1输出。
便携终端2具有以上说明的软件结构。此外,例如可以使用Android(注册商标)来实现这样的软件结构。在该情况下,例如通过被称为“Activity”的线程来执行子应用Ma,通过被称为“Service”的线程来执行子应用Ms,由此能够在控制部20中在前台执行子应用Ma,同时在后台执行子应用Ms。
接着,详细说明用户在车载装置1中进行了触摸操作时的动作。如上述那样,如果用户在显示在车载装置1的显示部11中的画面上进行了触摸操作,则从车载装置1向便携终端2发送与通过该触摸操作指定的触摸位置对应的操作信息。这时,车载装置1利用被称为HID分组的鼠标用的通信格式,向便携终端2发送操作信息。
此外,一般在使用鼠标作为便携终端2的输入设备时,利用蓝牙的鼠标用通信格式即HID分组。在使用了鼠标的情况下,能够通过HID分组,根据规定的数据格式,在每个规定时间从鼠标向便携终端2发送与鼠标的移动对应的移动量信息、与点击操作等各种按键操作对应的按键操作信息。如果接收到通过HID分组从鼠标发送的这些信息,则便携终端2在通过图3所示的HID配置205进行接收处理后,通过OS203进行解读,由此检测鼠标的移动,与该移动对应地使画面上的光标移动。进而,如果进行了点击操作等按键操作,则根据与此时的光标位置对应的画面内容和按键操作的内容,解读用户在画面上进行的操作内容。在控制部20中,与这样通过OS203解读的鼠标的操作内容对应地,启动与在菜单画面上指定的图标对应的应用,或者执行与正在执行的应用画面上指定的操作对应的处理。
在本实施方式的车载信息系统中,利用上述那样的HID分组,从车载装置1向便携终端2发送与车载装置1中的触摸操作对应的操作信息。由此,在便携终端2中,能够与使用鼠标时同样地通过OS203识别触摸操作内容。
图4是说明在车载装置1中进行了触摸操作时的车载装置1和便携终端2的动作的图。图4(a)表示了触摸操作前的情况。在图4(a)中,在显示部11和显示部21的外周部分中的右下端分别显示的箭头形状的光标40将相当于该箭头的前端部分的光标40的左上端作为指示点。即,在触摸操作前,画面上的光标40在车载装置1中指示相当于显示部11的右下端的基准位置41,在便携终端2中指示相当于显示部21的右下端的基准位置42。此外,这时,光标40的大部分位于显示部11、21的各画面的显示范围外,实际上不显示。因此,在图4(a)中用虚线表示了光标40的显示位置。
在触摸操作前,便携终端2在显示部21中显示包含在基准位置42显示的光标40的画面,并且使用上述影像信号,经由影像/声音电缆3向车载装置1输出该画面的图像信息。如果从便携终端2接收到图像信息,则车载装置1根据该图像信息,在显示部11中显示与在便携终端2的显示部21中显示的画面相同的画面。由此,如图4(a)所示,在显示部11中显示包含在基准位置41显示的光标40的画面。
在此,如图4(a)所示,将针对显示部11的X方向(横方向)的分辨率(像素数)表示为Xv,将针对Y方向(纵方向)的分辨率(像素数)表示为Yv。另外,将针对显示部21的X方向(横方向)的分辨率(像素数)表示为Xs,将针对Y方向(纵方向)的分辨率(像素数)表示为Ys。在车载装置1和便携终端2中,分别将这些分辨率的信息预先存储在存储部14、24中。
图4(b)表示进行了触摸操作时的情况。如图4(b)所示,假定用户用手指触摸显示部11而对车载装置1进行触摸操作,指定了触摸位置43。当检测到该触摸操作时,车载装置1计算X方向的移动量Px和Y方向的移动量Py,作为从触摸操作前光标40所指示的右下端的基准位置41到触摸位置43的移动量。例如,对X方向和Y方向分别求出从基准位置41到触摸位置43之间的像素数来计算该移动量Px、Py。在此,如图中所示,以显示部11的左上端为起点,将右方向决定为X的正方向,将下方向决定为Y的正方向的情况下,从基准位置41到触摸位置43的移动量Px、Py都作为负值求出。
若如上所述地计算出X方向的移动量Px和Y方向的移动量Py,则紧接着车载装置1将该移动量Px、Py变换成便携终端2的显示部21上的移动量Qx、Qy。根据上述的分辨率Xv、Yv和Xs、Ys,使用下式(1)来进行该移动量的变换。
Qx=Px×(Xs/Xv)
Qy=Py×(Ys/Yv)…(1)
在上式(1)中,Xs/Xv和Ys/Yv是分别将移动量Px、Py变换成移动量Qx、Qy时的变换系数。车载装置1事先从便携终端2取得显示部21的分辨率Xs、Ys,由此能够求出这些变换系数。
若计算出变换后的移动量Qx、Qy,则车载装置1将表示这些移动量Qx、Qy的移动量信息通过HID分组发送到便携终端2来作为与触摸操作对应的第一个操作信息。在以下的说明中,将该操作信息称为“移动”。
当从车载装置1接收到上述操作信息“移动”时,基于该操作信息便携终端2通过OS203解读移动量Qx、Qy。然后,如图4(b)所示,使光标40从右下端的基准位置42移动移动量Qx、Qy后显示在显示部21上,并且将包含该移动后的光标40的画面的图像信息使用上述的影像信号经由影像/声音电缆3输出到车载装置1。
在从便携终端2接收到包含移动后的光标40的画面的图像信息时,车载装置1基于该图像信息在显示部11上显示与便携终端2的显示部21所显示的画面相同的画面。由此,如图4(b)所示,在显示部11上显示光标40指示触摸位置43的画面。
在发送了操作信息“移动”后,车载装置1将表示进行了预定的按钮操作例如左点击操作的按钮操作信息通过HID分组发送到便携终端2,来作为与触摸操作对应的第二个操作信息。在以下的说明中,将该操作信息称为“敲击(Tap)”。另外,在操作信息“敲击”中,与按钮操作信息一起,还发送用于表示光标40的移动量为0的移动量信息。
当从车载装置1接收到上述操作信息“敲击”时,基于该操作信息便携终端2通过OS203解读该按钮操作的内容。然后,根据在通过操作信息“移动”指定的移动后的光标40的显示位置即触摸位置43显示的画面内容和通过操作信息“敲击”指定的按钮操作内容,例如进行与触摸位置43的图标对应的应用的启动等。
当用户进行从显示部11离开手指的解除操作而结束触摸操作时,车载装置1将表示解除了通过操作信息“敲击”指定的按钮操作的按钮操作信息通过HID分组发送到便携终端2来作为与触摸操作对应的第三个操作信息。在以下的说明中,将该操作信息称为“重置(Untap)”。另外,在操作信息“重置”中,与上述的操作信息“敲击”同样地,与按钮操作信息一起,还发送用于表示光标40的移动量为0的移动量信息。
在发送了操作信息“重置”后,车载装置1将用于使光标40的显示位置从触摸位置43返回到基准位置41的操作信息通过HID分组发送到便携终端2,作为与触摸操作对应的第四个操作信息。在以下的说明中,将该操作信息称为“移动复位(MoveReset)”。
优选车载装置1将表示从触摸位置43到基准位置41的移动量或其以上的移动量的移动量信息发送到便携终端2来作为上述的操作信息“移动复位”。例如,如上所述,在将显示部11的右方向决定为X的正方向,将下方向决定为Y的正方向的情况下,分别对X方向、Y方向预先设定显示部11的分辨率(像素数)以上的任意的移动量(例如,在移动量信息中可表现的最大移动量)来作为与基准位置41对应的移动量。通过发送与该移动量对应的移动量信息,可以发送操作信息“移动复位”。或者,也可以根据通过上述的式(1)计算出的移动量Qx、Qy,发送用于表示分别将它们的符号反转后的移动量-Qx、-Qy的移动量信息来作为操作信息“移动复位”。除此以外,如果在从触摸位置43到基准位置41的移动量以上,则还可以发送用于表示任意的移动量的移动量信息来作为操作信息“移动复位”。
当从车载装置1接收到作为操作信息“移动复位”的上述移动量信息时,基于该信息便携终端2通过OS203解读该移动量信息所表示的移动量。然后,使光标40向右下端的基准位置42移动后显示在显示部21上,并且使用上述影像信号将包含该移动后的光标40的画面的图像信息经由影像/声音电缆3输出到车载装置1。
当从便携终端2接收到包含移动后的光标40的图像信息时,车载装置1基于该图像信息在显示部11上显示与便携终端2的显示部21中显示的画面相同的画面。由此,在显示部11上再次显示图4(a)所示的画面。
如以上说明的那样,当用户对车载装置1进行了触摸操作时,根据该触摸操作,从车载装置1向便携终端2逐次发送“移动”、“敲击”、“重置”、“移动复位”的各操作信息。由此,能够在便携终端2识别用户的触摸操作,并执行恰当的处理。
接着,说明车载装置1中的连续触摸操作时的误动作防止。已知在利用HID分组进行的鼠标操作的情况下,当在预定时间以内连续输入表示一定距离以上的移动量的操作信息时,执行被称为加速度处理的处理。该加速度处理相加比实际输入的移动量大的移动量来使光标移动,由此能够通过较少的鼠标操作使光标移动到希望的位置。
但是,在本实施方式的车载信息系统中,利用HID分组将与触摸操作对应的操作信息从车载装置1发送到便携终端2,由此实现上述的触摸操作。因此,在便携终端2执行加速度处理时,光标移动至与实际的触摸位置不同的场所,结果,在便携终端2无法准确地识别触摸操作。
因此,当用户在短时间内连续进行了触摸操作的情况下,车载装置1不立即发送与第2次及其之后的触摸操作对应的操作信息,而是延迟预定的间隔时间进行发送。由此,能够防止在间隔时间内多次连续地向便携终端2输入来自车载装置1的操作信息,从而不会在便携终端2执行加速度处理。
另外,当在间隔时间内连续进行多次触摸操作时,将与第2次及其以后的各触摸操作对应的操作信息逐次延迟来进行积蓄,因此有时其延迟时间的总和变得巨大。因此,为了避免这样的不良,优选将对操作信息的发送进行延迟的触摸操作的次数限制为预定次数,例如5次,放弃超过了该次数的触摸操作从而不发送操作信息。或者,也可以对延迟时间设置上限,放弃超过该上限输入的触摸操作而不发送操作信息。
此外,在上述的处理中,防止加速度处理的执行所需要的时间间隔并非恒定,有时根据搭载在便携终端2上的OS203的种类或版本而不同。因此,优选的是车载装置1事先从便携终端2取得间隔时间的信息,并根据该信息设定最佳的间隔时间。例如,对于各种种类或版本的OS,预先将与此对应的间隔时间间隔记录在预定的服务器装置中。从该服务器装置向便携终端2传送与OS203对应的间隔时间的信息。便携终端2基于从服务器装置传送的信息,向车载装置1通知间隔时间。由此,在车载装置1能够取得针对搭载在便携终端2中的OS203最佳的间隔时间。
图5是表示与以上说明的触摸操作相关的车载装置1、便携终端2以及服务器装置之间的信息的流动的顺序图。
在将车载装置1与便携终端2连接时,车载装置1对在便携终端2执行的图3的应用管理器201输出符号50所示的对话开始请求。当接收到该对话开始请求时,便携终端2通过应用管理器201的子应用Ma,使用无线通信部27经由便携电话线路网或因特网线路网等无线通信线路网连接至服务器装置。然后,如符号51所示对服务器装置进行策略文件的传送请求。此时,子应用Ma向服务器装置通知例如与存储在存储部24中的各应用相关的信息、便携终端2的机型信息,与搭载在便携终端2上的OS203的种类、版本相关的信息等作为确定策略文件所需要的信息。
当从便携终端2的子应用Ma接收到策略文件的传送请求时,服务器装置从预先存储的各种策略文件中选择适于便携终端2的策略文件,并如符号52所示传送给便携终端2。另外,在服务器装置中,针对各种信息终端单独记录了其OS的每个种类和每个版本的间隔时间信息,每个机型的分辨率信息、针对各种应用的限制信息等来作为策略文件。服务器装置从中选择对便携终端2来说最佳的策略文件,并经由电话线路网、因特网线路网等无线通信线路网传送给便携终端2。
图6是表示在向便携终端2传送的策略文件中记录的信息的例子的图。如图6所示,在策略文件中记录了针对便携终端2的限制信息、分辨率信息以及间隔时间信息。限制信息表示便携终端2中存储的各应用在车辆行驶中的动作限制的内容,在图6的例子中表示了针对应用A许可图像显示和用户的操作输入双方,针对应用B许可图像显示而禁止操作输入,针对应用C禁止图像显示和操作输入双方。分辨率信息表示显示部21的横向(X方向)和纵向(Y方向)画面的分辨率,在图6的例子中表示了横向分辨率为1280像素,纵向分辨率为640像素。间隔时间信息表示在OS203所需要的间隔时间,在图6的例子中表示了间隔时间为100ms。
当接收到从服务器装置传送的策略文件时,便携终端2通过应用管理器201的子应用Ma将该策略文件存储在存储器24中。然后,通过子应用Ms从存储器24读出策略文件,使用近距离无线通信接口部25如符号53所示对车载装置1进行分辨率和间隔时间的通知。在此,将接收到的策略文件所示的分辨率信息、间隔时间信息发送给车载装置1,由此将这些内容通知给车载装置1。
当从便携终端2接收到分辨率和间隔时间的通知时,车载装置1基于通知的分辨率计算在上述式(1)中使用的变换系数。此外,根据通知的间隔时间,进行用于防止执行加速度处理的间隔时间的设定。
当用户对车载装置1进行触摸操作时,车载装置1使用上述的变换系数计算与触摸位置对应的变换后的移动量,并如符号54所示,将第一个操作信息“移动”发送给便携终端2的OS203。之后,如符号55所示,发送第二个操作信息“敲击”。
在发送了操作信息“敲击”后,当用户进行用于结束触摸操作的解除操作时,如符号56所示,车载装置1发送第三个操作信息“重置”。之后,为了使移动至触摸位置的光标返回到原来的位置,如符号57所示发送第四个操作信息“移动复位”。
在解除操作后,当在间隔时间内用户继续进行触摸操作时,车载装置1在计算出与触摸位置对应的变换后的移动量后待机。此时的待机时间是从根据针对上次的触摸操作的解除操作发送了操作信息“移动复位”后到经过间隔时间为止的时间。当经过了间隔时间时,分别如符号58、59所示,车载装置1继续向便携终端2的OS203发送操作信息“移动”和“敲击”。之后,当用户进行解除操作而结束触摸操作时,分别如符号60、61所示,车载装置1继续向OS203发送操作信息“重置”和“移动复位”。之后,重复同样的动作。
如以上说明的那样,在用户每次进行触摸操作和解除操作时,按照预定顺序从车载装置1向便携终端2继续发送各操作信息。此外,当在间隔时间内连续进行了触摸操作的情况下,延时发送后面的触摸操作的操作信息,由此在触摸操作间确保间隔时间以上的操作信息的发送间隔。便携终端2在OS203解读来自车载装置1的各操作信息,由此能够识别用户对车载装置1进行的触摸操作的内容。
图7是与在车载装置1执行的触摸操作相关的处理的流程图。在车载装置1与便携终端2之间确立通信时,通过控制部10执行该流程图所示的处理。
在步骤S10,控制部10使用近距离无线通信接口部15接收从便携终端2发送的显示部21的分辨率信息和间隔时间信息。在此,如上述所示,从便携终端2接收针对显示部21的X方向的分辨率Xs和针对Y方向的分辨率Ys作为分辨率信息。此外,从便携终端2接收表示在OS203中防止执行加速度处理所需要的时间长度,例如100ms的间隔时间的信息来作为间隔时间信息。
在步骤S20,控制部10根据在步骤S10从便携终端2接收到的显示部21的分辨率信息、预先存储在存储部14中的显示部11的分辨率,来计算与显示部21针对显示部11的分辨率之比对应的变换系数。在此,如上述的式(1)所示,将在步骤S10接收到的分辨率信息所表示的显示部21的分辨率Xs、Ys分别除以针对显示部11的X方向的分辨率Xv和针对Y方向的分辨率Yv,由此计算针对X方向的变换系数Xs/Xv和针对Y方向的变换系数Ys/Yv。
在步骤S30,控制部10判定用户是否对与显示部11一体构成的触摸面板开关即操作部12进行了触摸操作。在进行了触摸操作的情况下,检测该触摸操作并前进到步骤S40。
在步骤S40,控制部10根据在步骤S30检测出触摸操作时的光标的显示位置,计算到通过该触摸操作指定的触摸位置的移动量。在此,如以上所示,计算X方向的移动量Px和Y方向的移动量Py,来作为从右下端的基准位置41到触摸位置43的移动量。
在步骤S50,控制部10将在步骤S40计算出的移动量变换成便携终端2的显示部21上的移动量。在此,使用在步骤S20计算出的X方向的变换系数Xs/Xv和Y方向的变换系数Ys/Yv,通过上述的式(1),分别将针对显示部11计算出的X方向的移动量Px和Y方向的移动量Py变换成显示部21上的X方向的移动量Qx和Y方向的移动量Qy。
在步骤S60,控制部10判定是否从上次发送操作信息“移动复位”开始经过了间隔时间以上的时间。在此,把在根据上次的触摸操作执行的后述步骤S120中发送了操作信息“移动复位”后的经过时间与根据在步骤S10接收到的间隔时间信息设定的间隔时间进行比较。结果,在经过时间不足间隔时间的情况下向步骤S70前进,在为间隔时间以上的情况下向步骤S80前进。
在步骤S70,控制部10进行待机直到从上次发送操作信息“移动复位”后的经过时间成为间隔时间为止。由此,延迟执行下个步骤S80的处理,使操作信息“移动”的发送延迟。如果经过了间隔时间,则向步骤S80前进。
在步骤S80,控制部10将操作信息“移动”发送给便携终端2。此时,控制部10使用近距离无线通信接口部15将表示在步骤S50进行变换后的移动量的移动量信息作为操作信息“移动”发送给便携终端2。由此,将与从触摸操作时的光标的显示位置到检测出的触摸位置的距离对应的移动量信息从车载装置1发送给便携终端2。如上所述,利用鼠标用通信格式即HID分组来进行该移动量信息的发送。这样,从车载装置1发送的移动量信息,在便携终端2通过近距离无线通信接口部25被接收并通过OS203解读。结果,在便携终端2中画面上的光标位置移动,将包含移动后的光标的图像信息从便携终端2发送到车载装置1并在显示部11上显示。
在步骤S90,控制部10将操作信息“敲击”发送给便携终端2。此时,控制部10使用近距离无线通信接口部15将表示X方向、Y方向的移动量都是0的移动量信息、表示进行了左点击操作等预定的按钮操作的按钮操作信息作为操作信息“敲击”发送给便携终端2。
在步骤S100,控制部10判定用户是否对与显示部11一体构成的触摸面板开关即操作部12进行了解除操作。在进行了解除操作的情况下,即在步骤S30检测出的触摸操作结束的情况下,向步骤S110前进。
在步骤S110,控制部10将操作信息“重置”发送给便携终端2。此时,控制部10使用近距离无线通信接口部15将表示X方向、Y方向的移动量都是0的移动量信息、表示解除了按钮操作的按钮操作信息作为操作信息“重置”发送给便携终端2。
在步骤S120,控制部10将操作信息“移动复位”发送给便携终端2。此时,控制部10使用近距离无线通信接口部15将根据到基准位置为止的移动量预先设定的上述那样的移动量信息作为操作信息“移动复位”发送给便携终端2。
如果执行了步骤S120,则控制部10返回步骤S30,根据来自用户的触摸操作重复执行上述那样的处理。
根据以上说明的本发明的一实施方式,起到如下的作用效果。
(1)车载装置1通过影像/声音信号输入部16,从便携终端2接收包含光标40的画面的图像信息,并根据该图像信息将该画面显示在触摸面板即显示部11上。然后,通过与显示部11一起构成触摸面板的操作部12,检测通过来自用户的触摸操作指定的触摸位置,并通过控制部10的处理,使用近距离无线通信接口部15将与该触摸操作对应的操作信息发送给便携终端2(步骤S80~S120)。此时,在连续进行了触摸操作的情况下,通过待机至经过间隔时间为止(步骤S70),延迟发送操作信息。于是,能够防止在便携终端2执行加速度处理。因此,在车载装置1显示了应用触摸面板操作的便携终端2的显示画面时,能够从车载装置1对便携终端2进行操作。
(2)在通过用户的触摸操作指定触摸位置43时,控制部10在步骤S80发送用于使光标40从基准位置41移动至触摸位置43的操作信息“移动”。此外,当在发送了操作信息“移动”后解除了触摸位置43的指定时,在步骤S120发送用于使光标40从触摸位置43返回到基准位置41的操作信息“移动复位”。在发送了该操作信息“移动复位”后,当在预定的间隔时间以内进行了下一次触摸操作时,控制部10在步骤S70待机至经过间隔时间为止,之后执行步骤S80,由此延迟发送操作信息“移动”。于是,当在间隔时间以内连续进行了触摸操作的情况下,能够确实地防止在便携终端2执行加速度处理。
(3)控制部10在步骤S80发送与从基准位置41到触摸位置43的距离对应的移动量信息来作为操作信息“移动”,在步骤S120发送与基准位置41对应的预定的移动量信息来作为操作信息“移动复位”。于是,在触摸操作结束后,可每次必定使光标40的显示位置返回到原来的基准位置41。由此,在车载装置1显示了应用触摸面板操作的便携终端2的显示画面时,即使在车载装置1的显示部11与便携终端2的显示部21之间因分辨率不同在移动后的光标位置中产生误差的情况下,也能够不累计该误差地从车载装置1恰当地操作便携终端2。
(4)控制部10在通过用户的触摸操作指定了触摸位置43时,在步骤S80发送了操作信息“移动”后,在步骤S90发送表示预定的按钮操作的操作信息“敲击”。此外,发送了该操作信息“敲击”后解除了触摸位置43的指定时,在步骤S110发送用于表示该按钮操作的解除的操作信息“重置”。之后,在步骤S120发送操作信息“移动复位”。于是,在便携终端2能够切实地识别用户对车载装置1进行的触摸操作的内容。
(5)控制部10在上述的操作信息“敲击”和“重置”中将光标40的移动量设为0。由此,能够在便携终端2中切实地选择与通过用户的触摸操作指定的触摸位置43对应的图标等,并根据该选择结果执行恰当的处理。
(6)车载装置1通过控制部10的处理,使用近距离无线通信接口部15从便携终端2取得与间隔时间相关的间隔时间信息(步骤S10)。根据该间隔时间信息进行步骤S60的判定处理,由此控制部10判断是否执行步骤S70。由此,判断在下个步骤S80是否延迟发送操作信息“移动”。于是,能够设定对于搭载在便携终端2上的OS203恰当的间隔时间,并进行是否延迟发送操作信息的判断。
(7)在步骤S10,根据从预定的服务器装置向便携终端2传送的策略文件,从便携终端2发送上述的间隔时间信息。因此,能够根据搭载在便携终端2上的OS203的种类、版本的不同,从便携终端2向车载装置1通知最佳的间隔时间,并在车载装置1中设定间隔时间。
(8)控制部10在步骤S80、S90、S110以及S120中,通过近距离无线通信接口部15,利用蓝牙中的鼠标用通信格式即HID分组来发送各操作信息。于是,能够利用既有的通信格式容易且切实地实现移动量信息的发送。
第2实施方式
接着,对本发明的第2实施方式进行说明。在上述的第1实施方式中说明了如下的例子:当用户对车载装置1进行了用于指定画面上的任意位置的触摸操作时,将与该触摸操作对应的操作信息通过HID分组从车载装置1发送给便携终端2,由此从车载装置1对便携终端2进行操作。与此相对,在第2实施方式中进一步说明称为滑动操作的、在触摸操作中通过向预定方向拉动触摸位置的方式迅速移动的触摸操作的例子。
图8是说明在车载装置1进行了滑动操作时的车载装置1和便携终端2的动作的图。如图8所示,假定当用户通过手指触摸显示部11由此对车载装置1指定了触摸位置43后,进行了使手指向箭头70的方向迅速移动从而使触摸位置移动的滑动操作。当检测出这样的滑动操作时,首先与上述的第1实施方式同样地,车载装置1根据最初指定的触摸位置43发送操作信息“移动”和“敲击”。
接着,车载装置1检测从最初的触摸位置43沿着箭头70的方向在预定时间后指定的下个触摸位置44。然后,计算X方向的移动量Px1和Y方向的移动量Py1作为从触摸位置43到触摸位置44的移动量。
如上所述,如果计算出从触摸位置43到触摸位置44的移动量Px1、Py1,接着,车载装置1使用上述的式(1)分别将这些移动量Px1、Py1变换成便携终端2的显示部21上的移动量Qx1、Qy1。然后,通过HID分组向便携终端2发送与操作信息“敲击”同样的按钮操作信息和表示变换后的移动量Qx1、Qy1的移动量信息,来作为与在第1实施方式中说明的四种操作信息不同的第五种操作信息。在以下的说明中,将该操作信息称为“滑动(Flick)”。
在输入来自用户的滑动操作时,车载装置1在每个预定时间执行与上述同样的处理。结果,在每个预定时间,将表示沿着箭头70的方向从触摸位置44到触摸位置45的移动量Px2、Py2所对应的变换后的移动量Qx2、Qy2的移动量信息、表示从触摸位置45到触摸位置46的移动量Px3、Py3所对应的变换后的移动量Qx3、Qy3的移动量信息与按钮操作信息一起作为操作信息“滑动”从车载装置1发送给便携终端2。
如以上说明的那样,车载装置1从在滑动操作中沿着箭头70的方向连续指定的触摸位置中检测每个预定时间的触摸位置43~46。然后,分别计算各触摸位置间的X方向移动量Px1~Px3和Y方向移动量Py1~Py3,并在每个预定时间将包含表示与这些移动量对应的变换后的X方向移动量Qx1~Qx3以及Y方向移动量Qy1~Qy3的移动量信息和按钮操作信息的操作信息“滑动”发送给便携终端2。通过接收该操作信息“滑动”,便携终端2能够对于分别与在滑动操作中指定的车载装置1的显示部11上的触摸位置43~46对应的显示部21上的位置73~76,取得各位置间的X方向的移动量Qx1~Qx3以及Y方向的移动量Qy1~Qy3。
另外,在车载装置1中,在每个预定的输出周期从与显示部11一起构成触摸面板的操作部12向控制部10输出对显示部11进行的触摸操作的检测结果。一般,来自该操作部12的触摸操作的检测结果的输出周期比在操作信息“滑动”的发送中使用的HID分组的发送周期短。因此,优选控制部10从通过操作部12在每个预定周期输入的触摸操作的检测结果中,提取与HID分组的发送周期对应的检测结果,并根据该检测结果生成并发送操作信息“滑动”。在此,也可以通过由控制部10执行的驱动软件来实现操作部12的一部分功能。
当从车载装置1接收到上述操作信息“滑动”时,根据该操作信息便携终端2通过OS203解读该滑动操作的内容。然后,根据通过操作信息“滑动”指定的滑动操作内容,例如进行菜单画面的切换显示、在正在执行的应用中进行对应的处理等。
之后,当用户在触摸位置46进行从显示部11离开手指的解除操作而结束滑动操作时,与第1实施方式同样地,车载装置1分别将操作信息“重置”和“移动复位”通过HID分组发送给便携终端2。
如以上说明的那样,当用户对车载装置1进行了滑动操作时,根据该滑动操作,从车载装置1向便携终端2逐次发送“移动”、“敲击”、“滑动”、“重置”、“移动复位”等各操作信息。由此,能够在便携终端2识别用户的滑动操作,并执行恰当的处理。
图9是表示与滑动操作相关的车载装置1、便携终端2以及服务器装置之间的信息的流动的顺序图。
在将车载装置1与便携终端2连接时,车载装置1、便携终端2以及服务器装置与第1实施方式的图5的顺序图同样地,分别进行符号50~53所示的动作。即,当车载装置1输出对话开始请求时,便携终端2对服务器装置请求策略文件的传送,服务器装置选择适合于便携终端2的策略文件并发送给便携终端2。当接收到该策略文件时,便携终端2对车载装置1进行分辨率以及间隔时间的通知。车载装置1分别根据这样通知的分辨率以及间隔时间进行上述的式(1)中的变换系数的计算以及间隔时间的设定。
当用户对车载装置1进行了滑动操作时,车载装置1最初与在第1实施方式中说明的触摸操作的情况同样地,计算与滑动操作开始时的触摸位置对应的变换后的移动量。然后,如符号54、55所示,按照顺序发送操作信息“移动”、“敲击”。之后,车载装置1如符号80所示,在每个预定时间将与滑动操作中的触摸位置的移动量对应的操作信息“滑动”发送给便携终端2。在输入滑动操作的期间,连续进行该操作信息“滑动”的发送。
当用户结束滑动操作而进行解除操作时,车载装置1与第1实施方式同样地,分别如符号56、57所示,依次发送操作信息“重置”、“移动复位”。
另外,在发送操作信息“移动复位”后,当在预定的间隔时间内用户继续进行触摸操作时,载装置1与第1实施方式同样地,待机至经过间隔时间为止。若经过了间隔时间,则车载装置1重复与上述同样的动作。
如以上说明的那样,当用户对车载装置1进行了滑动操作时,从车载装置1向便携终端2,在发送了操作信息“移动”、“敲击”后,在每个预定时间发送包含预定的按钮操作信息、与该滑动操作中的触摸位置的移动量对应的移动量信息的操作信息“滑动”。便携终端2在OS203中解读来自车载装置1的操作信息“滑动”,由此能够识别用户对车载装置1进行的滑动操作。
图10是在车载装置1中执行的与滑动操作相关的处理的流程图。在车载装置1与便携终端2之间确立了通信时,通过控制部10执行该流程图所示的处理。另外,在图10中,对与在第1实施方式中说明的图7的流程图相同的处理内容的部分,赋予与图7相同的步骤编号。以下,关于与该图7相同的步骤编号的处理,只要没有特别的需要则省略说明。
在步骤S90中向便携终端2发送了操作信息“敲击”后,在步骤S91,控制部10判定用户是否对与显示部11一体构成的触摸面板开关即操作部12进行了滑动操作。在此,根据在步骤S30检测出触摸操作时的位置来判定触摸位置是否发生了变化,由此判定有无滑动操作。如在图8中说明的那样,当用户使手指向任意方向迅速运动而进行滑动操作时,与此相伴触摸位置发生变化。因此,在检测出触摸位置的变化的情况下,判定为进行了滑动操作,从而向下个步骤S92前进,没有检测出的情况下,判定为没有滑动操作而向步骤S100前进。
在步骤S92,控制部10计算从上次的触摸位置开始的移动量。在此,如上述那样,在每个预定时间检测在滑动操作中连续变化的触摸位置,并计算其中从上次检测出的触摸位置到这次的触摸位置的X方向以及Y方向的移动量。
在步骤S93,控制部10将在步骤S92计算出的移动量变换成便携终端2的显示部21上的移动量。在此,与步骤S50同样地,使用在步骤S20计算出的X方向的变换系数Xs/Xv和Y方向的变换系数Ys/Yv,根据上述的式(1),分别对X方向的移动量和Y方向的移动量进行变换。
在步骤S94,控制部10将操作信息“滑动”发送给便携终端2。此时,控制部10使用近距离无线通信接口部15将表示在步骤S93进行变换后的移动量的移动量信息、表示进行了左点击操作等预定的按钮操作的按钮操作信息作为操作信息“滑动”发送给便携终端2。
如果执行了步骤S94,则控制部10进入步骤S100,判定有无来自用户的解除操作。结果,在进行了解除操作时,即在步骤S91中检测出的滑动操作结束时,进入步骤S110,在不是这样的情况下,返回步骤S91重复上述的处理。
如以上说明的那样,在步骤S91检测出滑动操作后直到在步骤S100检测出解除操作的期间,在每个预定时间重复执行步骤S92~S94的处理。由此,如在图8说明的那样,在每个预定时间检测滑动操作中的触摸位置43~46,分别计算各触摸位置之间的X方向移动量Px1~Px3以及Y方向移动量Py1~Py3。然后,分别计算出与其对应的变换后的X方向移动量Qx1~Qx3以及Y方向移动量Qy1~Qy3,并在每个预定时间将与各变换后的移动量对应的移动量信息与按钮操作信息一起作为操作信息“滑动”,从车载装置1向便携终端2发送。
根据以上说明的本发明的第2实施方式,除了起到在第1实施方式中说明的(1)~(8)外,还起到以下的(9)那样的作用效果。
(9)当在用户的触摸操作中移动触摸位置由此进行滑动操作时,控制部10在步骤S80发送操作信息“移动”,在步骤S90发送操作信息“敲击”后,在步骤S94发送包含表示预定的按钮操作的按钮操作信息和与触摸位置的移动量对应的移动量信息的操作信息“滑动”。于是,在便携终端2中能够切实地识别用户对车载装置1进行的滑动操作的内容。
在以上说明的各实施方式中,说明了以下的例子,即经由影像/声音电缆3将车载装置1和便携终端2相互连接,由此从便携终端2向车载装置1发送影像信号和声音信号。另外,说明了以下的例子,即通过依照蓝牙等规定的通信规格进行的近距离无线通信,在车载装置1和便携终端2之间进行通信。但是,使用其他的通信方式、信号传送方式也能够实现本发明。例如,也可以通过无线通信从便携终端2向车载装置1发送影像信号、声音信号。另外,也可以使用USB等有线通信进行车载装置1和便携终端2之间的通信。在该情况下,在图7的步骤S80、S90、S110以及S120中,能够代替上述HID分组,而利用USB中的鼠标用的通信格式等,从车载装置1向便携终端2发送操作信息。只要能够在车载装置1和便携终端2之间收发必要的信号、信息,则可以采用任意的通信方式。
在以上说明的实施方式中,除了车速信号、停车信号以外,也可以在车载装置1中取得从车辆输出的各种车辆信息。这时取得的车辆信息既可以在车载装置1执行的处理中利用,或者也可以从车载装置1向便携终端2输出,而在便携终端2执行的处理中利用。作为一个例子,预先对每个应用设定与车辆信息对应的启动条件,在从车辆输出了满足该启动条件的车辆信息时,能够在便携终端2中自动地启动该应用。在该情况下,可以从便携终端2向车载装置1发送表示各应用的启动条件的信息,在车载装置1中根据车辆信息判定是否满足启动条件。或者,也可以从车载装置1向便携终端2发送车辆信息,在便携终端2中根据该车辆信息判定是否满足启动条件。由此,例如在从车辆输出了燃料剩余量减少到不满规定值这样的车辆信息时,能够在便携终端2中自动地启动用于检索当前位置周边的加油站的应用。
在以上说明的实施方式中,说明了以下的情况的例子,即将车载装置1的显示部11设为触摸面板,在该显示部11中显示从便携终端2接收到的图像。但是,本发明的应用范围并不限于此。只要与信息终端连接而将从该信息终端接收到的图像显示在触摸面板中,则无论在怎样的显示装置中都能够应用本发明。
以上说明的实施方式、各种变形例子只不过是一个例子,只要不损害发明的特征,则本发明并不限于这些内容。另外,也可以任意地组合使用上述实施方式和变形例子。
在此作为引用文献收容了以下的优先权基础申请的公开内容。
日本专利申请2013年第50791号(2013年3月13日申请)
符号说明
1:车载装置、2:便携终端、3:影像/声音电缆、10:控制部、11:显示部、12:操作部、13:声音输出部、14:存储部、15:近距离无线通信接口部、16:影像/声音信号输入部、20:控制部、21:显示部、22:操作部、23:声音输出部、24:存储部、25:近距离无线通信接口部、26:影像/声音信号输出部、27:无线通信部、28:GPS接收部。

Claims (6)

1.一种显示装置,其与能够执行应用的信息终端连接,其特征在于,具备:
图像接收部,其从所述信息终端接收包含光标的画面的图像信息;
触摸面板,其根据所述图像接收部接收到的图像信息显示所述画面,并检测通过触摸操作指定的触摸位置;以及
发送部,其向所述信息终端发送与所述触摸操作对应的操作信息,
在所述触摸操作中以向预定方向拉动所述触摸位置的方式快速移动时,在所述触摸面板上维持所述触摸操作的期间所述发送部按预定时间对所述信息终端中在所述应用的后台执行的应用管理器发送操作信息,所述操作信息包括表示预定的按钮操作的按钮信息、以及与所述触摸位置的移动量对应的移动量信息。
2.一种显示装置,其与信息终端连接,其特征在于,具备:
图像接收部,其从所述信息终端接收包含光标的画面的图像信息;
触摸面板,其根据所述图像接收部接收到的图像信息显示所述画面,并检测通过触摸操作指定的触摸位置;以及
发送部,其向所述信息终端发送与所述触摸操作对应的操作信息,
在连续进行了所述触摸操作的情况下,所述发送部延迟发送所述操作信息,以便在所述信息终端中不执行加速度处理,
在连续进行了预定次数以上的所述触摸操作的情况下,所述发送部不发送超过所述预定次数的所述触摸操作的所述操作信息。
3.一种显示装置,其与信息终端连接,其特征在于,具备:
图像接收部,其从所述信息终端接收包含光标的画面的图像信息;
触摸面板,其根据所述图像接收部接收到的图像信息显示所述画面,并检测通过触摸操作指定的触摸位置;以及
发送部,其向所述信息终端发送与所述触摸操作对应的操作信息,以便在所述信息终端中不执行加速度处理,
在连续进行了所述触摸操作的情况下,所述发送部延迟发送所述操作信息,
在连续多次进行所述触摸操作,且延迟的合计时间超过预定时间的情况下,不发送超过所述预定时间的所述触摸操作的所述操作信息。
4.一种信息终端操作方法,其是使用具有触摸面板的显示装置来操作能够执行应用的信息终端的方法,其特征在于,
将所述显示装置与所述信息终端连接,
基于从所述信息终端发送至所述显示装置的图像信息而在所述触摸面板上显示包含光标的画面,
检测通过对所述触摸面板的触摸操作所指定的触摸位置,
从所述显示装置向所述信息终端发送与所述触摸操作相对应的操作信息,
在所述触摸操作中以向预定方向拉动所述触摸位置的方式快速移动时,在所述触摸面板上维持所述触摸操作的期间按预定时间从所述显示装置对所述信息终端中在所述应用的后台执行的应用管理器发送操作信息,所述操作信息包括表示预定的按钮操作的按钮信息、以及与所述触摸位置的移动量对应的移动量信息。
5.一种信息终端操作方法,其是使用具有触摸面板的显示装置来操作信息终端的方法,其特征在于,
将所述显示装置与所述信息终端连接,
基于从所述信息终端发送至所述显示装置的图像信息而在所述触摸面板上显示包含光标的画面,
检测通过对所述触摸面板的触摸操作所指定的触摸位置,
从所述显示装置向所述信息终端发送与所述触摸操作相对应的操作信息,
在连续进行了所述触摸操作的情况下,延迟所述操作信息从所述显示装置发送至所述信息终端,以便在所述信息终端中不执行加速度处理,
在连续进行了预定次数以上的所述触摸操作的情况下,超过所述预定次数的所述触摸操作的所述操作信息不会从所述显示装置发送至所述信息终端。
6.一种信息终端操作方法,其是使用具有触摸面板的显示装置来操作信息终端的方法,其特征在于,
将所述显示装置与所述信息终端连接,
基于从所述信息终端发送至所述显示装置的图像信息而在所述触摸面板上显示包含光标的画面,
检测通过对所述触摸面板的触摸操作所指定的触摸位置,
从所述显示装置向所述信息终端发送与所述触摸操作相对应的操作信息,
在连续进行了所述触摸操作的情况下,延迟所述操作信息从所述显示装置发送至所述信息终端,以便在所述信息终端中不执行加速度处理,
在连续多次进行所述触摸操作,且延迟的合计时间超过预定时间的情况下,超过所述预定时间的所述触摸操作的所述操作信息不会从所述显示装置发送至所述信息终端。
CN201811110778.2A 2013-03-13 2014-03-04 显示装置以及信息终端操作方法 Active CN109240633B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2013050791 2013-03-13
JP2013-050791 2013-03-13
CN201480014777.1A CN105190522B (zh) 2013-03-13 2014-03-04 显示装置

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201480014777.1A Division CN105190522B (zh) 2013-03-13 2014-03-04 显示装置

Publications (2)

Publication Number Publication Date
CN109240633A CN109240633A (zh) 2019-01-18
CN109240633B true CN109240633B (zh) 2021-10-22

Family

ID=51536620

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201811110778.2A Active CN109240633B (zh) 2013-03-13 2014-03-04 显示装置以及信息终端操作方法
CN201480014777.1A Active CN105190522B (zh) 2013-03-13 2014-03-04 显示装置

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201480014777.1A Active CN105190522B (zh) 2013-03-13 2014-03-04 显示装置

Country Status (5)

Country Link
US (2) US9846506B2 (zh)
EP (1) EP2975829B1 (zh)
JP (2) JP6317326B2 (zh)
CN (2) CN109240633B (zh)
WO (1) WO2014141954A1 (zh)

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104679469B (zh) * 2014-12-29 2019-02-26 合肥杰发科技有限公司 车载终端及其获取手持终端的屏幕分辨率的方法
JP6724463B2 (ja) * 2016-03-24 2020-07-15 株式会社Ihi 電子機器、対象システムの操作方法、および操作プログラム
US10476963B2 (en) * 2016-05-09 2019-11-12 Honda Motor Co., Ltd. System and method for contacting vehicle for tandem parking
US9817511B1 (en) * 2016-09-16 2017-11-14 International Business Machines Corporation Reaching any touch screen portion with one hand
KR102372803B1 (ko) * 2017-07-12 2022-03-10 미래나노텍(주) 양방향 터치스크린 장치 및 이를 이용한 정보 표시 방법
CN107747949A (zh) * 2017-09-28 2018-03-02 惠州Tcl移动通信有限公司 导航时车载终端画面投射的方法、移动终端及存储介质
IL259518B2 (en) 2018-05-22 2023-04-01 Lumus Ltd Optical system and method for improving light field uniformity
GB2577067B (en) * 2018-09-12 2021-01-13 Avecto Ltd Controlling applications by an application control system in a computer device
JP6778735B2 (ja) * 2018-12-26 2020-11-04 本田技研工業株式会社 表示装置、表示方法、およびプログラム
CN112463086A (zh) * 2019-09-06 2021-03-09 华为技术有限公司 一种显示控制方法及电子设备
CN111045590B (zh) * 2019-12-04 2021-06-04 广州小鹏汽车科技有限公司 一种车载模拟按键的方法、系统、存储介质及车辆
CN111645521B (zh) * 2020-05-29 2022-01-18 阿波罗智联(北京)科技有限公司 用于智能后视镜的控制方法、装置、电子设备和存储介质
CN112799557B (zh) * 2021-01-28 2022-03-22 青岛海信移动通信技术股份有限公司 一种水墨屏显示控制方法、终端及计算机可读存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003036141A (ja) * 2001-07-25 2003-02-07 Sony Corp 入力装置
JP2010108212A (ja) * 2008-10-30 2010-05-13 Kyocera Corp コンテンツ処理システム、端末装置及びコンテンツ処理方法
CN102457661A (zh) * 2010-10-18 2012-05-16 奥林巴斯映像株式会社 照相机
WO2012065020A1 (en) * 2010-11-12 2012-05-18 Apple Inc. Device, method, and graphical user interface for navigating a list of identifiers

Family Cites Families (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3841661B2 (ja) * 2001-10-09 2006-11-01 富士通テン株式会社 ナビゲーションシステム、およびナビゲーション装置、並びに携帯電話機
JP2003244343A (ja) 2002-02-21 2003-08-29 Toyota Motor Corp 表示装置、携帯端末及び情報表示システム
US9182937B2 (en) * 2010-10-01 2015-11-10 Z124 Desktop reveal by moving a logical display stack with gestures
JP4765729B2 (ja) 2006-03-31 2011-09-07 カシオ計算機株式会社 コンピュータシステムのクライアント装置およびその制御プログラム、サーバ装置およびその制御プログラム
WO2009073806A2 (en) * 2007-12-05 2009-06-11 Johnson Controls Technology Company Vehicle user interface systems and methods
JP2010086216A (ja) * 2008-09-30 2010-04-15 Fujitsu Ten Ltd 情報処理装置、方法、プログラム、及び情報配信システム
JP2010127781A (ja) * 2008-11-27 2010-06-10 Fujitsu Ten Ltd 車載装置および同装置を有する車載システム
JP2010130553A (ja) * 2008-11-28 2010-06-10 Fujitsu Ten Ltd 車載装置
JP2010130669A (ja) * 2008-12-01 2010-06-10 Fujitsu Ten Ltd 車載装置および無線通信システム
JP5247388B2 (ja) * 2008-12-01 2013-07-24 富士通テン株式会社 車載システムおよび車載システムの操作制御方法
US9258402B2 (en) * 2009-04-14 2016-02-09 Qualcomm Incorporated System and method for controlling mobile devices
JP5442326B2 (ja) * 2009-06-15 2014-03-12 アルパイン株式会社 車載用通信装置
JP2011033460A (ja) * 2009-07-31 2011-02-17 Fujitsu Ten Ltd ナビゲーションシステム、車載機、ナビゲーション方法及びプログラム
JP5667984B2 (ja) * 2010-01-26 2015-02-12 パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカPanasonic Intellectual Property Corporation of America 表示制御装置、表示制御方法、プログラムおよび集積回路
US8265928B2 (en) * 2010-04-14 2012-09-11 Google Inc. Geotagged environmental audio for enhanced speech recognition accuracy
JP5494318B2 (ja) * 2010-07-20 2014-05-14 株式会社デンソー 携帯端末および通信システム
JP5628612B2 (ja) * 2010-09-17 2014-11-19 クラリオン株式会社 車載情報システム、車載装置、情報端末
JP5633341B2 (ja) 2010-11-30 2014-12-03 カシオ計算機株式会社 サーバベース・コンピューティング・システムのクライアント装置、サーバ装置、およびプログラム
JP5429198B2 (ja) * 2011-01-12 2014-02-26 コニカミノルタ株式会社 画像処理装置、画像形成システム、および制御プログラム
JP5472256B2 (ja) * 2011-05-06 2014-04-16 株式会社デンソー 車両用表示装置および情報表示システム
JP5629242B2 (ja) 2011-06-10 2014-11-19 京セラ株式会社 通信端末
KR20130053185A (ko) * 2011-11-15 2013-05-23 삼성전자주식회사 전자기기들 간의 상호 제어 방법 및 시스템
JP5999452B2 (ja) * 2012-01-26 2016-09-28 パナソニックIpマネジメント株式会社 携帯端末及び機器連携方法
JP6124169B2 (ja) 2012-06-08 2017-05-10 クラリオン株式会社 表示装置
JP6032286B2 (ja) * 2012-08-27 2016-11-24 日本電気株式会社 車載機、携帯端末制御方法およびプログラム
JP5866027B2 (ja) * 2012-10-19 2016-02-17 三菱電機株式会社 情報処理装置、情報端末、情報処理システムおよびキャリブレーション方法
US9430067B2 (en) * 2013-01-11 2016-08-30 Sony Corporation Device and method for touch detection on a display panel
CN103631866B (zh) * 2013-11-01 2017-01-18 北京奇虎科技有限公司 网页的显示方法和浏览器

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003036141A (ja) * 2001-07-25 2003-02-07 Sony Corp 入力装置
JP2010108212A (ja) * 2008-10-30 2010-05-13 Kyocera Corp コンテンツ処理システム、端末装置及びコンテンツ処理方法
CN102457661A (zh) * 2010-10-18 2012-05-16 奥林巴斯映像株式会社 照相机
WO2012065020A1 (en) * 2010-11-12 2012-05-18 Apple Inc. Device, method, and graphical user interface for navigating a list of identifiers

Also Published As

Publication number Publication date
JP2018110039A (ja) 2018-07-12
CN105190522A (zh) 2015-12-23
US9846506B2 (en) 2017-12-19
CN109240633A (zh) 2019-01-18
WO2014141954A1 (ja) 2014-09-18
JP6317326B2 (ja) 2018-04-25
CN105190522B (zh) 2018-10-23
EP2975829A1 (en) 2016-01-20
US20180136779A1 (en) 2018-05-17
EP2975829B1 (en) 2022-02-09
EP2975829A4 (en) 2016-12-28
JPWO2014141954A1 (ja) 2017-02-16
JP6559825B2 (ja) 2019-08-14
US20160018943A1 (en) 2016-01-21

Similar Documents

Publication Publication Date Title
CN109240633B (zh) 显示装置以及信息终端操作方法
CN107621923B (zh) 显示装置
JP6103620B2 (ja) 車載情報システム、情報端末、アプリケーション実行方法、プログラム
JP6058654B2 (ja) 車載情報システム、情報端末、アプリケーション実行方法
EP2648396B1 (en) In-car information system, information terminal, and application execution method
JP5555555B2 (ja) 携帯機器と連携し、該携帯機器に対して可能な入力操作を実現する車載機器
WO2012036279A1 (ja) 車載情報システム、車載装置、情報端末
KR102163991B1 (ko) 휴대 단말기의 아이템 선택 방법 및 장치
US20130229377A1 (en) Accessory protocol for touch screen device accessibility
US20140320405A1 (en) Method for controlling portable terminal by touch device
KR20130133980A (ko) 터치스크린을 가진 단말에서 오브젝트 이동 방법 및 장치
JP6557457B2 (ja) 画像表示システム、画像表示方法、及び表示装置
WO2013180279A1 (ja) 車載情報システム、情報端末、アプリケーション実行方法、プログラム
JP6397530B2 (ja) 表示装置
JP2012063249A (ja) 車載情報システム、車載装置、情報端末
JP2013250132A (ja) 車載装置、車載情報システム
JP2020140420A (ja) 表示制御システムおよび表示制御プログラム
CN110620845B (zh) 信息处理方法、电子设备以及计算设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant