CN104335148B - 显示装置 - Google Patents

显示装置 Download PDF

Info

Publication number
CN104335148B
CN104335148B CN201380030082.8A CN201380030082A CN104335148B CN 104335148 B CN104335148 B CN 104335148B CN 201380030082 A CN201380030082 A CN 201380030082A CN 104335148 B CN104335148 B CN 104335148B
Authority
CN
China
Prior art keywords
mentioned
movement
amount
information
touch
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201380030082.8A
Other languages
English (en)
Other versions
CN104335148A (zh
Inventor
奈良宪和
松雪克哉
阿部宪幸
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Faurecia Clarion Electronics Co Ltd
Original Assignee
Clarion Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Clarion Co Ltd filed Critical Clarion Co Ltd
Priority to CN201710920254.9A priority Critical patent/CN107621923B/zh
Publication of CN104335148A publication Critical patent/CN104335148A/zh
Application granted granted Critical
Publication of CN104335148B publication Critical patent/CN104335148B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416Control or interface arrangements specially adapted for digitisers
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/29Instruments characterised by the way in which information is handled, e.g. showing information on plural displays or prioritising information according to driving conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/80Arrangements for controlling instruments
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/85Arrangements for transferring vehicle- or driver-related data
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/038Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1415Digital output to display device ; Cooperation and interconnection of the display device with other functional units with means for detecting differences between the image stored in the host and the images displayed on the displays
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00General purpose image data processing
    • G06T1/20Processor architectures; Processor configuration, e.g. pipelining
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/12Synchronisation between the display unit and other units, e.g. other display units, video-disc players
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • H04M1/72412User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories using two-way short-range wireless interfaces
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/143Touch sensitive instrument input devices
    • B60K2360/1438Touch screens
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/143Touch sensitive instrument input devices
    • B60K2360/1438Touch screens
    • B60K2360/1442Emulation of input devices
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/18Information management
    • B60K2360/184Displaying the same information on different displays
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/55Remote control arrangements
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/55Remote control arrangements
    • B60K2360/56Remote control arrangements using mobile devices
    • B60K2360/563Vehicle displaying mobile device information
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/55Remote control arrangements
    • B60K2360/56Remote control arrangements using mobile devices
    • B60K2360/566Mobile devices displaying vehicle information
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/55Remote control arrangements
    • B60K2360/56Remote control arrangements using mobile devices
    • B60K2360/569Vehicle controlling mobile device functions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/55Remote control arrangements
    • B60K2360/56Remote control arrangements using mobile devices
    • B60K2360/573Mobile devices controlling vehicle functions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/589Wireless data transfers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/038Indexing scheme relating to G06F3/038
    • G06F2203/0383Remote input, i.e. interface arrangements in which the signals generated by a pointing device are transmitted to a PC at a remote location, e.g. to a PC in a LAN
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/044Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by capacitive means
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2380/00Specific applications
    • G09G2380/10Automotive applications
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/22Details of telephonic subscriber devices including a touch pad, a touch sensor or a touch detector

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Transportation (AREA)
  • Combustion & Propulsion (AREA)
  • Chemical & Material Sciences (AREA)
  • Mechanical Engineering (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computer Hardware Design (AREA)
  • Position Input By Displaying (AREA)
  • Navigation (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

与信息终端连接的显示装置具备:图像接收部,其从信息终端接收包含光标的画面的图像信息;触摸屏,其根据通过图像接收部接收到的图像信息显示画面,检测通过触摸操作指定的触摸位置;发送部,其向信息终端发送与从光标的显示位置到触摸位置为止的移动量对应的移动量信息。

Description

显示装置
技术领域
本发明涉及一种显示装置。
背景技术
以前,已知以下的技术,将与便携电话的各操作键对应的多个触摸开关与便携电话的显示画面一起显示在车载装置的显示器上,如果操作了任意一个触摸开关,则从车载装置向便携电话供给与该触摸开关对应的操作键的操作命令,由此能够操作便携电话(参照专利文献1)。
现有技术文献
专利文献
专利文献1:日本特开2003-244343号公报
发明内容
发明要解决的问题
近年来,除了使用操作键进行操作的现有的便携电话以外,还广泛利用了通过使用触摸屏而能够进行直观的操作的智能手机。在这样的智能手机的情况下,无法利用专利文献1的现有技术实现从车载装置的操作。在这样的现有技术中,并没有提出在通过显示装置显示了智能手机那样的应用了触摸屏操作的信息终端的显示画面时,用于从显示装置操作信息终端的技术。
解决问题的方案
本发明的第一方式的显示装置与信息终端连接,具备:图像接收部,其从信息终端接收包含光标的画面的图像信息;触摸屏,其根据通过图像接收部接收到的图像信息显示画面,检测通过触摸操作指定的触摸位置;以及发送部,其向信息终端发送与从光标的显示位置到触摸位置为止的移动量对应的移动量信息。
根据本发明的第二方式,优选在第一方式的显示装置中,发送部进一步向信息终端发送表示进行了规定的按键操作的按键操作信息。
根据本发明的第三方式,优选在第二方式的显示装置中,在触摸位置不变化地触摸操作在规定时间以内结束的情况下,发送部在发送了与从光标的显示位置到触摸位置为止的移动量对应的移动量信息后,将按键操作信息与表示移动量是0的移动量信息一起发送。
根据本发明的第四方式,优选在第二或第三方式的显示装置中,在触摸位置不变化地连续多次进行了触摸操作的情况下,发送部在发送了与从光标的显示位置到触摸位置为止的移动量对应的移动量信息后,将按键操作信息与表示移动量是0的移动量信息一起发送多次。
根据本发明的第五方式,优选在第二~第四方式中的任意一个方式的显示装置中,当在触摸操作正在继续的过程中触摸位置进行了变化的情况下,发送部在发送了与从光标的显示位置到触摸位置为止的移动量对应的移动量信息后,在触摸操作正在继续时,将按键操作信息与表示与触摸位置的变化对应的移动量的移动量信息一起发送,在触摸操作结束后,发送表示移动量是0的移动量信息。
根据本发明的第六方式,优选在第二~第五方式中的任意一个方式的显示装置中,在触摸位置不变化地触摸操作持续了规定时间以上的情况下,发送部在发送了与从光标的显示位置到触摸位置为止的移动量对应的移动量信息后,在触摸操作正在继续时,将按键操作信息与表示移动量是0的移动量信息一起发送。
根据本发明的第七方式,优选在第一~第六方式的任意一个方式的显示装置中,发送部利用蓝牙或USB的鼠标用通信格式,发送移动量信息。
本发明的第八方式的显示装置与具有显示监视器的信息终端连接,具备:图像接收部,其从信息终端接收包含光标的画面的图像信息;触摸屏,其根据通过图像接收部接收到的图像信息显示画面,检测通过触摸操作指定的触摸位置;分辨率信息接收部,其从信息终端接收显示器的分辨率信息;变换系数计算部,其根据通过分辨率信息接收部接收到的分辨率信息、预先存储的触摸屏的分辨率,计算与显示器相对于触摸屏的分辨率比对应的变换系数;移动量计算部,其计算从光标的显示位置到触摸位置为止的移动量;变换部,其根据通过变换系数计算部计算出的变换系数,将通过移动量计算部计算出的移动量变换为显示器上的移动量;以及发送部,其向信息终端发送表示通过变换部变换后的移动量的移动量信息。
根据本发明的第九方式,优选在第八方式的显示装置中,变换系数计算部针对触摸屏的横方向和纵方向,分别计算变换系数,移动量计算部针对触摸屏的横方向和纵方向,分别计算从光标的显示位置到触摸位置为止的移动量,变换部使用横方向的变换系数,将对于触摸屏的横方向的移动量变换为显示器上的横方向的移动量,并且使用纵方向的变换系数,将对于触摸屏的纵方向的移动量变换为显示器上的纵方向的移动量。
本发明的第十方式的显示装置与信息终端连接,具备:图像接收部,其从信息终端接收包含在规定的基准位置显示的光标的画面的图像信息;触摸屏,其根据通过图像接收部接收到的图像信息显示画面,并检测通过触摸操作指定的触摸位置;发送部,其向信息终端发送与从光标的显示位置到触摸位置为止的移动量对应的移动量信息。在触摸操作结束后,使光标的显示位置返回基准位置。
根据本发明的第十一方式,优选在第十方式的显示装置中,发送部在触摸操作结束后,向信息终端发送针对触摸屏的横方向和纵方向分别表示规定的最大移动量或最小移动量的移动量信息,由此使光标的显示位置返回基准位置。
根据本发明的第十二方式,优选在第十或第十一方式的显示装置中,光标的指示点位于光标的端部,基准位置在触摸屏中位于光标的从中心朝向指示点的方向的相反的方向的端部。
根据本发明的第十三方式,优选在第十二方式的显示装置中,光标的指示点位于光标的左上端,基准位置位于触摸屏的右下端。
本发明的第十四方式的显示装置与信息终端连接,具备:图像接收部,其从信息终端接收图像;触摸屏,其显示通过图像接收部接收到的图像,并检测通过触摸操作指定的触摸位置。该显示装置与触摸操作对应地使显示在触摸屏的外周部分的光标移动到触摸位置,在触摸操作结束后,使光标返回原来的位置。
根据本发明的第十五方式,优选在第十四方式的显示装置中,在触摸操作结束后,向信息终端发送针对触摸屏的横方向和纵方向分别表示规定的最大移动量或最小移动量的移动量信息,由此使光标的显示位置返回基准位置。
根据本发明的第十六方式,优选在第十四或第十五方式的显示装置中,光标的指示点位于光标的左上端,在触摸操作开始前和结束后,在触摸屏的右下端显示光标。
发明效果
根据本发明,在通过显示装置显示了应用了触摸屏操作的信息终端的显示画面时,能够从显示装置操作信息终端。
附图说明
图1是表示本发明的一实施方式的车载信息系统的结构的图。
图2是表示车载装置和便携终端的结构的框图。
图3是表示便携终端的软件的概要结构的图。
图4是说明在车载装置中进行了触摸操作时的车载装置和便携终端的动作的图。
图5是进行了触摸操作时在车载装置中执行的处理的流程图。
具体实施方式
图1是表示本发明的一实施方式的车载信息系统的结构的图。图1所示的车载信息系统安装在车辆中来使用,通过将车载装置1和便携终端2经由近距离无线通信和影像/声音电缆3的有线通信相互连接而实现。车载装置1被固定在车辆内,例如设置在车辆的仪表面板内等。便携终端2是用户能够携带的便携式的信息终端,例如是便携电话、智能手机等。此外,对于在车载装置1和便携终端2之间进行的近距离无线通信例如可以使用蓝牙等。另外,对于经由影像/声音电缆3的有线通信例如可以使用HDMI(高清多媒体接口)等。
在车载装置1中设置有显示部11。显示部11是能够显示各种图像、影像的触摸屏,例如组合电阻膜方式的触摸屏和液晶显示器而构成。用户通过用手指等在显示部11中触摸操作任意的位置来指定在该位置显示的图标、操作按键等,能够使便携终端2执行希望的功能。此外,除了显示部11以外,还可以在车载装置1中设置与规定的操作对应的操作开关。
在便携终端2中设置有显示部21。显示部21是能够显示各种图像、影像的触摸屏,例如组合静电电容方式的触摸屏开关和液晶显示器而构成。用户对应于在显示部21中显示的图像、影像的内容,用手指等在显示部21上触摸任意的位置,由此能够使便携终端2执行希望的功能。此外,在此说明了将显示部21作为触摸屏的例子,但也可以设为不是触摸屏的普通的显示器。在该情况下,优选在便携终端2中设置与便携终端2执行的处理的内容对应的各种操作开关。或者,也可以将显示部21设为触摸屏式的显示器,并在便携终端2中还设置与规定的操作对应的操作开关。
图2是表示车载装置1和便携终端2的结构的框图。如图2所示,车载装置1具备控制部10、显示部11、操作部12、声音输出部13、存储部14、近距离无线通信接口部15以及影像/声音信号输入部16。另一方面,便携终端2具备控制部20、显示部21、操作部22、声音输出部23、存储部24、近距离无线通信接口部25、影像/声音信号输入部26、无线通信部27、以及GPS(全球定位系统)接收部28。
在车载装置1中,控制部10由微处理器、各种外围电路、RAM、ROM等构成,根据存储在存储部14中的控制程序来执行各种处理。通过由该控制部10进行的处理,来执行各种图像显示处理、声音输出处理等。
并且,控制部10取得从车辆输出的车速信号和停车信号。根据该车速信号和停车信号,控制部10判断车辆的行驶状态是正在行驶中还已停车。此外,例如经由设置在车辆内的通信网络即未图示的CAN(控制器局域网),从安装在车辆中的车速传感器输出车速脉冲,由此从车辆向控制部10输出车速信号和停车信号。
如使用图1上述的那样,显示部11是由液晶显示器等构成的显示器。操作部12是用于检测用户对显示部11的触摸操作的部分,相当于上述触摸屏开关。此外,在图2中,分别表示了显示部11和操作部12,但实际上它们一体地构成一个触摸屏。另外,如上述那样在车载装置1中设置了触摸屏以外的操作开关的情况下,该操作开关也包含在操作部12中。用户向操作部12进行的输入操作内容被输出到控制部10,反映在控制部10进行的处理中。
声音输出部13具有放大器、扬声器等,能够通过控制部10的控制输出各种声音。例如从声音输出部13输出对从便携终端2或未图示的记录介质读出的音乐数据进行重放的音乐、用于将车辆引导到目的地的引导声音等。
存储部14是非易失性的数据存储装置,例如由HDD(硬盘驱动器)、闪速存储器等实现。在存储部14中,例如存储有在控制部10中使用的上述控制程序等各种数据。通过控制部10的控制,根据需要进行存储部14中的数据的读出和写入。
近距离无线通信接口部15根据控制部10的控制进行在与便携终端2之间进行近距离无线通信时所需要的无线接口处理。例如,将从控制部10输出的信息变换为规定的无线信号形式而向便携终端2发送,或者接收从便携终端2以规定的无线信号形式输出的信息然后向控制部10输出。依照蓝牙等规定的通信规格进行近距离无线通信接口部15的接口处理。
影像/声音信号输入部16接收经由影像/声音电缆3从便携终端2输入的影像信号和声音信号,将这些信号分别变换为画面显示用的图像(影像)数据和声音输出用的声音数据并向控制部10输出。如果从影像/声音信号输入部16向控制部10输出了图像数据和声音数据,则控制部10控制显示部11使显示部11对基于该图像数据的图像进行画面显示,并且控制声音输出部13使声音输出部13输出基于该声音数据的声音。
另一方面,在便携终端2中,控制部20与车载装置1的控制部10同样地,由微处理器、各种外围电路、RAM、ROM等构成,根据存储在存储部24中的控制程序执行各种处理。
显示部21是上述那样的触摸屏式的显示器。操作部22是用于检测用户的输入操作的部分。此外,在图2中,将显示部21和操作部22显示为各自的结构,但实际上与上述显示部11同样地,显示部21和操作部22一体地构成一个触摸屏。另外,如上述那样在便携终端2中设置了触摸屏以外的操作开关的情况下,该操作开关也包含在操作部22中。用户向操作部22进行的输入操作内容被输出到控制部20,反映在控制部20进行的处理中。
声音输出部23具有放大器、扬声器等,能够通过控制部20的控制输出各种声音。例如,在使用便携终端2进行通话时,从声音输出部23输出通话对方的声音。
存储部24是与车载装置1的存储部14相同的非易失性的数据存储装置,存储有用于在控制部20的处理中利用的各种数据。在该存储部24中,存储有用户预先得到的各种应用程序(以下简称为应用)。用户通过从存储在存储部24中的各种应用程序中选择任意一个而使控制部20执行,能够在便携终端2中实现各种功能。
近距离无线通信接口部25与车载装置1的近距离无线通信接口部15同样地,进行基于规定的通信规格的无线接口处理。即,近距离无线通信接口部15和近距离无线通信接口部25相互通过无线通信收发信息,由此实现车载装置1和便携终端2之间的信息通信。
影像/声音信号输出部26将通过控制部20生成的图像(影像)和声音分别变换为例如与HDMI等规定的通信规格对应的影像信号和声音信号,经由影像/声音电缆3向车载装置1输出。如果该影像信号和声音信号在车载装置1中输入到影像/声音信号输入部16,则在车载装置1的显示部11中还显示与在便携终端2中显示在显示部21中的图像相同的图像(画面)。另外,从车载装置1的声音输出部13还输出与在便携终端2中从声音输出部23输出的声音相同的声音。将这样的功能称为视频镜像。
无线通信部27进行经由未图示的无线通信线路网将便携终端2与其他便携终端、服务器连接的无线通信。便携终端2能够通过无线通信部27进行的无线通信,在与其他便携终端之间进行通话,或者从服务器下载任意的应用。此外,在无线通信部27进行的无线通信中,例如能够利用便携电话线路网、经由无线LAN的因特网线路网等作为无线通信线路网。
GPS接收部28接收从GPS卫星发送的GPS信号并向控制部20输出。在GPS信号中,作为用于求出便携终端2的当前位置和当前时刻的信息,包含与发送了该GPS信号的GPS卫星的位置和发送时刻相关的信息。因此,通过从规定个数以上的GPS卫星接收GPS信号,能够在控制部20中根据这些信息计算当前位置和当前时刻。
接着,说明本车载信息系统的车载装置1和便携终端2的协作功能。车载信息系统具有车载装置1和便携终端2的协作功能。通过使用该协作功能,如果在车载装置1和便携终端2相互连接的状态下在便携终端2中执行各种应用,则能够在车载装置1中进行与该应用对应的图像显示、声音输出。另外,能够将用户对车载装置1进行的操作内容反映到在便携终端2中正在执行的应用的动作中。
例如,通过在便携终端2中执行导航用的应用,能够进行用于将车辆引导到目的地的导航处理。在该导航处理中,在便携终端2中生成描绘了当前位置附近的地图的地图画面,通过上述影像信号,将表示该地图画面的图像信息从影像/声音信号输出部26经由影像/声音电缆3向影像/声音信号输入部16输出。由此,能够从便携终端2向车载装置1发送地图画面,而在车载装置1的显示部11中显示当前位置附近的地图画面。另外,如果用户操作车载装置1的操作部12或便携终端2的操作部22来设定目的地,则将车辆的当前位置作为出发地,在便携终端2中探索从此处到设定的目的地为止的推荐路径。然后,如果车辆接近推荐路径上的引导地点,则从便携终端2向车载装置1发送与该引导地点的车辆的行进方向对应的引导声音。由此,能够从车载装置1的声音输出部13输出引导声音。此外,这时,也可以与引导声音输出的开始和结束的定时对应地,从便携终端2向车载装置1分别输出规定的信号。由此,即使在车载装置1中正在输出收音机广播或正在重放的CD等的声音的情况下,也能够在引导声音的输出过程中降低该声音的音量,使用户容易听到引导声音。如以上说明的那样,通过在显示部11中显示地图图像,或者从声音输出部13输出引导声音,车载装置1向用户进行报告使得用户能够不会迷路地将车辆驾驶到目的地。
此外,便携终端2执行导航用的应用所需要的地图数据等各种数据也可以使用预先存储在便携终端2的存储部24中的数据。或者也可以只将必要最小限的数据存储在存储部24中,在便携终端2执行了导航用的应用时,使用无线通信部27与规定的服务器连接,每次取得必要的数据。
在便携终端2中,执行包含上述那样的导航用的应用的多个应用中的被用户选择的应用。用户在显示在便携终端2的显示部21中的菜单画面中,对操作部22进行操作来选择希望的应用,由此能够选择使便携终端2执行的应用。在该菜单画面中,例如并排地显示有能够利用协作功能的各应用的图标。如果用户在菜单画面上通过触摸屏操作等选择了任意一个图标,则在便携终端2中执行与该图标对应的应用。
并且,便携终端2根据来自影像/声音信号输出部26的影像信号,向车载装置1发送菜单画面。车载装置1根据从便携终端2发送的影像信号,在显示部11上显示菜单画面。如果在该菜单画面中,用户通过作为触摸屏的一部分的操作部12的触摸操作选择了希望的应用,则通过近距离无线通信接口部15从车载装置1向便携终端2发送与该触摸操作对应的操作信息。
在便携终端2中通过近距离无线通信接口部25接收从车载装置1发送的操作信息,向控制部20输出。根据这样接收到的操作信息,控制部20识别在车载装置1中用户选择了哪个应用,执行该应用。由此,与使用显示在便携终端2的显示部21中的菜单画面的情况同样地,用户能够在车载装置1中选择希望的应用,使便携终端2执行。
此外,控制部20能够在前台或后台执行各应用。在前台执行的情况下,该应用在车载装置1和便携终端2中成为图像显示、操作输入的对象。另一方面,在后台执行的情况下,通过控制部20执行与该应用对应的处理,但该应用在车载装置1和便携终端2中不成为图像显示、操作输入的对象。但是,对于声音,也可以从正在后台执行的应用输出。
为了将车载装置1和便携终端2相互连接来实现上述那样的协作功能,在便携终端2中预先安装被称为应用管理器的应用,存储在存储部24中。即,在存储部24中,存储有包含应用管理器的多个应用。如果便携终端2与车载装置1连接,则从存储部24读出该应用管理器,在控制部20中执行。
图3是表示便携终端2中的软件的概要结构的图。在图3中,应用管理器201具有子应用Ma和子应用Ms。
子应用Ma具有用于启动应用管理器201以外的应用的启动器功能、用于取得各应用的限制信息的限制信息取得功能。控制部20通过在前台执行子应用Ma,能够利用这些功能。例如,能够使用启动器功能,调用其他应用,代替子应用Ma使控制部20在前台执行该应用。另外,可以使用限制信息取得功能,从存储部24或外部的服务器等取得表示在车辆行驶过程中对存储在存储部24中的各应用的动作限制的内容的限制信息。
子应用Ms具有用于将便携终端2与车载装置1连接的通信功能、用于进行车辆行驶中的动作限制的动作限制功能。控制部20通过在后台执行子应用Ms,能够利用这些功能。例如,可以使用通信功能,执行用于在便携终端2和车载装置1之间收发协作时所需要的信息的通信处理。另外,可以使用动作限制功能,参照通过上述子应用Ma使用限制信息取得功能取得的限制信息,判断在车辆行驶过程中对在前台正在执行的应用的动作限制的内容。通过上述通信功能从便携终端2向车载装置1发送表示该判断结果的限制信息,在车载装置1中进行车辆行驶中的动作限制时使用。
如以上说明的那样,应用管理器201分为在控制部20中在前台执行的子应用Ma和在控制部20中在后台执行的子应用Ms而构成。由此,能够使应用管理器201的功能分担最优化,成为适合于在前台和后台分别执行的功能分担。此外,还有时将像子应用Ms那样始终在后台执行的应用称为常驻程序或服务。
应用管理器201通过子应用Ma的启动器功能,调用在应用202中包含的各应用中的任意一个应用。这样,通过控制部20,代替子应用Ma在前台执行该应用。此外,在以下的对图3的说明中,说明为正在执行应用A。
OS(操作系统)203是用于管理便携终端2的全体动作的软件。在将便携终端2与车载装置1连接的情况下,OS203对在控制部20中在后台执行的子应用Ms和在SPP(串行端口配置:Serial Port Profile)204和HID(人机接口设备:Human Interface Device)配置205之间输入输出的信息进行中介。SPP204和HID配置205是在车载装置1和便携终端2之间进行的近距离无线通信中使用的驱动器,被标准化为在蓝牙中使用的规格的一部分。
SPP204进行用于发送上述限制信息的处理,该限制信息表示了基于子应用Ms的动作限制功能的动作限制内容的判断结果、以及用于接收与车辆的行驶状态对应地从车载装置1发送的行驶信息的处理。另一方面,HID配置205进行用于接收与车载装置1中的用户的操作内容对应地输出的操作信息的处理。把通过SPP204和HID配置205接收到的各信息的内容经由OS203输出到子应用Ms,通过子应用Ms的通信功能向正在执行的应用传递。此外,在车载装置1的近距离无线通信接口部15和便携终端2的近距离无线通信接口部25之间通过无线通信进行这些各信息的收发。
在控制部20中在前台正在执行子应用Ma的情况下,子应用Ma通过上述启动器功能,生成用于使用户选择执行的应用的菜单画面的图像。另外,在控制部20中在前台正在执行应用A的情况下,应用A根据需要利用从子应用Ms传送的行驶信息、操作信息,生成规定的图像、声音。在将这些图像、声音暂时存储在声音/图像存储器206中后,向HDMI驱动器207输出。
HDMI驱动器207进行以下处理,依照在HDMI中确定的方式,将通过子应用Ma或应用A生成的图像、声音变换为影像信号、声音信号。通过影像/声音信号输出部26,经由影像/声音电缆3将该影像信号、声音信号向车载装置1输出。
便携终端2具有以上说明的软件结构。此外,例如可以使用安卓(Android)来实现这样的软件结构。在该情况下,例如通过被称为“Activity”的线程来执行子应用Ma,通过被称为“Service”的线程来执行子应用Ma,由此能够在控制部20中在前台执行子应用Ma,同时在后台执行子应用Ms。
接着,详细说明用户在车载装置1中进行了触摸操作时的动作。如上述那样,如果用户在显示在车载装置1的显示部11中的画面上进行了触摸操作,则从车载装置1向便携终端2发送与通过该触摸操作指定的触摸位置对应的操作信息。这时,车载装置1利用被称为HID分组的鼠标用的通信格式,向便携终端2发送操作信息。
此外,一般在使用鼠标作为便携终端2的输入设备时,利用蓝牙的鼠标用通信格式即HID分组。在使用了鼠标的情况下,能够通过HID分组,根据规定的数据格式,在每个规定时间从鼠标向便携终端2发送与鼠标的移动对应的移动量信息、与点击操作等各种按键操作对应的按键操作信息。如果接收到通过HID分组从鼠标发送的这些信息,则便携终端2在根据图3所示的HID配置205进行接收处理后,通过OS203进行解读,由此检测鼠标的移动,与该移动对应地使画面上的光标移动。进而,如果进行了点击操作等按键操作,则根据与此时的光标位置对应的画面内容和按键操作的内容,解读用户在画面上进行的操作内容。在控制部20中,与这样通过OS203解读的鼠标的操作内容对应地,启动与在菜单画面上指定的图标对应的应用,或者执行与在正在执行的应用画面上指定的操作对应的处理。
在本实施方式的车载信息系统中,利用上述那样的HID分组,从车载装置1向便携终端2发送与车载装置1中的触摸操作对应的操作信息。由此,在便携终端2中,能够与使用鼠标时同样地通过OS203识别触摸操作内容。
图4(a)、图4(b)是说明在车载装置1中进行了触摸操作时的车载装置1和便携终端2的动作的图。图4(a)表示了触摸操作前的情况。在图4(a)中,在显示部11和显示部21的外周部分中的右下端分别显示的箭头形状的光标40将相当于该箭头的前端部分的光标40的左上端作为指示点。即,在触摸操作前,画面上的光标40在车载装置1中指示相当于显示部11的右下端的基准位置41,在便携终端2中指示相当于显示部21的右下端的基准位置42。此外,这时,光标40的大部分位于显示部11、21的各画面显示的范围外,实际上不显示。因此,在图4(a)中用虚线表示了光标40的显示位置。
在触摸操作前,便携终端2在显示部21中显示包含在基准位置42显示的光标40的画面,并且使用上述影像信号,经由影像/声音电缆3向车载装置1输出该画面的图像信息。如果从便携终端2接收到图像信息,则车载装置1根据该图像信息,在显示部11中显示与在便携终端2的显示部21中显示的画面相同的画面。由此,如图4(a)所示,在显示部11中显示包含在基准位置41显示的光标40的画面。
在此,如图4(a)所示,将针对显示部11的X方向(横方向)的分辨率表示为Xv,将针对Y方向(纵方向)的分辨率表示为Yv。另外,将针对显示部21的X方向(横方向)的分辨率表示为Xs,将针对Y方向(纵方向)的分辨率表示为Ys。在车载装置1和便携终端2中,分别将这些分辨率的信息预先存储在存储部14、24中。
图4(b)表示进行了触摸操作时的情况。如图4(b)所示,假设用户对车载装置1进行触摸操作,指定了触摸位置43。如果检测出该触摸操作,则车载装置1计算出X方向的移动量Px和Y方向的移动量Py,作为从在触摸操作前光标40指示的右下端的基准位置41开始到触摸位置43的移动量。例如通过针对X方向和Y方向分别求出位于从基准位置41到触摸位置43之间的像素数,来计算该移动量Px、Py。在此,如图中所示那样,在以显示部11的左上端为起点,将右方向确定为X的正方向,将下方向确定为Y的正方向的情况下,全部作为负的值求出从基准位置41到触摸位置43的移动量Px、Py。
如果如上述那样计算出X方向的移动量Px和Y方向的移动量Py,则接着车载装置1将该移动量Px、Py变换为便携终端2的显示部21上的移动量Qx、Qy。根据上述分辨率Xv、Yv、Xs、Ys,使用下述的公式(1)进行该移动量的变换。
Qx=Px×(Xs/Xv)、Qy=Py×(Ys/Yv)……(1)
在上述公式(1)中,Xs/Xv和Ys/Yv是将移动量Px、Py分别变换为移动量Qx、Qy时的变换系数。车载装置1通过事前从便携终端2取得显示部21的分辨率Xs、Ys,能够求出这些变换系数。
如果计算出变换后的移动量Qx、Qy,则车载装置1通过HID分组向便携终端2发送表示这些移动量Qx、Qy的移动量信息。
如果从车载装置1接收到表示移动量Qx、Qy的移动量信息,则便携终端2通过OS203解读这些移动量Qx、Qy。然后,如图4(b)所示,使光标40从右下端的基准位置42移动移动量Qx、Qy而在显示部21中显示,并且使用上述影像信号,经由影像/声音电缆3向车载装置1输出包含该移动后的光标40的画面的图像信息。
如果从便携终端2接收到包含移动后的光标40的画面的图像信息,则车载装置1根据该图像信息,在显示部11中显示与便携终端2的显示部21中显示的画面相同的画面。由此,如图4(b)所示,在显示部11中显示光标40指示了触摸位置43的画面。
在发送了表示移动量Qx、Qy的移动量信息后,车载装置1通过HID分组向便携终端2发送表示移动量为0的移动量信息。这时,并且一起发送表示进行了规定的按键操作、例如左点击操作的按键操作信息。
如果从车载装置1接收到上述移动量信息和按键操作信息,则便携终端2通过OS203解读该按键操作信息所示的按键操作的内容。然后,与在移动后的光标40的显示位置、即触摸位置43显示的画面内容、按键操作内容对应地,例如进行与触摸位置43的图标对应的应用的启动等。如以上说明的那样,能够在便携终端2中执行与用户对车载装置1进行的触摸操作对应的处理。
此外,以上说明的触摸操作时的动作是用户如一次点击那样指定触摸屏上的特定的触摸位置的单击操作的情况的例子。在该情况下,车载装置1向便携终端2发送与用鼠标进行了点击操作的情况相同的操作信息。除此以外,用户也可以针对车载装置1进行以下的操作等,即例如如2次点击那样指定同一触摸位置的双击操作、一边进行触摸操作一边使触摸位置向规定方向移动的滑动操作、规定时间以上地持续触摸同一触摸位置的长按操作。车载装置1分别识别这些触摸操作的种类,针对触摸操作的每个种类改变向便携终端2发送的操作信息。
具体地说,在进行了双击操作的情况下,车载装置1在与移动量Px、Py对应地发送了表示变换后的移动量Qx、Qy的移动量信息后,与表示移动量为0的移动量信息一起,2次发送表示规定的按键操作的按键操作信息。即,向便携终端2发送与用鼠标进行了双击操作的情况同样的操作信息。
另一方面,在进行了滑动操作的情况下,车载装置1在与移动量Px、Py对应地发送了表示变换后的移动量Qx、Qy的移动量信息后,在每个规定时间计算滑动操作中的触摸位置的移动量。然后,根据上述公式(1),将滑动操作中的触摸位置的移动量变换为便携终端2的显示部21上的移动量,与表示规定的按键操作的按键操作信息一起发送表示该变换后的移动量的移动量信息。如果滑动操作结束,则最后发送表示移动量为0的移动量信息。即,向便携终端2发送与用鼠标进行了拖拽动作的情况相同的操作信息。
另外,在进行了长按操作的情况下,车载装置1在与移动量Px、Py对应地发送了表示变换后的移动量Qx、Qy的移动量信息后,在长按操作的期间,与表示移动量为0的移动量信息一起,持续发送表示规定的按键操作的按键操作信息。即,向便携终端2发送与不使鼠标移动进行了长按操作的情况相同的操作信息。
便携终端2通过从车载装置1接收以上说明那样的与触摸操作的种类对应的操作信息,能够识别用户对车载装置1进行的触摸操作的种类,执行与该触摸操作对应的处理。
图5是进行了触摸操作时在车载装置1中执行的处理的流程图。如果在车载装置1和便携终端2之间确立了通信,则通过控制部10执行该流程图所示的处理。
在步骤S10中,控制部10使用近距离无线通信接口部15接收从便携终端2发送的显示部21的分辨率信息。在此,如上述那样,从便携终端2接收针对显示部21的X方向的分辨率Xs、针对Y方向的分辨率Ys。
在步骤S20中,控制部10根据在步骤S10中从便携终端2接收到的显示部21的分辨率信息、预先存储在存储部14中的显示部11的分辨率,计算与显示部21相对于显示部11的分辨率比对应的变换系数。在此,如上述公式(1)所示那样,分别将在步骤S10中接收到的分辨率信息所示的显示部21的分辨率Xs、Ys除以针对显示部11的X方向的分辨率Xv和针对Y方向的分辨率Yv,来计算针对X方向的变换系数Xs/Xv、针对Y方向的变换系数Ys/Yv。
在步骤S30中,控制部10判定是否从用户对与显示部11一体地构成的触摸屏即操作部12进行了触摸操作。在进行了触摸操作的情况下,检测出该触摸操作,前进到步骤S40。
在步骤S40中,控制部10计算从在步骤S30中检测出触摸操作时的光标的显示位置到通过该触摸操作指定的触摸位置为止的移动量。在此,如上述那样,作为从右下端的基准位置41到触摸位置43为止的移动量,计算出X方向的移动量Px和Y方向的移动量Py。
在步骤S50中,控制部10将在步骤S40中计算出的移动量变换为便携终端2的显示部21上的移动量。在此,使用在步骤S20中计算出的X方向的变换系数Xs/Xv和Y方向的变换系数Ys/Yv,根据上述公式(1),将针对显示部11计算出的X方向的移动量Px和Y方向的移动量Py分别变换为显示部21上的X方向的移动量Qx和Y方向的移动量Qy。
在步骤S60中,控制部10使用近距离无线通信接口部15,向便携终端2发送表示在步骤S50中变换后的移动量的移动量信息。由此,从车载装置1向便携终端2发送与从触摸操作时的光标的显示位置到检测出的触摸位置为止的移动量对应的移动量信息。如上述那样,利用作为鼠标用的通信格式的HID分组进行该移动量信息的发送。这样从车载装置1发送的移动量信息在便携终端2中通过近距离无线通信接口部25接收,并通过OS203解读。结果是在便携终端2中画面上的光标位置移动,从便携终端2向车载装置1发送包含移动后的光标的图像信息并将其显示在显示部11中。
在步骤S70中,控制部10判定在步骤S30中检测出的触摸操作是否正在持续。在触摸操作在规定时间以内结束的情况下,判定为触摸操作没有持续,前进到步骤S80,在正在持续的情况下,前进到步骤S130。
在从步骤S70前进到S80的情况下,在步骤S80中,控制部10将移动量信息中的移动量设定为0。在此,针对X方向、Y方向的任意一个,都将移动量设为0。接着,在步骤S90中,控制部10使用近距离无线通信接口部15,向便携终端2发送表示在步骤S80中设定的移动量为0的移动量信息、表示进行了左点击操作等规定的按键操作的按键操作信息。
在步骤S100中,控制部10判定针对与显示部11一体地构成的触摸屏即操作部12,是否接着在步骤S30中检测出的触摸操作进一步进行了触摸操作。在没有连续进行触摸操作的情况下,即在单击操作的情况下,前进到步骤S110。由此,在进行了单击操作的情况下,在步骤S60中发送了移动量信息后只执行一次步骤S90,将按键操作信息与表示移动量为0的移动量信息一起从车载装置1向便携终端2发送。
另一方面,当在步骤S100中判定为连续地进行了触摸操作的情况下,返回到步骤S90,将步骤S90重复执行该触摸操作的次数。由此,在进行了双击操作的情况下,在步骤S60中发送了移动量信息后2次执行步骤S90,将按键操作信息与表示移动量为0的移动量信息一起从车载装置1向便携终端2发送2次。此外,在持续进行了3次以上的触摸操作的情况下,也可以通过将第3次以后的触摸操作设为无效而作为双击操作进行处理。或者,也可以通过将步骤S90重复执行触摸操作的次数,3次以上地持续发送移动量信息和按键操作信息。
在步骤S110中,控制部10将移动量信息中的移动量设定为规定的最大值。在此,针对X方向、Y方向的任意一个,都设定预先设定的最大移动量。接着在步骤S120中,控制部10使用近距离无线通信接口部15,向便携终端2发送表示在步骤S110中设定的最大移动量的移动量信息。如果执行了步骤S120,则返回到步骤S30,重复进行上述那样的处理。
在步骤S120中发送的表示最大移动量的移动量信息在便携终端2中通过近距离无线通信接口部25接收,并通过OS203解读。于是,显示部21的画面上的光标的显示位置与通过前不久对车载装置1的触摸操作所指定的触摸位置无关地,移动到X方向和Y方向的最大位置、即图4(a)、图4(b)所示的右下端的基准位置42。通过从便携终端2向车载装置1发送与该光标移动后的画面对应的图像信息并显示在显示部11中,在车载装置1中,显示部11的画面上的光标的显示位置返回到原来的基准位置41。
另一方面,在从步骤S70前进到步骤S130的情况下,在步骤S130中,控制部10判定基于步骤S30中检测出的触摸操作的触摸位置是否发生了变化。在触摸位置变化了的情况下,前进到步骤S140,在没有变化的情况下,前进到步骤S200。
在从步骤S130前进到步骤S140的情况下,在步骤S140中,控制部10计算从前不久的触摸位置到当前的触摸位置为止的移动量。在接着的步骤S150中,控制部10与上述步骤S50同样地使用公式(1),将在步骤S140中计算出的移动量变换为便携终端2的显示部21上的移动量。
在步骤S160中,控制部10使用近距离无线通信接口部15,向便携终端2发送表示在步骤S150中变换后的移动量的移动量信息、表示进行了左点击操作等规定的按键操作的按键操作信息。由此,在一边触摸位置变化一边持续进行触摸操作时,从车载装置1向便携终端2发送表示与该触摸位置的变化对应的移动量的移动量信息、按键操作信息。在此发送的移动量信息在便携终端2中通过近距离无线通信接口部25接收,并通过OS203解读。结果,与车载装置1中的触摸位置的变化对应地,在便携终端2中画面上的光标位置移动,从便携终端2向车载装置1发送包含移动后的光标的图像信息并在显示部11中显示。
在步骤S170中,控制部10判定触摸操作是否结束。如果触摸操作正在持续,则返回到步骤S140,重复进行步骤S140~S160的处理。由此,在触摸操作的持续过程中进行了触摸位置变化的点击操作的情况下,当在步骤S60中发送了移动量信息后触摸操作正在持续时,将按键操作信息与表示与触摸位置的变化对应的移动量的移动量信息一起持续发送。如果触摸操作结束,则前进到步骤S180。
在步骤S180中,控制部10与上述步骤S80同样地,将移动量信息中的移动量设定为0。在接着的步骤S190中,控制部10使用近距离无线通信接口部15,向便携终端2发送表示在步骤S180中设定的移动量为0的移动量信息。由此,在进行了点击操作的情况下,在触摸操作结束后,从车载装置1向便携终端2发送表示移动量为0的移动量信息。
如果执行了步骤S190,则控制部10执行上述步骤S110、S120的各处理,由此使显示部11的画面上的光标的显示位置返回到原来的基准位置41。然后,返回到步骤S30,重复进行上述那样的处理。
另一方面,在从步骤S130前进到步骤S200的情况下,在步骤S200中,控制部10与上述步骤S80、S180同样地,将移动量信息中的移动量设定为0。在接着的步骤S210中,控制部10使用近距离无线通信接口部15,向便携终端2发送表示在步骤S200中设定的移动量为0的移动量信息、表示进行了左点击操作等规定的按键操作的按键操作信息。
在步骤S220中,控制部10判定触摸操作是否结束。如果触摸操作正在持续,则返回到步骤S210,重复进行步骤S210的处理。由此,在进行了触摸位置不变化而触摸操作持续规定时间以上的长按操作的情况下,在步骤S60中发送了移动量信息后触摸操作正在持续时,将按键操作信息与表示移动量为0的移动量信息一起持续发送。如果触摸操作结束,则控制部10执行上述步骤S110、S120的各处理,由此使显示部11的画面上的光标的显示位置返回到原来的基准位置41。然后,返回到步骤S30,重复进行上述那样的处理。
根据以上说明的本发明的一个实施方式,起到以下的(1)~(13)那样的作用效果。
(1)车载装置1通过影像/声音信号输入部16从便携终端2接收包含光标40的画面的图像信息,根据该图像信息将该画面显示在作为触摸屏的显示部11中。然后,通过与显示部11一起构成触摸屏的操作部12,检测通过来自用户的触摸操作而指定的触摸位置。这时,通过控制部10的处理,使用近距离无线通信接口部15,向便携终端2发送与从光标40的显示位置到触摸位置为止的移动量对应的移动量信息(步骤S60)。由此,在车载装置1中显示应用了触摸屏操作的便携终端2的显示画面时,能够从车载装置1操作便携终端2。
(2)控制部10使用近距离无线通信接口部15进而向便携终端2发送表示进行了规定的按键操作的按键操作信息(步骤S90、S160、S210)。由此,在便携终端2中,能够通过与使用鼠标时相同的处理识别触摸操作内容。
(3)在触摸位置不变化而触摸操作在规定时间以内结束的情况下,控制部10在步骤S60中发送了与从光标40的显示位置到触摸位置为止的移动量对应的移动量信息后,将按键操作信息与表示移动量为0的移动量信息一起发送(步骤S90)。这样,在进行了单击操作的情况下,从车载装置1向便携终端2发送与用鼠标进行了点击操作的情况相同的操作信息。因此,在便携终端2中,能够将单击操作识别为点击操作。
(4)在触摸位置不变化而多次连续地进行了触摸操作的情况下,控制部10在步骤S60中发送了与从光标40的显示位置到触摸位置为止的移动量对应的移动量信息后,多次执行步骤S90,由此将按键操作信息与表示移动量为0的移动量信息一起多次发送。这样,在进行了双击操作的情况下,从车载装置1向便携终端2发送与用鼠标进行了双击操作的情况相同的操作信息。因此,在便携终端2中,能够将双击操作识别为双点击操作。
(5)在触摸操作持续的过程中触摸位置变化了的情况下,控制部10在步骤S60中发送了与从光标40的显示位置到触摸位置为止的移动量对应的移动量信息后,在触摸操作正在持续时,将按键操作信息与表示与触摸位置的变化对应的移动量的移动量信息一起发送(步骤S160)。另外,在触摸操作结束后,发送表示移动量为0的移动量信息(步骤S190)。这样,在进行了滑动操作的情况下,从车载装置1向便携终端2发送与用鼠标进行了拖拽动作的情况相同的操作信息。因此,在便携终端2中,能够将滑动操作识别为拖拽操作。
(6)在触摸位置不变化而触摸操作持续规定时间以上的情况下,控制部10在步骤S60中发送了与从光标40的显示位置到触摸位置为止的移动量对应的移动量信息后,在触摸操作正在持续时,将按键操作信息与表示移动量为0的移动量信息一起发送(步骤S210)。这样,在进行了长按操作的情况下,从车载装置1向便携终端2发送与不移动鼠标而进行了长按点击操作的情况相同的操作信息。因此,便携终端2中,能够将长按操作识别为长按点击操作。
(7)控制部10在步骤S60、S90、S120、S160、S190、以及S210中,通过近距离无线通信接口部15,利用蓝牙中的鼠标用的通信格式即HID分组发送移动量信息。由此,能够利用现有的通信格式,容易并且确实地实现移动量信息的发送。
(8)车载装置1通过影像/声音信号输入部16,从便携终端2接收包含光标40的画面的图像信息,根据该图像信息,将该画面显示在作为触摸屏的显示部11中。然后,通过与显示部11一起构成触摸屏的操作部12,检测通过来自用户的触摸操作而指定的触摸位置。另外,通过控制部10的处理,使用近距离无线通信接口部15从便携终端2接收显示部21的分辨率信息(步骤S10),根据该分辨率信息、预先存储在存储部14中的显示部11的分辨率,计算与显示部21相对于显示部11的分辨率比对应的变换系数Xs/Xv、Ys/Yv(步骤S20)。然后,计算从光标40的显示位置到触摸位置为止的移动量Px、Py(步骤S40),根据在步骤S20中计算出的变换系数Xs/Xv、Ys/Yv,将计算出的移动量Px、Py变换为显示部21上的移动量Qx、Qy(步骤S50)。向便携终端2发送表示这样变换后的移动量Qx、Qy的移动量信息(步骤S60)。由此,在车载装置1中显示了应用触摸屏操作的便携终端2的显示画面时,即使在车载装置1的显示部11和便携终端2的显示部21之间分辨率不同的情况下,也能够从车载装置1适当地操作便携终端2。
(9)控制部10在步骤S20中针对显示部11的横方向(X方向)和纵方向(Y方向),分别计算变换系数Xs/Xv、Ys/Yv。另外,在步骤S40中,针对显示部11的横方向(X方向)和纵方向(Y方向),分别计算从光标40的显示位置到触摸位置为止的移动量Px、Py。在步骤S50中,使用横方向的变换系数Xs/Xv,将针对显示部11的横方向的移动量Px变换为显示部21上的横方向的移动量Qx,并且使用纵方向的变换系数Ys/Yv,将针对显示部11的纵方向的移动量Py变换为显示部21上的纵方向的移动量Qy。由此,能够与显示部11和显示部21的横方向和纵方向各自的分辨率对应地,正确地求出变换后的移动量Qx、Qy。
(10)车载装置1通过影像/声音信号输入部16从便携终端2接收包含显示在规定的基准位置42的光标40的画面的图像信息,根据该图像信息,将与该画面相同,并且在规定的基准位置41正在显示光标40的画面显示在作为触摸屏的显示部11中。然后,通过与显示部11一起构成触摸屏的操作部12,检测通过来自用户的触摸操作而指定的触摸位置。这时,通过控制部10的处理,使用近距离无线通信接口部15,向便携终端2发送与从光标40的显示位置到触摸位置为止的移动量对应的移动量信息(步骤S60)。由此,从便携终端2接收光标40移动到触摸位置的画面的图像信息,在显示部11中显示。另外,在触摸操作结束后,向便携终端2发送表示最大移动量的移动量信息(步骤S120),由此使光标40的显示位置返回到原来的基准位置41。由此,在车载装置1中显示了应用触摸屏操作的便携终端2的显示画面时,即使由于在车载装置1的显示部11和便携终端2的显示部21之间分辨率不同导致移动后的光标位置产生了误差这样的情况下,也能够不累积该误差地从车载装置1适当地操作便携终端2。
(11)控制部10在步骤S120中,在触摸操作结束后,向便携终端2发送针对显示部11的横方向(X方向)和纵方向(Y方向)分别表示规定的最大移动量的移动量信息,由此使光标40的显示位置返回到原来的基准位置41。由此,能够与通过前不久的触摸操作而指定的触摸位置无关地确实地使光标40的显示位置返回到基准位置41。
(12)光标40的指示点位于光标40的左上端,基准位置41位于显示部11的右下端,因此能够在不进行触摸操作时,将光标40的大部分设为显示部11的画面显示的范围以外,而不成为用户的观看障碍。
(13)车载装置1通过影像/声音信号输入部16从便携终端2接收图像,将该图像显示在作为触摸屏的显示部11中。然后,通过与显示部11一起构成触摸屏的操作部12,检测通过来自用户的触摸操作而指定的触摸位置。这时,通过控制部10的处理,使用近距离无线通信接口部15,向便携终端2发送与从光标40的显示位置到触摸位置为止的移动量对应的移动量信息(步骤S60),与之对应地接收从便携终端2发送的图像信息并显示在显示部11中。由此,与触摸操作对应地,使如图4(a)那样显示在位于显示部11的外周部分的基准位置41的光标40如图4(b)那样移动到触摸位置43。另外,在触摸操作结束后,向便携终端2发送表示最大移动量的移动量信息(步骤S120),由此使光标40返回到原来的基准位置41。由此,能够在车载装置1中显示出应用了触摸屏操作的便携终端2的显示画面时,在不进行触摸操作时,光标40不会成为用户的观看障碍地从车载装置1操作便携终端2。
此外,在以上说明的实施方式中,说明了在不进行触摸操作时,将光标40显示在分别位于显示部11、12的右下端的基准位置41、42的例子。但是,也可以将光标40显示在除此以外的位置。如果是显示部11、12的外周部分,则在不进行触摸操作时将光标40显示在任意的位置,都能够与上述实施方式同样地,使得光标40不会成为用户的观看障碍。这时,为了尽量使光标40不显眼,优选在显示部11中将位于光标40的从中心点朝向指示点的方向的相反的方向的端部的位置作为基准位置,将光标40显示在该基准位置。在图4(a)、(b)的例子中,光标40的指示点位于左上端,因此将基准位置41设定在该光标40的从中心点朝向指示点的左上方向的相反的方向的右下端。
另外,在以上说明的实施方式中,说明了以下的例子,即在图5的步骤S120中,在触摸操作结束后,向便携终端2发送针对显示部11的横方向(X方向)和纵方向(Y方向)分别表示规定的最大移动量的移动量信息,由此使光标40的显示位置返回到原来的基准位置41。这在以显示部11的左上端为起点,将右方向定义为X的正方向,将下方向定义为Y的正方向的情况下,能够有效地使光标40返回到右下端的基准位置41。但是,在对起点的位置或X、Y的正方向的定义进行了变更的情况下,并不限于此。例如,在以显示部11的右下端为起点,将左方向定义为X的正方向,将上方向定义为Y的正方向的情况下,为了使光标40返回到右下端的基准位置41,需要发送针对显示部11的X方向和Y方向分别表示规定的最小移动量的移动量信息。即,在步骤S120中,在触摸操作结束后,针对显示部11的横方向(X方向)和纵方向(Y方向),与起点的位置和X、Y的正方向的定义对应地,向便携终端2发送分别表示规定的最大移动量或最小移动量的移动量信息,由此能够使光标40的显示位置返回到基准位置41。此外,对于将基准位置设为右下端以外的情况也相同。
在以上说明的实施方式中,说明了以下的例子,即经由影像/声音电缆3将车载装置1和便携终端2相互连接,由此从便携终端2向车载装置1发送影像信号和声音信号。另外,说明了以下的例子,即通过依照蓝牙等规定的通信规格进行的近距离无线通信,在车载装置1和便携终端2之间进行通信。但是,使用其他的通信方式、信号传送方式也能够实现本发明。例如,也可以通过无线通信从便携终端2向车载装置1发送影像信号、声音信号。另外,也可以使用USB等有线通信进行车载装置1和便携终端2之间的通信。在该情况下,在图5的步骤S60、S90、S120、S160、S190、以及S210中,能够代替上述HID分组,而利用USB中的鼠标用的通信格式等,从车载装置1向便携终端2发送移动量信息、按键操作信息。只要能够在车载装置1和便携终端2之间收发必要的信号、信息,则也可以采用任意的通信方式。
在以上说明的实施方式中,除了车速信号、停车信号以外,也可以在车载装置1中取得从车辆输出的各种车辆信息。这时取得的车辆信息既可以在车载装置1执行的处理中利用,或者也可以从车载装置1向便携终端2输出,而在便携终端2执行的处理中利用。作为一个例子,预先对每个应用设定与车辆信息对应的启动条件,在从车辆输出了满足该启动条件的车辆信息时,能够在便携终端2中自动地启动该应用。在该情况下,可以从便携终端2向车载装置1发送表示各应用的启动条件的信息,在车载装置1中根据车辆信息判定是否满足启动条件。或者,也可以从车载装置1向便携终端2发送车辆信息,在便携终端2中根据该车辆信息判定是否满足启动条件。由此,例如在从车辆输出了燃料剩余量减少到不满规定值这样的车辆信息时,能够在便携终端2中自动地启动用于检索当前位置周边的加油站的应用。
在以上说明的实施方式中,说明了以下的情况的例子,即将车载装置1的显示部11设为触摸屏,在该显示部11中显示从便携终端2接收到的图像。但是,本发明的应用范围并不限于此。只要与信息终端连接而将从该信息终端接收到的图像显示在触摸屏中,则无论在怎样的显示装置中都能够应用本发明。
以上说明的实施方式、各种变形例子只不过是一个例子,只要不损害发明的特征,则本发明并不限于这些内容。另外,也可以任意地组合使用上述实施方式和变形例子。
在此作为引用文献收容了以下的优先权基础申请的公开内容。
日本专利申请2012年第130929号(2012年6月8日申请)
符号说明
1:车载装置;2:便携终端;3:影像/声音电缆;10:控制部;11:显示部;12:操作部;13:声音输出部;14:存储部;15:近距离无线通信接口部;16:影像/声音信号输入部;20:控制部;21:显示部;22:操作部;23:声音输出部;24:存储部;25:近距离无线通信接口部;26:影像/声音信号输出部;27:无线通信部;28:GPS接收部。

Claims (14)

1.一种显示装置,其与信息终端连接,其特征在于,具备:
图像接收部,其从上述信息终端接收包含光标的画面的图像信息;
触摸屏,其根据通过上述图像接收部接收到的图像信息显示上述画面,检测通过触摸操作指定的触摸位置;
控制部,其计算上述触摸位置和上述触摸屏的参考位置之间的移动量,并且基于画面的分辨率信息针对所计算出的移动量进行变换;以及
发送部,其向上述信息终端发送用于指示通过上述控制部已经转换后的移动量的移动量信息,
其中,上述发送部进一步向上述信息终端发送表示进行了规定的按键操作的按键操作信息,
其中,在上述触摸位置不变化地上述触摸操作在规定时间以内结束的情况下,上述发送部在发送了与从上述光标的显示位置到上述触摸位置为止的移动量对应的移动量信息后,将上述按键操作信息与表示移动量是0的移动量信息一起发送。
2.根据权利要求1所述的显示装置,其特征在于,
在上述触摸位置不变化地连续多次进行了上述触摸操作的情况下,上述发送部在发送了与从上述光标的显示位置到上述触摸位置为止的移动量对应的移动量信息后,将上述按键操作信息与表示移动量是0的移动量信息一起发送多次。
3.根据权利要求1所述的显示装置,其特征在于,
当在上述触摸操作正在继续的过程中上述触摸位置进行了变化的情况下,上述发送部在发送了与从上述光标的显示位置到上述触摸位置为止的移动量对应的移动量信息后,在上述触摸操作正在继续时,将上述按键操作信息与表示与上述触摸位置的变化对应的移动量的移动量信息一起发送,
在上述触摸操作结束后,发送表示移动量是0的移动量信息。
4.根据权利要求1所述的显示装置,其特征在于,
在上述触摸位置不变化地上述触摸操作持续了规定时间以上的情况下,上述发送部在发送了与从上述光标的显示位置到上述触摸位置为止的移动量对应的移动量信息后,在上述触摸操作正在继续时,将上述按键操作信息与表示移动量是0的移动量信息一起发送。
5.根据权利要求1所述的显示装置,其特征在于,
上述发送部利用蓝牙或USB的鼠标用通信格式,发送上述移动量信息。
6.一种显示装置,其与具有显示器的信息终端连接,其的特征在于,具备:
图像接收部,其从上述信息终端接收包含光标的画面的图像信息;
触摸屏,其根据通过上述图像接收部接收到的图像信息显示上述画面,检测通过触摸操作指定的触摸位置;
分辨率信息接收部,其从上述信息终端接收上述显示器的分辨率信息;
变换系数计算部,其根据通过上述分辨率信息接收部接收到的分辨率信息、预先存储的上述触摸屏的分辨率,计算与上述显示器相对于上述触摸屏的分辨率比对应的变换系数;
移动量计算部,其计算从上述光标的显示位置到上述触摸位置为止的移动量;
变换部,其根据通过上述变换系数计算部计算出的变换系数,将通过上述移动量计算部计算出的移动量变换为上述显示器上的移动量;以及
发送部,其向上述信息终端发送表示通过上述变换部变换后的移动量的移动量信息,
其中,上述发送部进一步向上述信息终端发送表示进行了规定的按键操作的按键操作信息,
其中,在上述触摸位置不变化地上述触摸操作在规定时间以内结束的情况下,上述发送部在发送了与从上述光标的显示位置到上述触摸位置为止的移动量对应的移动量信息后,将上述按键操作信息与表示移动量是0的移动量信息一起发送。
7.根据权利要求6所述的显示装置,其特征在于,
上述变换系数计算部针对上述触摸屏的横方向和纵方向,分别计算上述变换系数,
上述移动量计算部针对上述触摸屏的横方向和纵方向,分别计算从上述光标的显示位置到上述触摸位置为止的移动量,
上述变换部使用上述横方向的变换系数,将对于上述触摸屏的横方向的移动量变换为上述显示器上的横方向的移动量,并且使用上述纵方向的变换系数,将对于上述触摸屏的纵方向的移动量变换为上述显示器上的纵方向的移动量。
8.一种显示装置,其与信息终端连接,其特征在于,具备:
图像接收部,其从上述信息终端接收包含在规定的基准位置显示的光标的画面的图像信息;
触摸屏,其根据通过上述图像接收部接收到的图像信息显示上述画面,并检测通过触摸操作指定的触摸位置;
控制部,其计算上述触摸位置和上述触摸屏的参考位置之间的移动量,并且基于画面的分辨率信息针对所计算出的移动量进行变换;以及
发送部,其向上述信息终端发送用于指示通过上述控制部已经变换后的移动量的移动量信息,
在上述触摸操作结束后,使上述光标的显示位置返回上述基准位置,
其中,上述发送部进一步向上述信息终端发送表示进行了规定的按键操作的按键操作信息,
其中,在上述触摸位置不变化地上述触摸操作在规定时间以内结束的情况下,上述发送部在发送了与从上述光标的显示位置到上述触摸位置为止的移动量对应的移动量信息后,将上述按键操作信息与表示移动量是0的移动量信息一起发送。
9.根据权利要求8所述的显示装置,其特征在于,
上述发送部在上述触摸操作结束后,向上述信息终端发送针对上述触摸屏的横方向和纵方向分别表示规定的最大移动量或最小移动量的移动量信息,由此使上述光标的显示位置返回上述基准位置。
10.根据权利要求8或9所述的显示装置,其特征在于,
上述光标的指示点位于上述光标的端部,
上述基准位置在上述触摸屏中位于上述光标的从中心朝向指示点的方向的相反的方向的端部。
11.根据权利要求10所述的显示装置,其特征在于,
上述光标的指示点位于上述光标的左上端,
上述基准位置位于上述触摸屏的右下端。
12.一种显示装置,其与信息终端连接,其特征在于,具备:
图像接收部,其从上述信息终端接收图像;
触摸屏,其显示通过上述图像接收部接收到的图像,并检测通过触摸操作指定的触摸位置;
控制部,其计算上述触摸位置和上述触摸屏的参考位置之间的移动量,并且基于画面的分辨率信息针对所计算出的移动量进行变换;以及
发送部,其向上述信息终端发送用于指示通过上述控制部已经转换后的移动量的移动量信息,
其中,与上述触摸操作对应地使显示在上述触摸屏的外周部分的光标移动到上述触摸位置,在上述触摸操作结束后,基于用于指示通过上述控制部已经变换后的移动量的移动量信息使上述光标返回原来的位置,
其中,上述发送部进一步向上述信息终端发送表示进行了规定的按键操作的按键操作信息,
其中,在上述触摸位置不变化地上述触摸操作在规定时间以内结束的情况下,上述信息终端在发送了与从上述光标的显示位置到上述触摸位置为止的移动量对应的移动量信息后,将上述按键操作信息与表示移动量是0的移动量信息一起发送。
13.根据权利要求12所述的显示装置,其特征在于,
在上述触摸操作结束后,向上述信息终端发送针对上述触摸屏的横方向和纵方向分别表示规定的最大移动量或最小移动量的移动量信息,由此使上述光标的显示位置返回基准位置。
14.根据权利要求12或13所述的显示装置,其特征在于,
上述光标的指示点位于上述光标的左上端,
在上述触摸操作开始前和结束后,在上述触摸屏的右下端显示上述光标。
CN201380030082.8A 2012-06-08 2013-06-07 显示装置 Active CN104335148B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710920254.9A CN107621923B (zh) 2012-06-08 2013-06-07 显示装置

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2012130929A JP6124169B2 (ja) 2012-06-08 2012-06-08 表示装置
JP2012-130929 2012-06-08
PCT/JP2013/065849 WO2013183765A1 (ja) 2012-06-08 2013-06-07 表示装置

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN201710920254.9A Division CN107621923B (zh) 2012-06-08 2013-06-07 显示装置

Publications (2)

Publication Number Publication Date
CN104335148A CN104335148A (zh) 2015-02-04
CN104335148B true CN104335148B (zh) 2017-10-31

Family

ID=49712151

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201710920254.9A Active CN107621923B (zh) 2012-06-08 2013-06-07 显示装置
CN201380030082.8A Active CN104335148B (zh) 2012-06-08 2013-06-07 显示装置

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201710920254.9A Active CN107621923B (zh) 2012-06-08 2013-06-07 显示装置

Country Status (5)

Country Link
US (2) US9613593B2 (zh)
EP (2) EP3553639A1 (zh)
JP (1) JP6124169B2 (zh)
CN (2) CN107621923B (zh)
WO (1) WO2013183765A1 (zh)

Families Citing this family (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5871080B2 (ja) * 2012-12-21 2016-03-01 日本電気株式会社 画像表示装置、携帯端末装置、情報処理システム、画像表示装置制御方法及びプログラム
WO2014141954A1 (ja) * 2013-03-13 2014-09-18 クラリオン株式会社 表示装置
JP6047822B2 (ja) 2013-03-14 2016-12-21 シャープ株式会社 情報処理装置、情報処理方法及びプログラム
US9937416B2 (en) * 2013-06-11 2018-04-10 Microsoft Technology Licensing, Llc Adaptive touch input controls
US9886134B2 (en) 2013-12-27 2018-02-06 Pioneer Corporation Terminal device, calibration method and calibration program
JP2015128918A (ja) * 2014-01-06 2015-07-16 株式会社東海理化電機製作所 操作装置
KR101624180B1 (ko) * 2014-12-09 2016-05-25 현대자동차주식회사 단말기, 그를 가지는 차량 및 그의 제어 방법
CN104679469B (zh) * 2014-12-29 2019-02-26 合肥杰发科技有限公司 车载终端及其获取手持终端的屏幕分辨率的方法
CN104657211A (zh) * 2015-02-03 2015-05-27 百度在线网络技术(北京)有限公司 一种用于操作对应设备上目标应用的方法与设备
GB2536253B (en) * 2015-03-10 2018-12-19 Displaylink Uk Ltd System for connecting external displays to a mobile device
CN105045692B (zh) * 2015-07-22 2018-11-30 京东方科技集团股份有限公司 触摸屏测试装置及系统、触摸屏测试控制装置
CN105260112A (zh) * 2015-09-14 2016-01-20 百度在线网络技术(北京)有限公司 终端间屏幕控制的方法和装置
CN107025894A (zh) * 2016-02-02 2017-08-08 上海嘉车信息科技有限公司 车载屏幕亮度及内容显示自适应的控制系统及控制方法
JP6686689B2 (ja) * 2016-05-13 2020-04-22 三菱自動車工業株式会社 車両制御システム
WO2018116978A1 (ja) 2016-12-19 2018-06-28 クラリオン株式会社 端末、及び端末の制御方法
JP6397530B2 (ja) * 2017-03-24 2018-09-26 クラリオン株式会社 表示装置
JP2018194584A (ja) * 2017-05-12 2018-12-06 シャープ株式会社 表示装置、表示装置における情報端末機の設定方法および表示システム
JP2018081711A (ja) * 2017-12-25 2018-05-24 パイオニア株式会社 端末装置、キャリブレーション方法及びキャリブレーションプログラム
JP7059715B2 (ja) * 2018-03-15 2022-04-26 京セラドキュメントソリューションズ株式会社 画像形成装置、画像形成システム
CN109561202B (zh) * 2018-09-29 2021-10-08 百度在线网络技术(北京)有限公司 控件处理方法、装置、终端设备、车机及系统
JP2019179563A (ja) * 2019-06-04 2019-10-17 パイオニア株式会社 端末装置
CN113282340B (zh) * 2021-05-12 2023-04-07 聚融医疗科技(杭州)有限公司 用于带触摸屏的多屏超声诊疗系统的鼠标管理方法及装置
TWI801867B (zh) * 2021-05-12 2023-05-11 虹堡科技股份有限公司 密碼輸入裝置
US20230063335A1 (en) * 2021-08-27 2023-03-02 Ricoh Company, Ltd. Display apparatus, display system, display control method, and non-transitory recording medium

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1402116A (zh) * 2001-08-04 2003-03-12 三星电子株式会社 用所连外部显示设备显示信息的带触摸屏装置及其方法
CN101211244A (zh) * 2006-12-27 2008-07-02 联想(新加坡)私人有限公司 使用触摸板的光标跳转控制
US7970436B1 (en) * 2006-09-22 2011-06-28 Sprint Communications Company L.P. Wireless interface extension for mobile devices
CN102439953A (zh) * 2009-04-14 2012-05-02 高通股份有限公司 用于移动设备的外部触摸屏

Family Cites Families (35)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4216352A (en) * 1978-11-02 1980-08-05 The Charles Stark Draper Laboratory, Inc. Two coordinate position sensing systems
US5274794A (en) * 1991-01-22 1993-12-28 Graphon Corporation Method and apparatus for transferring coordinate data between a host computer and display device
JPH09244809A (ja) 1996-03-06 1997-09-19 Nec Eng Ltd マウス透過式タッチパネル装置
US6952799B2 (en) * 1996-06-17 2005-10-04 British Telecommunications User interface for network browser including pre-processor for links embedded in hypermedia documents
US6750803B2 (en) * 2001-02-23 2004-06-15 Interlink Electronics, Inc. Transformer remote control
JP2003244343A (ja) 2002-02-21 2003-08-29 Toyota Motor Corp 表示装置、携帯端末及び情報表示システム
US20030231168A1 (en) * 2002-06-18 2003-12-18 Jory Bell Component for use as a portable computing device and pointing device in a modular computing system
JP2005056088A (ja) 2003-08-01 2005-03-03 Ricoh Co Ltd タッチパネル付きディスプレイ装置、タッチパネル付きディスプレイ装置の制御方法およびその方法をコンピュータに実行させるためのプログラム
DE102005023544A1 (de) * 2005-05-21 2006-12-07 Bayerische Motoren Werke Ag Anschluss von persönlichen Endgeräten an das Kommunikationssystem eines Kraftfahrzeuges
TWI284274B (en) * 2005-06-29 2007-07-21 Elan Microelectronics Corp Method for controlling intelligent movement of touch pad
US7777732B2 (en) * 2007-01-03 2010-08-17 Apple Inc. Multi-event input system
US20090195513A1 (en) * 2008-02-05 2009-08-06 Delphi Technologies, Inc. Interactive multimedia control module
US8085281B2 (en) * 2008-05-08 2011-12-27 Microsoft Corporation Method of displaying input from a portable computing device
CN102197358A (zh) * 2008-10-28 2011-09-21 夏普株式会社 具有2个显示装置的电子设备、其控制方法以及记录介质
US20100220066A1 (en) * 2009-02-27 2010-09-02 Murphy Kenneth M T Handheld electronic device having a touchscreen and a method of using a touchscreen of a handheld electronic device
TW201104529A (en) * 2009-07-22 2011-02-01 Elan Microelectronics Corp Touch device, control method and control unit for multi-touch environment
CN101667079A (zh) * 2009-09-16 2010-03-10 中兴通讯股份有限公司南京分公司 通过移动终端触摸屏控制计算机的方法、系统及移动终端
CN101674671B (zh) * 2009-10-13 2012-02-01 武汉市城市规划设计研究院 基于移动互联网络的规划信息处理和发布方法及其系统
KR101154770B1 (ko) * 2009-11-27 2012-07-09 현대자동차주식회사 휴대기기와 연동하는 사용자 인터페이스를 구비한 차량용 오디오 비디오 단말 시스템 및 그 연동 방법
US8694177B2 (en) * 2010-03-12 2014-04-08 GM Global Technology Operations LLC Flexible vehicle display
TWM389063U (en) 2010-03-16 2010-09-21 Wonde Proud Technology Co Ltd Vehicle mobile device control system
TWI529574B (zh) * 2010-05-28 2016-04-11 仁寶電腦工業股份有限公司 電子裝置與其操作方法
JP2011254238A (ja) * 2010-06-01 2011-12-15 Sony Corp 情報処理装置、情報処理方法および情報処理システム
JP5517761B2 (ja) * 2010-06-10 2014-06-11 アルパイン株式会社 電子機器および操作キーの割当方法
JP5527064B2 (ja) * 2010-07-09 2014-06-18 トヨタ自動車株式会社 画像表示システム
JP2012058857A (ja) * 2010-09-06 2012-03-22 Sony Corp 情報処理装置、操作方法及び情報処理プログラム
CN101937312B (zh) * 2010-09-15 2014-03-19 中兴通讯股份有限公司 一种电子书的标记方法及移动终端
CN105333884B (zh) * 2010-09-17 2018-09-28 歌乐株式会社 车载信息系统、车载装置、信息终端
US20120075204A1 (en) * 2010-09-27 2012-03-29 Google Inc. Using a Touch-Sensitive Display of a Mobile Device with a Host Computer
JP2012130929A (ja) 2010-12-20 2012-07-12 Mitsubishi Heavy Ind Ltd バックシール施行用装置
JP2012236327A (ja) * 2011-05-11 2012-12-06 Canon Inc 印刷装置、印刷装置の制御方法、及びプログラム
JP5259772B2 (ja) 2011-05-27 2013-08-07 株式会社東芝 電子機器、操作支援方法及びプログラム
CN102314502B (zh) * 2011-09-01 2017-03-01 百度在线网络技术(北京)有限公司 一种用于在移动终端上显示网页主体内容的方法和设备
KR20130053185A (ko) * 2011-11-15 2013-05-23 삼성전자주식회사 전자기기들 간의 상호 제어 방법 및 시스템
WO2013121455A1 (ja) * 2012-02-13 2013-08-22 日立コンシューマエレクトロニクス株式会社 プロジェクタ、図形入力・表示装置、携帯端末およびプログラム。

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1402116A (zh) * 2001-08-04 2003-03-12 三星电子株式会社 用所连外部显示设备显示信息的带触摸屏装置及其方法
US7970436B1 (en) * 2006-09-22 2011-06-28 Sprint Communications Company L.P. Wireless interface extension for mobile devices
CN101211244A (zh) * 2006-12-27 2008-07-02 联想(新加坡)私人有限公司 使用触摸板的光标跳转控制
CN102439953A (zh) * 2009-04-14 2012-05-02 高通股份有限公司 用于移动设备的外部触摸屏

Also Published As

Publication number Publication date
WO2013183765A1 (ja) 2013-12-12
CN107621923A (zh) 2018-01-23
JP6124169B2 (ja) 2017-05-10
US20170161005A1 (en) 2017-06-08
JP2013254435A (ja) 2013-12-19
US10528311B2 (en) 2020-01-07
US20150154728A1 (en) 2015-06-04
EP2860615B1 (en) 2019-06-05
EP3553639A1 (en) 2019-10-16
EP2860615A4 (en) 2016-07-06
CN104335148A (zh) 2015-02-04
EP2860615A1 (en) 2015-04-15
CN107621923B (zh) 2021-05-04
US9613593B2 (en) 2017-04-04

Similar Documents

Publication Publication Date Title
CN104335148B (zh) 显示装置
CN105190522B (zh) 显示装置
US9706244B2 (en) User terminal apparatus, display apparatus, user interface providing method and controlling method thereof
KR102028952B1 (ko) 휴대 단말에 의해 촬영된 이미지들을 합성하는 방법, 기계로 읽을 수 있는 저장 매체 및 휴대 단말
CN104334411B (zh) 车载信息系统、信息终端、应用执行方法
US20140164990A1 (en) Display device and method of controlling the same
CN109933388B (zh) 车载终端设备及其应用组件的显示处理方法
CN105354003B (zh) 一种基于移动终端和车载终端互联的显示方法及装置
CN103513895A (zh) 远程控制装置及其控制方法
CN101211234A (zh) 转换运动信号的设备、方法和介质
CN108108042A (zh) 车辆用显示装置及其控制方法
KR20140036532A (ko) 어플리케이션 실행 방법 및 시스템, 단말과 그 기록 매체
JP2023523452A (ja) 操作体に基づく動的表示方法、装置、記憶媒体及び電子機器
CN109918012A (zh) 一种移动终端的控制方法、装置、设备及存储介质
CN110865765A (zh) 终端及地图控制方法
US20210168104A1 (en) Electronic device and method for transmitting content of electronic device
US20160218999A1 (en) Information processing apparatus, information terminal, information communication relay apparatus, and information processing method
CN108829329B (zh) 一种操作对象展示方法、装置和可读介质
JP6397530B2 (ja) 表示装置
US20150089451A1 (en) User terminal, electronic device, and control method thereof
US20160253088A1 (en) Display control apparatus and display control method
CN111325316A (zh) 一种训练数据的生成方法及装置
CN116974442A (zh) 车机控制方法、装置、系统、电子设备、介质及车机
CN118170302A (zh) 人机交互方法、电子设备及存储介质
CN117608270A (zh) 车辆故障确定系统、方法、设备及存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant