CN110023148B - 终端、以及终端的控制方法 - Google Patents

终端、以及终端的控制方法 Download PDF

Info

Publication number
CN110023148B
CN110023148B CN201780071900.7A CN201780071900A CN110023148B CN 110023148 B CN110023148 B CN 110023148B CN 201780071900 A CN201780071900 A CN 201780071900A CN 110023148 B CN110023148 B CN 110023148B
Authority
CN
China
Prior art keywords
vehicle
image
control unit
touch
displayed
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201780071900.7A
Other languages
English (en)
Other versions
CN110023148A (zh
Inventor
长岛孝信
松下祐树
安友健太
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Faurecia Clarion Electronics Co Ltd
Original Assignee
Clarion Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Clarion Co Ltd filed Critical Clarion Co Ltd
Publication of CN110023148A publication Critical patent/CN110023148A/zh
Application granted granted Critical
Publication of CN110023148B publication Critical patent/CN110023148B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/0011Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement
    • G05D1/0016Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement characterised by the operator's input device
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B62LAND VEHICLES FOR TRAVELLING OTHERWISE THAN ON RAILS
    • B62DMOTOR VEHICLES; TRAILERS
    • B62D15/00Steering not otherwise provided for
    • B62D15/02Steering position indicators ; Steering position determination; Steering aids
    • B62D15/027Parking aids, e.g. instruction means
    • B62D15/0285Parking performed automatically
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R21/00Arrangements or fittings on vehicles for protecting or preventing injuries to occupants or pedestrians in case of accidents or other traffic risks
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/06Automatic manoeuvring for parking
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/10Interpretation of driver requests or demands
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B62LAND VEHICLES FOR TRAVELLING OTHERWISE THAN ON RAILS
    • B62DMOTOR VEHICLES; TRAILERS
    • B62D1/00Steering controls, i.e. means for initiating a change of direction of the vehicle
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B19/00Programme-control systems
    • G05B19/02Programme-control systems electric
    • G05B19/04Programme control other than numerical control, i.e. in sequence controllers or logic controllers
    • G05B19/042Programme control other than numerical control, i.e. in sequence controllers or logic controllers using digital processors
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/0011Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement
    • G05D1/0038Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement by providing the operator with simple or augmented images from one or more cameras located onboard the vehicle, e.g. tele-operation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842Selection of displayed objects or displayed text elements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0486Drag-and-drop
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00Program-control systems
    • G05B2219/20Pc systems
    • G05B2219/23Pc programming
    • G05B2219/23044Transparent overlay with touch sensors, put over display panel, select function
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00Program-control systems
    • G05B2219/20Pc systems
    • G05B2219/26Pc applications
    • G05B2219/2637Vehicle, car, auto, wheelchair
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31User authentication
    • G06F21/36User authentication by graphic or iconic representation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04803Split screen, i.e. subdividing the display area or the window area into separate subareas
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Automation & Control Theory (AREA)
  • Mechanical Engineering (AREA)
  • Transportation (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Combustion & Propulsion (AREA)
  • Chemical & Material Sciences (AREA)
  • Mathematical Physics (AREA)
  • Computing Systems (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Traffic Control Systems (AREA)
  • Control Of Driving Devices And Active Controlling Of Vehicle (AREA)
  • User Interface Of Digital Computer (AREA)
  • Navigation (AREA)

Abstract

在用户操作终端的触摸面板来控制车辆行进的情况下,能够准确地进行操作。终端控制部(20)使显示有可触摸操作的操作按钮的车辆控制画面显示在触摸面板(9)中,并且当车辆控制画面中所显示的操作按钮被触摸操作之后触摸操作的位置移动了的情况下,追随触摸操作的位置的移动而使操作按钮的位置移动并维持操作按钮被触摸操作的状态,在车辆控制画面中所显示的操作按钮被触摸操作的期间内,向设在车辆中的信息处理装置(4)发送指示车辆行进的行进指示信号,并根据对操作按钮的触摸操作的解除,停止行进指示信号的发送。

Description

终端、以及终端的控制方法
技术领域
本发明涉及终端、以及终端的控制方法。
背景技术
以往已知一种系统,其使设在车辆中的信息处理装置(车辆侧装置3)与终端(便携终端4)可通信地连接(例如参照专利文献1)。
另外近年来,智能手机和平板型终端等具有触摸面板的终端正在普及。
现有技术文献
专利文献
专利文献1:日本特开2015-54530号公报
发明内容
在此,对于使设于车辆的信息处理装置与具有触摸面板的终端可通信地连接的系统,在构筑用户操作触摸面板而能够控制车辆行进的这种系统的情况下,需要在触摸面板中显示恰当的画面,使用户能够准确地进行操作。
本发明是鉴于上述情况而做出的,其目的在于,在用户操作终端的触摸面板来控制车辆行进的情况下,能够准确地进行操作。
为了实现上述目的,本发明的终端的特征在于,具有:触摸面板,其显示图像,并且接受触摸操作;和终端控制部,其使显示有可触摸操作的操作按钮的车辆控制画面显示在所述触摸面板中,并且在所述车辆控制画面中所显示的所述操作按钮被触摸操作之后触摸操作的位置移动了的情况下,追随触摸操作的位置的移动而使所述操作按钮的位置移动并维持所述操作按钮被触摸操作的状态,在所述车辆控制画面中所显示的所述操作按钮被触摸操作的期间内,向设在车辆中的信息处理装置发送指示所述车辆行进的行进指示信号,并根据对所述操作按钮的触摸操作的解除,停止所述行进指示信号的发送。
另外,本发明的特征在于,所述终端控制部在对所述车辆控制画面中所显示的所述操作按钮的触摸操作被解除的情况下,在触摸操作被解除时的所述操作按钮的位置上继续显示所述操作按钮。
另外,本发明的特征在于,所述终端控制部在对所述车辆控制画面中所显示的所述操作按钮的触摸操作被解除的情况下,在所述车辆控制画面中的规定位置上显示所述操作按钮。
另外,本发明的特征在于,所述终端控制部使显示有滑动条和滑动按钮的锁定画面显示在所述触摸面板中,该滑动按钮位于所述滑动条的一端,根据触摸滑动操作而沿着所述滑动条移动,另一方面,根据触摸滑动操作的解除而移动至所述滑动条的一端,在通过触摸滑动操作使所述滑动按钮在规定期间位于所述滑动条的另一端的情况下,将所述触摸面板中显示的画面从所述锁定画面向所述车辆控制画面切换,并且将位于所述滑动条的另一端的所述滑动按钮切换为所述操作按钮并作为所述操作按钮来发挥作用。
另外,本发明的特征在于,所述终端控制部在所述操作按钮被操作时和所述操作按钮未被操作时,使表示所述操作按钮的图像变化。
另外,本发明的特征在于,所述终端还具有壳体、和检测所述壳体的状态的壳体状态检测部,所述终端控制部在显示所述车辆控制画面的期间内,取得基于设在所述车辆中的摄像头的拍摄结果所得的拍摄数据,在所述触摸面板中显示基于所取得的所述拍摄数据所得的图像,并且与基于所述拍摄数据所得的图像重叠地显示所述操作按钮,根据所述壳体状态检测部检测到的所述壳体的状态,切换所述触摸面板中所显示的图像,另一方面,在切换了所述触摸面板中所显示的图像的情况下,也维持所述操作按钮的显示。
另外,本发明的特征在于,所述终端控制部在由所述壳体状态检测部检测到所述壳体的朝向成为第1朝向的情况下,在所述触摸面板中作为基于所述拍摄数据所得的图像而显示俯瞰所述车辆的图像、即俯瞰图像,在由所述壳体状态检测部检测到所述壳体的朝向成为与所述第1朝向不同的第2朝向的情况下,在所述触摸面板中作为基于所述拍摄数据所得的图像而显示由所述摄像头拍摄到的车外的图像、即车外图像。
另外,本发明提供一种终端的控制方法,该终端具有显示图像并接受触摸操作的触摸面板,所述终端的控制方法的特征在于,将显示有可触摸操作的操作按钮的车辆控制画面显示在所述触摸面板中,并且在所述车辆控制画面中所显示的所述操作按钮被触摸操作之后触摸操作的位置移动了的情况下,追随触摸操作的位置的移动而使所述操作按钮的位置移动并维持所述操作按钮被触摸操作的状态,在所述车辆控制画面中所显示的所述操作按钮被触摸操作的期间内,向设在车辆中的信息处理装置发送指示所述车辆行进的行进指示信号,并根据对所述操作按钮的触摸操作的解除,停止所述行进指示信号的发送。
此外,在本说明书中包括了2016年12月19日提交的日本国专利申请·特愿2016-245986号的全部内容。
发明效果
根据本发明,在用户操作终端的触摸面板来控制车辆行进的情况下,能够准确地进行操作。
附图说明
图1是表示本实施方式的信息处理系统1的概要的图。
图2是表示便携终端的功能性构成的框图。
图3A是用于说明纵向的图。
图3B是用于说明横向的图。
图4A是用于说明右动的图。
图4B是用于说明左动的图。
图5是表示信息处理装置的功能性构成的框图。
图6是用于说明车外拍摄用摄像头的拍摄方向的图。
图7是表示车辆驱动控制装置的功能性构成的框图。
图8是用于说明自动驾驶路径信息的图。
图9是表示信息处理系统的各装置的动作的流程图。
图10是表示驻车场的一例的图。
图11是表示锁定画面的图。
图12是用于说明触摸面板中显示的画面的图。
图13是表示便携终端的动作的流程图。
图14A是表示信息处理装置的动作的流程图。
图14B是表示信息处理装置的动作的流程图。
图15是表示合成图像的图。
图16是表示便携终端的动作的流程图。
图17A是表示信息处理装置的动作的流程图。
图17B是表示信息处理装置的动作的流程图。
图17C是表示信息处理装置的动作的流程图。
图18是表示信息处理系统的各装置的动作的流程图。
图19是表示选择画面的图。
图20是用于说明触摸面板中所显示的画面的图。
图21是用于说明触摸面板中所显示的画面的图。
图22是用于说明触摸面板中所显示的画面的图。
具体实施方式
以下,参照附图来说明本发明的实施方式。
图1是表示本实施方式的信息处理系统1的概要的图。
如图1所示,信息处理系统1具有设在车辆S中的车辆系统2、和用户所有的便携终端3。
车辆系统2具有信息处理装置4和车辆驱动控制装置5。信息处理装置4和车辆驱动控制装置5经由总线6能够通信。
便携终端3是用户所携带的平板型移动电话(所谓的智能手机)。车辆系统2的信息处理装置4和便携终端3通过无线通信能够通信。便携终端3具有壳体8。壳体8是具有长方形状的正面8a的板状部件,在正面8a的宽阔区域中设有触摸面板9(显示面板)。此外,长方形状并非意味着完全的长方形形状,例如也包括4个顶点带着圆弧的大致长方形形状。以下,以便携终端3为平板型的移动电话来说明实施方式,但便携终端3并不限于智能手机,也可以为平板型的计算机等。
用户是车辆S的所有者等,具有控制车辆S的权限。
车辆S是四轮汽车。尤其本实施方式的车辆S针对发动机开关的启动/关闭、和车门的上锁/开锁而具有以下功能。即,车辆S具有通过对专用遥控器的操作而能够对发动机开关进行启动/关闭,并对车门进行上锁/开锁的功能。该功能使用了现有技术,由此省略该功能的具体说明。用户在从车辆S下车之后,在车外操作专用的遥控器能够对发动机开关进行启动/关闭,另外能够对车辆S的车门进行上锁/开锁。
信息处理系统1是能够进行以下操作的系统。即,信息处理系统1使用户不用驾驶车辆S,仅操作便携终端3就能够使停车的车辆S向其他位置移动而停车。例如,信息处理系统1当使车辆S在驻车场、或车库等中的驻车位置上驻车时,使用户不用驾驶车辆S,仅操作便携终端3就能够使在驻车位置附近的驻车前位置上停车的车辆S向驻车位置移动而停车。
另外例如,信息处理系统1当使在驻车位置上停车的车辆S出库时,使用户不用驾驶车辆S,仅操作便携终端3就能够使在驻车位置上停车的车辆S向驻车位置附近的出库后停车位置移动而停车。因此,用户通过利用信息处理系统1,能够在未搭乘于车辆S的状态下进行车辆S的驻车以及出库。
由此,关于驻车,在与希望驻车的驻车位置相邻的驻车位置上已经停有其他车辆,车辆S停车在希望驻车的驻车位置上的情况下,车辆S与相邻的其他车辆接近,车辆S的车门开闭会困难的状况时,用户能够通过以下的方式使车辆S在驻车位置上驻车。即,用户能够在使车辆S在驻车位置停车之前从车辆S下车,利用信息处理系统1使车辆S在驻车位置停车。由此,当车辆S在驻车位置停车之后,用户不需要开闭车辆S的车门,能够顺利地进行车辆S的驻车。
同样地,关于出库,在与车辆S停车的驻车位置相邻的驻车位置上已经停有其他车辆,开闭车辆S的车门而向车辆S搭乘会困难的状况的情况下,用户通过利用信息处理系统1,能够不用搭乘于车辆S而顺利地使车辆S出库,然后再搭乘于车辆S。
在以下的说明中,将通过信息处理系统1,不伴随基于用户进行的车辆S的驾驶,使停车的车辆S向其他位置移动而在其他位置上停车的情况,称为“车辆自动移动”。
图2是表示便携终端3的功能性构成的框图。
如图2所示,便携终端3具有终端控制部20、终端通信部21、触摸面板9、终端存储部22、和壳体状态检测部23。
终端控制部20具有CPU、和ROM、RAM、ASIC、信号处理回路等,控制便携终端3的各部分。终端控制部20例如使CPU将ROM中所存储的程序向RAM读取来执行处理,另外例如通过ASIC中所安装的功能来执行处理,另外例如由信号处理回路进行信号处理来执行处理等,通过硬件与软件的协作来执行处理。
终端通信部21根据终端控制部20的控制,遵照Wi-Fi(注册商标)的规格与外部的装置(包括信息处理装置4。)进行无线通信。
此外,在本实施方式中,在便携终端3与信息处理装置4之间所进行的无线通信中所用的通信协议为Wi-Fi,但这些装置间所进行的无线通信中所用的通信协议并不限于Wi-Fi,也可以为其他协议。例如通信协议可以为Bluetooth(注册商标)。
触摸面板9具有液晶面板或有机EL面板等显示面板,通过终端控制部20的控制而在显示面板中显示图像。另外,触摸面板9具有与显示面板重叠配置的触摸传感器,检测基于用户对触摸面板9的操作,将与检测到的操作对应的信号向终端控制部20输出。终端控制部20基于来自触摸面板9的输入而执行与基于用户对触摸面板9的操作对应的处理。
终端存储部22具有EEPROM等非易失性存储器,以能够改写的方式非易失性地存储各种数据。
终端存储部22存储专用应用程序AP。专用应用程序AP如后所述地是在用户利用信息处理系统1来进行车辆自动移动的情况下所使用的应用程序。专用应用程序AP例如是制造销售信息处理装置4的公司所提供的应用程序。用户使用规定的应用程序下载系统,事先将专用应用程序AP下载至便携终端3。
壳体状态检测部23具有设于壳体8的加速度传感器、陀螺仪传感器、以及倾角传感器,基于这些传感器的检测值来检测壳体8的状态。壳体状态检测部23将表示检测到的壳体8状态的信息向终端控制部20输出。此外,壳体状态检测部23检测壳体8状态时所用的传感器并不限于加速度传感器、陀螺仪传感器以及倾角传感器。另外,壳体状态检测部23检测壳体8状态时的方法可以为各种方法。
壳体状态检测部23至少检测如下的(1)~(4)来作为壳体8的状态,(1)壳体8的朝向成为“纵向”,(2)壳体8的朝向成为“横向”,(3)当壳体8的朝向为“横向”时壳体8进行了“右动”,以及(4)当壳体的朝向为“横向”时,壳体8进行了“左动”。
图3A是用于说明“纵向”的图。
在此,如上所述,壳体8是具有长方形状的正面8a的板状部件。另外,如图3A所示,触摸面板9的形状是沿着壳体8的长边T1具有长边,并沿着壳体8的短边T2具有短边的长方形状。
由于正面8a为长方形状,所以正面8a的外缘由长边T1和短边T2构成。在此基础上,以下,将沿着壳体8的长边T1延伸的虚拟线表现为“虚拟长边直线”,标注附图标记“KA”。另外,将沿铅垂方向延伸的虚拟线表现为“虚拟铅铅垂线”,标注附图标记“EN”。另外,将与虚拟铅铅垂线EN正交的虚拟线表现为“虚拟正交直线”,标注附图标记“TN”。
如图3A所示,“纵向”是虚拟长边直线KA相对于虚拟铅铅垂线EN的三维空间中的角度处于角度θ1的范围内的状态。角度θ1的值是基于用户有意地将便携终端3的朝向设为“纵向”情况下的富余量(margin)这一观点适当规定的。在便携终端3的朝向为“纵向”的情况下,壳体8的长边T1的方向成为沿着铅垂方向的状态,并且触摸面板9的长边的方向成为沿着铅垂方向的状态。
“纵向”相当于“第1朝向”。
图3B是用于说明“横向”的图。
如图3B所示,“横向”是虚拟长边直线KA相对于虚拟正交直线TN的三维空间中的角度处于角度θ2的范围内的状态。角度θ2是基于用户有意地将便携终端3的朝向设为“横向”情况下的富余量这一观点适当规定的。在便携终端3的朝向为“横向”的情况下,壳体8的长边T1的方向成为沿着与铅垂方向正交的方向的状态,并且触摸面板9的长边的方向成为沿着与铅垂方向正交的方向的状态。
“横向”相当于“第2朝向”。
图4A是用于说明“右动”的图。
如图4A所示,“右动”是在壳体8的朝向为“横向”的状态下,壳体8向着正面观察壳体8时的右方向,在期间GG1(例如0.5秒。)以内移动了超过距离K1(例如3厘米。)的距离的运动。右方向不需要完全沿着与铅垂方向正交的方向,可考虑一定的富余量。在握持壳体8观察触摸面板9的用户,从用户来看向着右方向使壳体8稍微移动的情况下,壳体8进行“右动”。距离K1以及期间GG1是基于作为用于判断用户有意地使壳体8“右动”的阈值来使用这一观点而适当规定的。
“右动”相当于“壳体8的状态以第1方式变化的第1运动”。
图4B是用于说明“左动”的图。
如图4B所示,“左动”是在壳体8的朝向为“横向”的状态下,壳体8向着正面观察壳体8时的左方向,在期间GG2(例如0.5秒。)以内移动了超过距离K2(例如3厘米。)的距离的运动。左方向不需要完全沿着与铅垂方向正交的方向,可考虑一定的富余量。在握持壳体8观察触摸面板9的用户,从用户来看向着左方向使壳体8稍微移动的情况下,壳体8进行“左动”。距离K2以及期间GG2是基于作为用于判断用户有意地使壳体8“左动”的阈值来使用这一观点而适当规定的。
“左动”相当于“壳体8的状态以第2方式变化的第2运动”。
图5是表示信息处理装置4的功能性构成的框图。
如图5所示,信息处理装置4具有信息处理装置控制部30、信息处理装置通信部31、显示装置32、信息处理装置存储部33、操作输入部34、GPS单元35、相对方位检测单元36、总线接口37、和摄像头接口38。
信息处理装置控制部30具有CPU、和ROM、RAM、ASIC、信号处理回路等,控制信息处理装置4的各部分。信息处理装置控制部30例如使CPU将ROM中所存储的程序向RAM读取来执行处理,另外例如通过ASIC中所安装的功能来执行处理,另外例如由信号处理回路进行信号处理来执行处理等,通过硬件与软件的协作来执行处理。
信息处理装置通信部31根据信息处理装置控制部30的控制,并遵照Wi-Fi的规格与外部的装置(包括便携终端3。)进行无线通信。
显示装置32具有液晶面板或有机EL面板等显示面板,通过信息处理装置控制部30的控制而在显示面板中显示图像。
信息处理装置存储部33具有EEPROM、和硬盘等非易失性存储器,以能够改写的方式非易失性地存储各种数据。信息处理装置存储部33存储地图数据33a。地图数据33a存储了在显示装置32中显示地图时所用的信息、和路径的检索所用的信息(与所谓的线路有关的信息和与所谓的节点有关的信息等。)。另外,关于驻车场等车辆S能够驻车的设施,地图数据33a存储设施内的具体地图、和表示设施构造的信息(以下称为“驻车地图信息”。)。
操作输入部34具有设在信息处理装置4上的开关等操作元件,检测基于用户对操作元件的操作,并将与检测到的操作对应的信号向信息处理装置控制部30输出。信息处理装置控制部30基于来自操作输入部34的输入,执行与基于用户对操作元件的操作所对应的处理。
GPS单元35经由未图示的GPS天线接收来自GPS卫星的GPS电波,从叠加于GPS电波的GPS信号来计算车辆S的现在位置和车辆S的行车方向。GPS单元35向信息处理装置控制部30输出表示算出的车辆S的现在位置的信息以及表示算出的车辆S的行车方向的信息。
相对方位检测单元36具有陀螺仪传感器和加速度传感器。陀螺仪传感器例如由振动陀螺仪构成,检测车辆S的相对方位(例如偏航轴方向的旋转量。)。加速度传感器检测对车辆S作用的加速度(例如相对于行车方向的车辆的倾斜。)。相对方位检测单元36向信息处理装置控制部30输出表示检测到的车辆S的相对方位的信息以及表示检测到的对车辆S作用的加速度的信息。
总线接口37具有与总线6对应的通信接口,通过信息处理装置控制部30的控制,同与总线6连接的外部装置(包括车辆驱动控制装置5。)通信。
摄像头接口38通过信息处理装置控制部30的控制与设在车辆S上的摄像头通信。
在车辆S上,作为拍摄车外的摄像头而设有前方拍摄用摄像头CA1、前方右侧拍摄用摄像头CA2、侧方右侧拍摄用摄像头CA3、后方右侧拍摄用摄像头CA4、后方拍摄用摄像头CA5、后方左侧拍摄用摄像头CA6、侧方左侧拍摄用摄像头CA7、和前方左侧拍摄用摄像头CA8。以下,在不区分拍摄车外的摄像头的情况下,表现为“车外拍摄用摄像头”。
图6是用于说明车外拍摄用摄像头拍摄的方向的图。此外,图6也用于说明后述的车外图像G2的切换。
前方拍摄用摄像头CA1是拍摄车辆S的前方(参照图6。)的摄像头。
前方右侧拍摄用摄像头CA2是拍摄车辆S的前方右侧(参照图6。)的摄像头。
侧方右侧拍摄用摄像头CA3是拍摄车辆S的侧方右侧(参照图6。)的摄像头。
后方右侧拍摄用摄像头CA4是拍摄车辆S的后方右侧(参照图6。)的摄像头。
后方拍摄用摄像头CA5是拍摄车辆S的后方(参照图6。)的摄像头。
后方左侧拍摄用摄像头CA6是拍摄车辆S的后方左侧(参照图6。)的摄像头。
侧方左侧拍摄用摄像头CA7是拍摄车辆S的侧方左侧(参照图6。)的摄像头。
前方左侧拍摄用摄像头CA8是拍摄车辆S的前方左侧(参照图6。)的摄像头。
车外拍摄用摄像头分别以规定周期执行拍摄,基于拍摄结果生成拍摄图像数据,将所生成的拍摄图像数据经由摄像头接口38向信息处理装置控制部30输出。
此外,车辆S上所设的车外拍摄用摄像头的方式并不限于本实施方式的方式。作为一例,也可以通过以下的方式在车辆S上设置车外拍摄用摄像头。即,也可以构成为,在车辆S上作为车外拍摄用摄像头而设置前方拍摄用摄像头CA1、侧方右侧拍摄用摄像头CA3、后方拍摄用摄像头CA5、侧方左侧拍摄用摄像头CA7这4台摄像头,通过侧方右侧拍摄用摄像头CA3拍摄车辆S的侧方右侧以及前方右侧,通过后方拍摄用摄像头CA5拍摄车辆S的后方、后方右侧以及后方左侧,通过侧方左侧拍摄用摄像头拍摄车辆S的侧方左侧、以及前方左侧。
另外,上述的车外拍摄用摄像头中,前方拍摄用摄像头CA1、侧方右侧拍摄用摄像头CA3、后方拍摄用摄像头CA5、以及侧方左侧拍摄用摄像头CA7,作为用于生成俯瞰图像数据(后述)的摄像头来使用。以下,在不区分用于生成俯瞰图像数据的摄像头的情况下,表现为“俯瞰用摄像头”。俯瞰用摄像头分别为广角摄像头,根据用于生成俯瞰图像数据这一观点,设于车辆S的恰当位置。
图7是表示车辆驱动控制装置5的功能性构成的框图。
如图7所示,车辆驱动控制装置5具有车辆驱动控制装置控制部50、路车间通信部51、车车间通信部52、雷达装置53、车速传感器54、偏航角速度传感器55、和总线接口56。
车辆驱动控制装置控制部50具有CPU、和ROM、RAM、ASIC、信号处理回路等,控制车辆驱动控制装置5的各部分。车辆驱动控制装置控制部50例如使CPU将ROM中所存储的程序向RAM读取来执行处理,另外例如通过ASIC中所安装的功能来执行处理,另外例如由信号处理回路进行信号处理来执行处理等,通过硬件与软件的协作来执行处理。
路车间通信部51从设置于道路等的路侧设备,接收通过光信标、电波信标、DSRC(专用短程通信技术;Dedicated Short Range Communications)等短程无线通信而发送的信息。在从路侧设备向路车间通信部51发送的信息中例如包括与其他车辆有关的信息、和与行人有关的信息等。路车间通信部51将从路侧设备接收到的信息向车辆驱动控制装置控制部50输出。
车车间通信部52在与位于车辆S周围的其他车辆之间通过无线通信相互收发信息。在通过车车间通信部52收发的信息中例如包括识别车辆S以及其他车辆的识别信息、表示车辆S以及其他车辆的位置的信息、表示车辆S以及其他车辆的速度的信息、表示车辆S以及其他车辆的行车方向的信息、表示车辆S以及其他车辆停止的时间的信息等。车车间通信部52将接收到的信息向车辆驱动控制装置控制部50输出。
雷达装置53将例如毫米波雷达或激光雷达等的电波、超声波雷达等的声波等向着车外照射。雷达装置53通过接收由存在于车辆S周围的对象物(例如其他车辆、人和物。)所反射的反射波来检测存在于车辆S周围的对象物。雷达装置53将与检测到的对象物有关的信息向车辆驱动控制装置控制部50输出。
车速传感器54检测车辆S的速度(以下称为“车速”。),并将表示检测到的车速的信息向车辆驱动控制装置控制部50输出。
偏航角速度传感器55检测向车辆S施加的偏航角速度,将表示检测到的偏航角速度的信息向车辆驱动控制装置控制部50输出。
总线接口56具有与总线6对应的通信接口,通过车辆驱动控制装置控制部50的控制,同与总线6连接的外部装置(包括信息处理装置4。)通信。
如图7所示,在总线6上,作为ECU而连接有发动机ECU60、变速箱ECU61、制动ECU62、和转向ECU63。车辆驱动控制装置5的车辆驱动控制装置控制部50经由总线6向各ECU输出控制信号来控制各ECU。
发动机ECU60基于从车辆驱动控制装置控制部50输入的控制信号,控制对设在发动机的进气管上的电子节气门进行开闭的节气门致动机构,来调整发动机的转速。
变速箱ECU61基于从车辆驱动控制装置控制部50输入的控制信号,控制对向变速机供给的动作油的液压进行调整的液压控制装置,来调整向变速机供给的动作油的液压,并切换变速机的变速比,使从发动机传递的转速或扭矩变化。尤其,变速箱ECU61基于从车辆驱动控制装置控制部50输入的控制信号,在驻车(P)、倒车(R)、驾驶(D)、空档(N)、以及低速(L)之间切换车辆S排档的状态。
制动ECU62基于从车辆驱动控制装置控制部50输入的控制信号,控制设在车辆S的车轮上的制动装置,进行车辆S的制动。
转向ECU63基于从车辆驱动控制装置控制部50输入的控制信号,控制设在车辆S上的转向装置,进行车辆S的转向。
车辆驱动控制装置5基于自动驾驶路径信息,不伴随基于用户的车辆S的驾驶,能够使车辆S从车辆S停车的停车位置,向作为使车辆S从停车位置移动而停车的目标的位置、即目标位置自动地移动而停车。如后所述地,信息处理装置4在车辆自动移动时将自动驾驶路径信息向车辆驱动控制装置5输出。
图8是用于说明自动驾驶路径信息的图。
自动驾驶路径信息包括轨迹信息,该轨迹信息在以停车于停车位置的车辆S为原点,以车辆S的前后方向为y轴,以车辆S的左右方向为x轴的虚拟坐标系中,表示从停车位置到达至目标位置处的车辆S的轨迹。轨迹信息包括表示对虚拟坐标系中车辆S的轨迹进行表现的点的各自坐标的信息、和表示各点处的车辆S的虚拟坐标系中的方向的信息。
图8以适于说明的方式简单化地表示作为虚拟坐标系一例的虚拟坐标系KZ1、和虚拟坐标系KZ1中的车辆S的轨迹的一例。图8所示的轨迹的情况下,轨迹信息包括表示点P0(为原点,与停车位置对应的点。)、点P1、点P2、点P3、点P4、以及点P5(与目标位置对应的点。)的各自坐标的信息、和表示各点处的车辆S的虚拟坐标系KZ1中的方向的信息。
车辆驱动控制装置5的车辆驱动控制装置控制部50基于自动驾驶路径信息、以及来自车车间通信部52、雷达装置53、车速传感器54、以及偏航角速度传感器55的输入,向发动机ECU60、变速箱ECU61、制动ECU62、以及转向ECU63输出控制信号,使停车于停车位置的车辆S以与自动驾驶路径信息所包括的轨道信息对应的轨道移动至目标位置,并在目标位置停车。
以上,说明了车辆驱动控制装置5基于自动驾驶路径信息使车辆S从停车位置向目标位置自动移动的方法。但是,车辆驱动控制装置5使车辆S从停车位置向目标位置移动的方法并不限于上述的方法,可以为各种方法。另外,当使车辆S从停车位置向目标位置自动移动时车辆驱动控制装置5所使用的传感器、ECU、和装置等也并不限于本实施方式的传感器、ECU、和装置等。另外,自动驾驶路径信息的内容只要是在车辆驱动控制装置5使车辆S从停车位置向目标位置自动移动时所用的信息,就可以为各种内容。
接着,以使车辆S驻车的情况、和使车辆S出库的情况为例来说明进行车辆自动移动情况下的信息处理系统1的各装置的动作。如上所述,驻车意味着使在驻车位置附近的驻车前位置停车的车辆S向驻车位置移动而停车的情况。另外,出库意味着使在驻车位置停车的车辆S向驻车位置附近的出库后停车位置移动而停车的情况。
<使车辆S驻车的情况>
首先说明使车辆S驻车的情况。
图9的流程图FA是表示信息处理装置4的动作的流程图,流程图FB是表示便携终端3的动作的流程图。
以下,以使车辆S驻车在设有多个驻车区域的驻车场的与1个驻车区域对应的驻车位置上的情况为例,来说明信息处理装置4以及便携终端3的动作。
用户在通过车辆自动移动来进行驻车的情况下,使车辆S停车于驻车位置近前的驻车前位置。
图10是表示作为驻车场一例的驻车场ST1、作为驻车场ST1中的驻车前位置一例的驻车前位置PS1、和作为驻车场ST1中的驻车位置一例的驻车位置PS2的图。
驻车场ST1作为能够供车辆驻车的驻车区域而具有3个驻车区域AR1、驻车区域AR2以及驻车区域AR3。在驻车区域AR1以及驻车区域AR3内已经停驻有与车辆S不同的其他车辆。在这种情况下,例如,用户将驻车区域AR2的驻车位置PS2决定为希望车辆S驻车的位置,使车辆S停车于驻车位置PS2近前的驻车前位置PS1。
如图9的流程图FA所示,当使车辆S停车于驻车前位置之后,用户操作信息处理装置4的操作输入部34,将信息处理装置4的动作模式变更为驻车模式(步骤S1)。
当由用户使动作模式变更为驻车模式后,信息处理装置4的信息处理装置控制部30执行驻车位置决定处理(步骤SA1)。
驻车位置决定处理是特定出能够供车辆S驻车的驻车区域并决定驻车位置的处理。
步骤SA1的驻车位置决定处理中,信息处理装置控制部30基于从GPS单元35输入的信息、从相对方位检测单元36输入的信息、以及地图数据33a所具有的信息等,特定出车辆S的现在位置(驻车前位置)。特定出车辆S的现在位置的方法可以为各种方法,另外,也可以使用上述信息以外的信息。例如,在特定出车辆S的现在位置时,也可以利用基于GLONASS、Galileo、Beidou、QZSS(准天顶卫星系统)等测位卫星系统的信号所得到的信息。
接下来,信息处理装置控制部30基于从设在车辆S上的各摄像头分别输入的拍摄图像数据、和地图数据33a的信息等,特定出车辆S的现在位置近前所存在的驻车区域,即能够供车辆S驻车的驻车区域。信息处理装置控制部30在地图数据33a具有与车辆S的现在位置所属的驻车场有关的驻车地图信息的情况下,使用该驻车地图信息来特定出驻车区域。特定出车辆S的现在位置近前所存在的驻车区域的方法可以为各种方法。
接下来,信息处理装置控制部30将与所特定出的驻车区域对应的位置决定为驻车位置。
在由步骤SA1决定了驻车位置之后,信息处理装置控制部30执行自动驾驶路径信息生成处理(步骤SA2)。
自动驾驶路径信息生成处理是生成包含轨道信息的自动驾驶路径信息的处理,其中,该轨道信息表示从车辆S停车的现在位置(驻车前位置)直到由步骤SA1所决定的驻车位置为止的轨道。
步骤SA2的自动驾驶路径信息生成处理中,信息处理装置控制部30基于从设在车辆S上的各摄像头分别输入的拍摄图像数据、和地图数据33a的信息等,计算从车辆S的现在位置直到驻车位置的车辆S的轨道。
如图10所示,在使驻车前位置PS1上所停车的车辆S向驻车位置PS2移动的情况下,信息处理装置控制部30例如计算轨道KD作为从驻车前位置直到驻车位置的车辆S的轨道。由图10所例举的轨道KD具有从驻车前位置PS1直到轨道KD上的位置MD的轨道KD1、和从位置MD直到驻车位置PS2的轨道KD2。轨道KD1是车辆S从驻车前位置PS1朝向行车方向边左转边“前进”并在位置MD临时停止的轨道。轨道KD2是车辆S从位置MD朝向行车方向边左转边“后退”并在驻车位置PS2停车的轨道。
接下来,信息处理装置控制部30定义以车辆S的现在位置为原点的虚拟坐标系,并且在所定义的虚拟坐标系中展开与车辆S的轨道对应的线段,基于所展开的线段生成轨道信息,并生成包含轨道信息的自动驾驶路径信息。
另一方面,在由步骤S1将信息处理装置4的动作模式变更为驻车模式之后,用户在携带便携终端3的状态下从车辆S下车走出车外。此外,用户并不需要必须从车辆S下车,但在本实施方式中,为了便于说明,说明用户从车辆S下车的情况。
当走出车外之后,用户操作便携终端3的触摸面板9,启动专用应用程序AP(步骤S2)。此外,用户在启动专用应用程序AP时,将便携终端3的壳体8的朝向设为“纵向”。
便携终端3的终端控制部20通过在步骤S2由用户启动的专用应用程序AP的功能,来执行流程图FB的处理。
根据专用应用程序AP的启动,终端控制部20在触摸面板9中显示锁定画面GM1(参照图11。)(步骤SB1)。
此外,在以下说明中,即便在没有特别说明的情况下,执行如下处理的主体也是终端控制部20,这些处理为:在触摸面板9中显示画面的处理、根据基于用户的操作、其他事由而使画面的内容变化的处理、以及将触摸面板9中所显示的画面从一个画面切换至其他画面的处理。
在显示了锁定画面GM1之后,终端控制部20监视相对于锁定画面GM1是否具有指示向车辆行进控制模式转移的输入(步骤SB2)。
以下,具体说明锁定画面GM1的内容以及步骤SB2的处理。
图11是表示锁定画面GM1的图。
锁定画面GM1是接受如下指示输入的画面,该指示为将便携终端3的动作模式向车辆行进控制模式(后述)转移。相对于锁定画面GM1,在以后述的方式而具有指示动作模式转移的输入的情况下,终端控制部20将动作模式向车辆行进控制模式转移,并且将触摸面板9中所显示的画面从锁定画面GM1向车辆控制画面GM2(后述)切换。如后所述地,在动作模式为车辆行进控制模式的期间,用户能够相对于触摸面板9进行操作来控制车辆S的行进。
如图11所示,在锁定画面GM1中显示有滑动单元SU1。滑动单元SU1具有滑动条BR1和滑动按钮SB1。
滑动条BR1是在左右方向上延伸的带状目标物,其明示滑动按钮SB1能够移动的范围,并且限制滑动按钮SB1的移动。
滑动按钮SB1是可供用户触摸操作的按钮(以下将可触摸操作的按钮表现为“触摸操作按钮”。),其根据用户的触摸滑动操作沿着滑动条BR1移动。如图11所示,在没有由用户进行触摸操作的情况下,维持滑动按钮SB1位于滑动条BR1的左端BR1a(一端)的状态。滑动按钮SB1能够在滑动条BR1的从左端BR1a到右端BR1b(另一端)的范围内移动。
锁定画面GM1中,在滑动单元SU1的上方显示有文字,该文字简洁地表现在输入向车辆行进控制模式转移的指示的情况下用户应进行的操作。
图12是用于说明触摸面板9中显示的画面的图。在图12中,与触摸面板9中显示的画面一同,显示对画面进行操作的用户手指的一部分。
图12的状态J1表示用户没有进行触摸操作的状态下的锁定画面GM1。在输入向车辆行进控制模式转移的指示的情况下,在状态J1的锁定画面GM1中,用户用手指触摸操作位于滑动条BR1的左端BR1a的滑动按钮SB1。接下来,用户进行触摸滑动操作使滑动按钮SB1沿着滑动条BR1向右方移动。触摸滑动操作意味着在维持手指与触摸面板9接触的状态的同时使手指所接触的位置移动的操作。根据触摸滑动操作,终端控制部20追随手指所接触的位置,使滑动按钮SB1沿着滑动条BR1移动。图12的状态J2表示通过触摸滑动操作而使滑动按钮SB1位于滑动条BR1的中央部的状态下的锁定画面GM1。
在此,在锁定画面GM1中,作为背景显示有车辆控制画面GM2(具体地为后述的俯瞰图像显示画面GM2a。)。终端控制部20在锁定画面GM1为状态J1时,利用将背景整体覆盖的深黑色的遮蔽图像,将作为背景所显示的俯瞰图像显示画面GM2a遮蔽。并且,终端控制部20随着滑动条BR1的左端BR1a与滑动按钮SB1之间的分离距离越大,而使遮蔽图像的颜色变得越浅。由此,根据基于用户的触摸滑动操作,滑动按钮SB1越向右方移动,作为背景所显示的俯瞰图像显示画面GM2a变得越鲜明。用户参照作为背景所显示的俯瞰图像显示画面GM2a根据对滑动按钮SB1的触摸滑动操作而变得鲜明的情况,由此能够从感觉上认识到正在恰当进行对锁定画面GM1的输入。
进行触摸滑动操作的用户使滑动按钮SB1移动至滑动条BR1的右端BR1b,并在规定期间(例如3秒。)内维持滑动按钮SB1位于右端BR1b的状态。由此,完成了指示向车辆行进控制模式转移的输入,动作模式向车辆行进控制模式转移。图12的状态J3表示滑动按钮SB1位于滑动条BR1的右端BR1b的状态下的锁定画面GM1。通过使状态J3在规定期间内继续,而完成指示向车辆行进控制模式转移的输入。通过图12的状态J1、状态J2以及状态J3的比较可知,滑动按钮SB1越位于右方,背景的俯瞰图像显示画面GM2a越鲜明。
此外,若在指示向车辆行进控制模式转移的输入完成之前,触摸滑动操作被解除,则终端控制部20根据触摸滑动操作的解除,使滑动按钮SB1移动至滑动条BR1的左端BR1a。
步骤SB2中,终端控制部20基于来自触摸面板9的输入监视滑动按钮SB1是否在规定期间内位于滑动条BR1的右端BR1b。并且,终端控制部20在滑动按钮SB1在规定期间内位于滑动条BR1的右端BR1b的情况下,判断为具有指示向车辆行进控制模式转移的输入。
如上所述,在本实施方式中,滑动按钮SB1在规定期间内位于滑动条BR1的右端BR1b后,指示向车辆行进控制模式转移的输入才完成。通过该构成,防止了用户手指与触摸面板9偶然地接触,导致违背用户意愿地完成指示向车辆行进控制模式转移的输入。
步骤SB2中,在判断为具有指示向车辆行进控制模式转移的输入的情况下(步骤SB2:是),终端控制部20将动作模式向车辆行进控制模式转移(步骤SB3)。
根据动作模式的转移,终端控制部20将触摸面板9中所显示的画面从锁定画面GM1向车辆控制画面GM2切换(步骤SB4)。
图12的状态J4表示触摸面板9中所显示的画面刚从锁定画面GM1切换到车辆控制画面GM2后的车辆控制画面GM2。此外,在画面刚切换到车辆控制画面GM2后,便携终端3的壳体8的朝向为“纵向”。
如随后详述地,在触摸面板9中,根据壳体8的朝向显示有俯瞰图像显示画面GM2a或车外图像显示画面GM2b的某一画面,来作为车辆控制画面GM2。在画面刚切换为车辆控制画面GM2后,壳体8的朝向为“纵向”,在触摸面板9中作为车辆控制画面GM2而显示有俯瞰图像显示画面GM2a。
如图12的状态J4所示,终端控制部20根据伴随动作模式转移的画面的切换,将锁定画面GM1中的滑动按钮SB1向作为触摸操作按钮的行进控制按钮QB(操作按钮)切换,并将行进控制按钮QB显示在车辆控制画面GM2中。即,终端控制部20并非根据画面的切换,重新显示行进控制按钮QB来作为与滑动按钮SB1不同的按钮,而是根据画面的切换,使位于滑动条BR1的右端BR1b的滑动按钮SB1不变更位置地作为行进控制按钮QB来发挥作用。因此,在画面刚切换完后,行进控制按钮QB位于锁定画面GM1中的滑动条BR1的右端BR1b,另外,行进控制按钮QB处于由用户触摸操作的状态。
如图9的流程图FA以及流程图FB所示,当便携终端3的动作模式向车辆行进控制模式转移之后,信息处理装置4的信息处理装置控制部30以及便携终端3的终端控制部20协作来执行车辆行进控制处理(步骤SA3、步骤SB5)。以下,针对车辆行进控制处理,分为与车辆S的行进控制有关的处理、和与向触摸面板9的显示有关的处理来说明。
此外,当专用应用程序AP启动时,终端控制部20遵照Wi-Fi的规格,在便携终端3与信息处理装置4之间确立通信路径,并在便携终端3与信息处理装置4之间确立能够通信的状态。为了确立通信路径所必要的信息(例如为了信息处理装置4认证便携终端3所必要的密码等。)被事先登录。
<与车辆S的行进控制有关的处理>
首先,说明车辆行进控制处理中的与车辆S的行进控制有关的处理。
车辆行进控制处理中,便携终端3的终端控制部20在车辆控制画面GM2中所显示的行进控制按钮QB被触摸操作的期间,控制终端通信部21,向信息处理装置4发送行进指示信号。另一方面,终端控制部20根据行进控制按钮QB的触摸操作的解除,停止行进指示信号的发送。即,终端控制部20在行进控制按钮QB没有被触摸操作的期间,不向信息处理装置4发送行进指示信号。
如后所述地,根据便携终端3的壳体8的朝向,作为车辆控制画面GM2所显示的画面被切换,另外,根据用户的操作,车辆控制画面GM2中的行进控制按钮QB的位置移动。但是,终端控制部20不管车辆控制画面GM2中所显示的画面的切换,另外也不管行进控制按钮QB的位置,只要在行进控制按钮QB被触摸操作的期间就向信息处理装置4发送行进指示信号,只要在没有被触摸操作的期间就不向信息处理装置4发送行进指示信号。
车辆行进控制处理中,信息处理装置4的信息处理装置控制部30向车辆驱动控制装置5输出由步骤SA2的自动驾驶路径信息生成处理所生成的自动驾驶路径信息。而且,信息处理装置控制部30在从便携终端3接收行进指示信号的期间,向车辆驱动控制装置5输出驱动指示信号。另一方面,信息处理装置控制部30在没有从便携终端3接收行进指示信号的期间,不向车辆驱动控制装置5输出驱动指示信号。
车辆驱动控制装置5基于从信息处理装置4输入的驱动指示信号执行以下的处理。即,车辆驱动控制装置5的车辆驱动控制装置控制部50基于自动驾驶路径信息中所含的轨道信息,在从信息处理装置4输入有驱动指示信号的期间,使车辆S沿着轨道信息所示的轨道移动。另一方面,在从输入有驱动指示信号的状态变成没有输入的状态的情况下,车辆驱动控制装置控制部50将车辆S制动,停止车辆S的移动。
并且,在从没有输入驱动指示信号的状态变成输入了驱动指示信号的状态的情况下,车辆驱动控制装置控制部50使车辆S出发,车辆S沿着轨道信息所示的轨道移动。若使用图10举例来说明,则车辆驱动控制装置控制部50在使位于驻车前位置PS1的车辆S出发之后,在输入有驱动指示信号的期间,使车辆S沿着轨道KD移动。并且,当车辆S位于位置PS3时变成了没有输入驱动指示信号的状态的情况下,车辆驱动控制装置控制部50将车辆S制动并停止车辆S的移动。在该状态下,再次输入有驱动指示信号的情况下,车辆驱动控制装置控制部50使位于位置PS3的车辆S出发,并使车辆S沿着轨道KD移动。
进行以上处理的结果为,在用户触摸操作车辆控制画面GM2的行进控制按钮QB的期间,车辆S沿着轨道移动,另一方面,在用户没有触摸操作行进控制按钮QB的期间,车辆S的移动停止。由此,用户在因某种理由而希望停止车辆S的移动的情况下,通过进行解除行进控制按钮QB的触摸操作这一简单的作业,就能够迅速地停止车辆S的移动。
<与向触摸面板9的显示有关的处理>
接着,说明车辆行进控制处理中的与向触摸面板9的显示有关的处理。
在本实施方式中,关于与触摸面板9的显示有关的处理,作为动作模式具有第1模式和第2模式这2个动作模式。用户能够以规定方法在第1模式和第2模式之间切换动作模式。
以下,说明动作模式为第1模式的情况下的信息处理装置4以及便携终端3的动作,然后,说明动作模式为第2模式的情况下的信息处理装置4以及便携终端3的动作。
<第1模式>
图13的流程图FC是表示动作模式为第1模式的情况下的便携终端3的动作的流程图。图14A的流程图FD以及图14B的流程图FE分别是表示动作模式为第1模式的情况下的信息处理装置4的动作的流程图。
如图13的流程图FC所示,便携终端3的终端控制部20根据向车辆行进控制模式的转移,来控制终端通信部21,向信息处理装置4发送车辆行进控制模式信息,该车辆行进控制模式信息表示向车辆行进控制模式转移了的情况(步骤SC1)。
如图14A的流程图FD所示,信息处理装置4的信息处理装置控制部30接收车辆行进控制模式信息(步骤SD1)。
信息处理装置控制部30根据车辆行进控制模式信息的接收,基于从设在车辆S上的各摄像头分别输入的拍摄图像数据,开始进行合成图像G向显示装置32的显示(步骤SD2)。
图15是从正面看到的显示有合成图像G的显示装置32的图。
如图15所示,显示装置32中能够图像显示的显示区域AR的形状为沿上下方向具有短边并沿左右方向具有长边的长方形状。此外,上下方向是与铅垂方向对应的方向,左右方向是与跟铅垂方向正交的方向对应的方向。
如图15所示,合成图像G具有俯瞰图像G1和车外图像G2。
俯瞰图像G1是对车辆S俯瞰的图像。如图15所示,俯瞰图像G1是沿上下方向具有长边并沿左右方向具有短边的长方形状的图像,在显示区域AR的左部显示。在俯瞰图像G1的右下部显示有标识M1,该标识M1明示所显示的图像为俯瞰图像G1的内容。
车外图像G2是基于由车外拍摄用摄像头中1个车外拍摄用摄像头拍摄的车外的拍摄结果所得到的图像。如图15所示,车外图像G2是沿上下方向具有短边并沿左右方向具有长边的长方形状的图像。车外图像G2在俯瞰图像G1的右边与车外图像G2的左边重叠的状态下,在显示区域AR的右部显示。在车外图像G2的右下部显示有标识M2。标识M2是明示车外拍摄用摄像头中,与显示装置32中所显示的车外图像G2对应的拍摄图像数据的输出源的车外拍摄用摄像头的标识。例如,在与显示装置32中所显示的车外图像G2对应的拍摄图像数据的输出源的车外拍摄用摄像头为前方拍摄用摄像头CA1的情况下,标识M2是相对于表示车辆S的图标而施加了明示车辆S前方被拍摄的装饰的标识。用户通过参照标识M2,能够准确地认识到显示装置32中所显示的车外图像G2是基于车外拍摄用摄像头中的哪个车外拍摄用摄像头的拍摄结果所得的图像。
合成图像的显示时,信息处理装置控制部30取得从各俯瞰用摄像头分别输入的拍摄图像数据。接下来,基于从各俯瞰用摄像头分别输入的拍摄图像数据,生成对车辆S俯瞰的图像的图像数据(以下称为“俯瞰图像数据”。)。对车辆S俯瞰的图像是指表示从上方观察车辆S整体以及车辆S周围的样子的图像。此外,本实施方式中,图像数据是具有与颜色有关的信息(例如,由规定灰度的灰度值来表示RGB的各颜色的颜色成分的信息。)的点以规定分辨率配置为点矩阵状的位图数据。俯瞰图像数据是尺寸与俯瞰图像G1的尺寸(上下方向的长度以及左右方向的长度。)对应的规定分辨率的图像数据。基于从俯瞰用摄像头输入的拍摄图像数据来生成俯瞰图像数据的处理通过现有技术恰当地进行。
各俯瞰用摄像头分别同步执行拍摄,同步地将基于拍摄结果所得的拍摄图像数据向信息处理装置控制部30输出。各俯瞰用摄像头分别以规定周期(例如10毫秒。)来执行拍摄的执行以及拍摄图像数据的输出。信息处理装置控制部30以与该规定周期对应的周期,取得从各俯瞰用摄像头分别输入的拍摄图像数据,并基于所取得的拍摄图像数据生成俯瞰图像数据。俯瞰图像数据的生成时,信息处理装置控制部30将与标识M1对应的图像数据添附在恰当的位置上来生成俯瞰图像数据。
另外,各车外拍摄用摄像头分别以规定周期执行拍摄,并将基于拍摄结果所得的拍摄图像数据向信息处理装置控制部30输出。信息处理装置控制部30选择车外拍摄用摄像头中的1个车外拍摄用摄像头,取得从所选择的车外拍摄用摄像头输入的拍摄图像数据,并基于拍摄图像数据,生成车外图像G2的图像数据(以下称为“车外图像数据”。)。信息处理装置控制部30以与该规定周期对应的周期生成车外图像数据。车外图像数据的生成时,信息处理装置控制部30将与标识M2对应的图像数据添附在恰当的位置来生成车外图像数据。车外图像数据是尺寸与车外图像G2的尺寸(上下方向的长度以及左右方向的长度。)对应的规定分辨率的图像数据。
信息处理装置控制部30以规定周期同步地执行基于来自俯瞰用摄像头的输入进行的俯瞰图像数据的生成、以及基于来自车外拍摄用摄像头的输入进行的车外图像数据的生成。信息处理装置控制部30以规定周期,将所生成的俯瞰图像数据和所生成的车外图像数据,与俯瞰图像G1和车外图像G2的位置关系对应地合成,来生成合成图像G的合成图像数据。信息处理装置控制部30基于所生成的合成图像数据控制显示装置32,并在显示装置32中显示基于合成图像数据所得的合成图像G。
该结果为,在显示装置32中显示了使俯瞰图像G1和车外图像G2合成而得的合成图像G。俯瞰图像G1的内容基于俯瞰用摄像头的拍摄结果,随时变化,车外图像G2的内容基于所选择的车外拍摄用摄像头的拍摄结果,随时变化。
如上所述,信息处理装置控制部30以规定周期生成合成图像数据,使合成图像G在显示装置32中显示。
根据合成图像G向显示装置32的显示,信息处理装置控制部30以该规定周期向便携终端3发送所生成的合成图像数据(步骤SD3)。
此外,第1模式中,在信息处理装置控制部30对便携终端3发送合成图像数据这一点上,与后述的第2模式不同。
如流程图FC所示,便携终端3的终端控制部20开始信息处理装置4所发送的合成图像数据的接收(步骤SC2),基于所接收的合成图像数据,在触摸面板9中显示俯瞰图像显示画面GM2a(步骤SC3)。此外,在执行步骤SC3的处理的时点,便携终端3的壳体的朝向为“纵向”。
俯瞰图像显示画面GM2a是如图12的状态J3所示地显示俯瞰图像G1,并且与俯瞰图像G1重叠地显示行进控制按钮QB的画面。
步骤SC3中,终端控制部20进行以下的处理,在触摸面板9中显示俯瞰图像显示画面GM2a。即,终端控制部20针对以规定周期接收的各合成图像数据,从合成图像数据提取俯瞰图像数据。合成图像数据中的俯瞰图像数据的区域是预先决定的,终端控制部20从合成图像数据中切取合成图像数据中的俯瞰图像数据的区域内所属的数据,由此提取俯瞰图像数据。接下来,终端控制部20对所提取的俯瞰图像数据,进行必要的图像处理(调整分辨率的处理、调整尺寸的处理等。),基于进行了图像处理之后的俯瞰图像数据,使俯瞰图像显示画面GM2a在触摸面板9中显示。
俯瞰图像显示画面GM2a中所显示的俯瞰图像G1的内容基于俯瞰用摄像头的拍摄结果,与信息处理装置4的显示装置32中显示的俯瞰图像G1同步地随时变化。
在此,如上所述,俯瞰图像G1是沿上下方向(与铅垂方向对应的方向。)具有长边并沿左右方向(与跟铅垂方向正交的方向对应的方向。)具有短边的长方形状的图像。另外,便携终端3的壳体8的朝向为“纵向”的情况下,触摸面板9成为长边的方向沿着铅垂方向,短边的方向沿着与铅垂方向正交的方向的状态。因此,在壳体8的朝向为“纵向”的情况下,通过将俯瞰图像G1显示在触摸面板9中,适当运用俯瞰图像G1沿上下方向具有长边并沿左右方向具有短边这一特征,不会将俯瞰图像G1不必要地缩小,能够使用触摸面板9的显示区域的整体来显示俯瞰图像G1。由此,对用户来说便于观察俯瞰图像G1,提高用户的便利性。
在显示了俯瞰图像显示画面GM2a之后,终端控制部20基于来自壳体状态检测部23的输入监视便携终端3的壳体8的朝向是否从“纵向”变化为“横向”(步骤SC4)。
在检测到便携终端3的壳体8的朝向从“纵向”变化为“横向”的情况下(步骤SC4:是),终端控制部20依照与车辆S的状态对应的规定优先顺位,选择车外拍摄用摄像头中的1个车外拍摄用摄像头(步骤SC5)。
例如,优先顺位是越能够拍摄到车辆S行车方向的车外拍摄用摄像头,越成为高顺位的优先顺位。该情况下,在车辆S向着前方“前进”的情况下,前方拍摄用摄像头CA1成为最高优先顺位,另外,在车辆S向着前方右侧“前进”的情况下,前方右侧拍摄用摄像头CA2成为最高优先顺位,另外,在车辆S向着后方“后退”情况下,后方拍摄用摄像头CA5成为最高优先顺位。在此,设想了在车辆S进行车辆自动移动的情况下,用户希望认识到车辆S行车方向的状态的案例很多。
另外例如,优先顺位是越能够拍摄到与车辆S接近的物体的摄像头,越成为高顺位的优先顺位。与车辆S接近的物体例如是在与通过车辆自动移动驻车的预定驻车区域相邻的驻车区域内已经驻车的车辆,另外例如是用户以外的人和物。设想了用户在与车辆S接近的位置上存在物体的情况下,希望认识该物体并认识该物体与车辆S的位置关系的案例很多。
此外,终端控制部20在步骤SC5中,适当地与信息处理装置4通信,来取得为了以规定优先顺位选择车外拍摄用摄像头所必要的信息。
当在步骤SC5中选择了1个车外拍摄用摄像头之后,终端控制部20向信息处理装置4发送表示所选择的车外拍摄用摄像头的选择摄像头信息(例如,识别所选择的车外拍摄用摄像头的识别信息。)(步骤SC6)。
如图14B的流程图FE所示,信息处理装置4的信息处理装置控制部30接收选择摄像头信息(步骤SE1)。
接下来,信息处理装置控制部30将显示装置32中所显示的车外图像G2,变更为基于由步骤SE1接收的选择摄像头信息所示的车外拍摄用摄像头的拍摄结果所得的图像(步骤SE2)。
步骤SE2中,信息处理装置控制部30将俯瞰图像数据、和基于选择摄像头信息所示的车外拍摄用摄像头的拍摄结果所得的车外图像数据合成来生成合成图像数据,并基于所生成的合成图像数据显示合成图像G。
在步骤SE2的处理的前后,信息处理装置控制部30继续执行与显示装置32中显示的合成图像G对应的合成图像数据的发送。该结果为,在步骤SE2的处理后,成为如下状态:信息处理装置4向便携终端3发送的合成图像数据中,包含有基于由步骤SC5所选择的车外拍摄用摄像头的拍摄结果所得的车外图像数据。
如图13的流程图FC所示,便携终端3的终端控制部20在由步骤SC6发送了选择摄像头信息之后,基于从信息处理装置4接收的合成图像数据,在触摸面板9中显示车外图像显示画面GM2b(步骤SC7)。
此外,步骤SC7中,车外图像显示画面GM2b的显示中所用的合成图像数据,是包含有基于由步骤SC5所选择的车外拍摄用摄像头的拍摄结果所得的车外图像数据的合成图像数据。
图12的状态J6表示车外图像显示画面GM2b。车外图像显示画面GM2b是如图12的状态J6所示地显示有车外图像G2,并且与车外图像G2重叠地显示有行进控制按钮QB的画面。
步骤SC7中,终端控制部20针对以规定周期接收的各合成图像数据,从合成图像数据提取车外图像数据。合成图像数据中的车外图像数据的区域是预先决定的,终端控制部20从合成图像数据,切取合成图像数据中的车外图像数据的区域内所属的数据,由此提取车外图像数据。接下来,终端控制部20对所提取的车外图像数据,进行必要的图像处理(调整分辨率的处理、调整尺寸的处理等。),基于进行了图像处理之后的车外图像数据,使车外图像显示画面GM2b在触摸面板9中显示。
车外图像显示画面GM2b中所显示的车外图像G2的内容,基于由步骤SC5选择的车外拍摄用摄像头的拍摄结果,与信息处理装置4的显示装置32中显示的车外图像G2同步地随时变化。
如上所述,在本实施方式中,在便携终端3的壳体8的朝向从“纵向”向“横向”变化了的情况下,替代俯瞰图像显示画面GM2a,而在触摸面板9中显示车外图像显示画面GM2b。由此,用户在希望替代俯瞰图像G1而确认车外图像G2的情况下,通过进行使便携终端3的壳体8的朝向变化这一简单的作业,就能够显示车外图像显示画面GM2b来确认车外图像G2。尤其,使便携终端3的壳体8的朝向变化的操作,是即便在用户单手握持便携终端3的情况下也能够简单且准确地执行的操作,用户的便利性高。
尤其,在本实施方式中,与便携终端3的壳体8的朝向从“纵向”向“横向”的变化对应地所显示的车外图像显示画面GM2b,是基于依照与车辆S的状态对应的规定优先顺位所选择的车外拍摄用摄像头的拍摄结果所得的画面。由此,车外图像显示画面GM2b中显示的车外图像G2,有很高的可能性是基于由用户所希望的车外拍摄用摄像头拍摄的拍摄结果所得的图像,用户的便利性高。
另外,如上所述,车外图像G2是沿左右方向(与跟铅垂方向正交的方向对应的方向。)具有长边并沿上下方向(与铅垂方向对应的方向。)具有短边的长方形状的图像。另外,在便携终端3的壳体8的朝向为“横向”的情况下,触摸面板9成为长边的方向沿着与铅垂方向正交的方向,且短边的方向沿着铅垂方向的状态。因此,在壳体8的朝向为“横向”的情况下,通过将车外图像G2显示在触摸面板9中,来适当运用车外图像G2沿左右方向具有长边且沿上下方向具有短边这一特征,无需不必要地缩小车外图像G2,能够使用触摸面板9的显示区域的整体来显示车外图像G2。由此,对用户来说便于观察车外图像G2,用户的便利性提高。
在由步骤SC7显示了车外图像显示画面GM2b之后,终端控制部20监视壳体8是否进行了“右动”或者“左动”的某一运动(步骤SC8),同时监视壳体8的朝向是否变成“纵向”(步骤SC9)。
在壳体8没有进行“右动”或者“左动”的任一运动(步骤SC8:否),壳体8的朝向变成“纵向”的情况下(步骤SC9:是),终端控制部20将处理次序向步骤SC3转移。如上所述,步骤SC3中,终端控制部20基于从信息处理装置4接收的合成图像数据,在触摸面板9中显示俯瞰图像显示画面GM2a。
这样,在本实施方式中,在便携终端3的壳体8的朝向从“横向”向“纵向”变化了的情况下,替代车外图像显示画面GM2b而在触摸面板9中显示俯瞰图像显示画面GM2a。由此,用户在希望替代车外图像G2来确认俯瞰图像G1的情况下,通过进行使便携终端3的壳体8的朝向变化这一简单的作业,能够显示俯瞰图像显示画面GM2a来确认俯瞰图像G1。尤其,使便携终端3的壳体8的朝向变化的操作是即便在用户用单手握持便携终端3的情况下也能够简单且准确地执行的操作,用户的便利性高。
尤其,俯瞰图像G1被设想为在进行车辆自动移动的期间,用户确认的频率最高的图像。并且,根据本实施方式,用户通过将便携终端3的壳体8的朝向设为“纵向”,能够在任意的时间确认俯瞰图像G1,用户的便利性高。
另一方面,在壳体8的朝向没有成为“纵向”(步骤SC9:否),壳体8进行了“右动”或者“左动”的某一运动的情况下(步骤SC8:是),终端控制部20将处理次序向步骤SC10转移。即,终端控制部20在当壳体8的朝向为“横向”时壳体8进行了“右动”或者“左动”的情况下,将处理次序向步骤SC10转移。
步骤SC10中,终端控制部20判断壳体8的运动是“右动”还是“左动”。
在壳体8的运动为“右动”的情况下(步骤SC10:“右动”),终端控制部20依照与车外拍摄用摄像头所拍摄的方向对应的第1顺序,选择车外拍摄用摄像头中的1个车外拍摄用摄像头(步骤SC11)。
如图6所示,第1顺序为“前方”→“前方右侧”→“侧方右侧”→“后方右侧”→“后方”→“后方左侧”→“侧方左侧”→“前方左侧”→“前方”。即,第1顺序是车外拍摄用摄像头所拍摄的方向绕顺时针变化的顺序。
步骤SC11中,终端控制部20依照第1顺序选择如下的车外拍摄用摄像头,该摄像头拍摄在执行步骤SC11的处理之前被选择的车外拍摄用摄像头所拍摄的方向的下一顺序的方向。例如,在执行步骤SC11的处理之前,前方拍摄用摄像头CA1被选择的情况下,步骤SC11中,终端控制部20依照第1顺序选择前方右侧拍摄用摄像头CA2。另外例如,在执行步骤SC11的处理之前,后方拍摄用摄像头CA5被选择的情况下,步骤SC11中,终端控制部20依照第1顺序选择后方左侧拍摄用摄像头CA6。
在由步骤SC11选择了车外拍摄用摄像头之后,终端控制部20将表示所选择的车外拍摄用摄像头的选择摄像头信息向信息处理装置4发送(步骤SC12)。步骤SC12的处理后,终端控制部20将处理次序返回至步骤SC8。
根据步骤SC12的选择摄像头信息的发送,信息处理装置4执行图14B的流程图FE的处理,将显示装置32中显示的车外图像G2,变更为基于选择摄像头信息所示的车外拍摄用摄像头的拍摄结果所得的图像。伴随此情况,在从信息处理装置4向便携终端3发送的合成性图像数据中,包含了基于选择摄像头信息所示的车外拍摄用摄像头的拍摄结果所得的车外图像数据。由此,便携终端3的触摸面板9的车外图像显示画面GM2b中显示的车外图像G2成为基于由步骤SC11选择的车外拍摄用摄像头的拍摄结果所得的图像。
这样,在本实施方式中,用户通过进行使壳体“右动”这一简单的作业,就能够切换车外图像显示画面GM2b中显示的车外图像G2,用户的便利性高。尤其,在壳体8进行了“右动”的情况下,依照第1顺序,与车外图像显示画面GM2b中显示的车外图像G2对应的拍摄的方向绕顺时针变化。并且,“右动”中壳体8移动的“右方向”和“绕顺时针”是关联的,用户能够有感觉地把握在使壳体8“右动”之后,基于拍摄哪个方向的车外拍摄用摄像头的拍摄结果所得的车外图像G2会在触摸面板9中显示,用户的便利性高。
另一方面,步骤SC10中判断为壳体8的运动为“左动”的情况下(步骤SC10:“左动”),终端控制部20执行以下的处理。
壳体8的运动为“左动”的情况下(步骤SC10:“左动”),终端控制部20依照与车外拍摄用摄像头拍摄的方向所对应的第2顺序,选择车外拍摄用摄像头中的1个车外拍摄用摄像头(步骤SC13)。
如图6所示,第2顺序为“前方”→“前方左侧”→“侧方左侧”→“后方左侧”→“后方”→“后方右侧”→“侧方右侧”→“前方右侧”→“前方”。即,第2顺序是车外拍摄用摄像头拍摄的方向绕逆时针变化的顺序。
步骤SC13中,终端控制部20依照第2顺序,选择对在执行步骤SC13的处理之前选择的车外拍摄用摄像头所拍摄的方向的下一顺序的方向进行拍摄的车外拍摄用摄像头。例如,在执行步骤SC13的处理之前,选择了前方拍摄用摄像头CA1的情况下,在步骤SC13中,终端控制部20依照第2顺序选择前方左侧拍摄用摄像头CA8。另外例如,在执行步骤SC13的处理之前,选择了后方拍摄用摄像头CA5的情况下,在步骤SC13中,终端控制部20依照第2顺序选择后方右侧拍摄用摄像头CA4。
在步骤SC13中选择了车外拍摄用摄像头之后,终端控制部20将表示所选择的车外拍摄用摄像头的选择摄像头信息向信息处理装置4发送(步骤SC14)。步骤SC14的处理之后,终端控制部20将处理次序返回至步骤SC8。
根据步骤SC14的选择摄像头信息的发送,信息处理装置4执行图14B的流程图FE的处理,将显示装置32中显示的车外图像G2变更为基于选择摄像头信息所示的车外拍摄用摄像头的拍摄结果得到的图像。伴随此情况,在从信息处理装置4向便携终端3发送的合成性图像数据中,包含有基于选择摄像头信息所示的车外拍摄用摄像头的拍摄结果得到的车外图像数据。由此,便携终端3的触摸面板9的车外图像显示画面GM2b中显示的车外图像G2是基于由步骤SC11选择的车外拍摄用摄像头的拍摄结果所得的图像。
这样,在本实施方式中,用户通过进行使壳体8“左动”这一简单的作业,而能够将车外图像显示画面GM2b中显示的车外图像G2切换,用户的便利性高。尤其,在壳体8“左动”的情况下,依照第2顺序,与车外图像显示画面GM2b中显示的车外图像G2所对应的拍摄的方向绕逆时针变化。并且,“左动”中壳体8所移动的“左方向”与“绕逆时针”是关联的,用户能够有感觉地把握在使壳体8“左动”之后,基于拍摄哪个方向的车外拍摄用摄像头的拍摄结果所得的车外图像G2会在触摸面板9中显示,用户的便利性高。
以上,说明了第1模式。第1模式与后述的第2模式相比较,不需要执行信息处理装置4从合成图像数据提取俯瞰图像数据以及车外图像数据的处理,由此信息处理装置4的负担小。
<第2模式>
图16的流程图FF是表示动作模式为第2模式的情况下的便携终端3的动作的流程图。图17A的流程图FG、图17B的流程图FH、以及图17C的流程图FI分别是表示动作模式为第2模式的情况下的信息处理装置4的动作的流程图。
如图16的流程图FF所示,便携终端3的终端控制部20根据向车辆行进控制模式的转移,来控制终端通信部21,向信息处理装置4发送车辆行进控制模式信息,该车辆行进控制模式信息表示向车辆行进控制模式转移了的情况(步骤SF1)。
如图17A的流程图FG所示,信息处理装置4的信息处理装置控制部30接收车辆行进控制模式信息(步骤SG1)。
信息处理装置控制部30根据车辆行进控制模式信息的接收,基于从各车外拍摄用摄像头分别输入的、以及从各俯瞰用摄像头分别输入的拍摄图像数据,而开始合成图像G向显示装置32的显示(步骤SG2)。
如图16的流程图FF所示,便携终端3的终端控制部20与步骤SF1的车辆行进控制模式信息的发送连续地,发送表示便携终端3的壳体8的朝向为“纵向”的纵向信息(步骤SF2)。此外,在步骤SC3的处理被执行的时点,便携终端3的壳体的朝向为“纵向”。
如图17B的流程图FH所示,信息处理装置4的信息处理装置控制部30接收纵向信息(步骤SH1)。
信息处理装置控制部30根据纵向信息的接收,而开始俯瞰图像数据向便携终端3的发送(步骤SH2)。
步骤SH2中,信息处理装置控制部30从以规定周期生成的合成图像数据中提取俯瞰图像数据。接下来,信息处理装置控制部30对所提取的俯瞰图像数据,进行与便携终端3的触摸面板9的分辨率、尺寸对应的图像处理,将进行了图像处理之后的俯瞰图像数据向便携终端3发送。信息处理装置控制部30以与生成合成图像数据的周期对应的周期来执行俯瞰图像数据的发送。
此外,终端控制部20在步骤SH2的处理之前正在发送车外图像数据的情况下,在停止车外图像数据的发送的基础上,开始进行俯瞰图像数据的发送。
如图16的流程图FF所示,便携终端3的终端控制部20开始俯瞰图像数据的接收(步骤SF3)。
接下来,终端控制部20基于由步骤SF3开始接收的俯瞰图像数据,使显示有俯瞰图像G1的俯瞰图像显示画面GM2a在触摸面板9中显示(步骤SF4)。
俯瞰图像显示画面GM2a中显示的俯瞰图像G1的内容基于俯瞰用摄像头的拍摄结果,与信息处理装置4的显示装置32中显示的俯瞰图像G1同步地,随时变化。
在显示了俯瞰图像显示画面GM2a之后,终端控制部20基于来自壳体状态检测部23的输入监视便携终端3的壳体8的朝向是否从“纵向”向“横向”变化了(步骤SF5)。
在检测到便携终端3的壳体8的朝向从“纵向”向“横向”变化了的情况下(步骤SF5:是),终端控制部20依照与车辆S的状态对应的规定优先顺位,从车外拍摄用摄像头中选择1个车外拍摄用摄像头(步骤SF6)。规定优先顺位是例如由第1模式所例举的优先顺位。
接下来,终端控制部20将包含有表示便携终端3的朝向为“横向”的信息、以及表示由步骤SF6选择的车外拍摄用摄像头的信息的横向信息向信息处理装置4发送(步骤SF7)。
如图17C的流程图FI所示,信息处理装置4的信息处理装置控制部30接收横向信息(步骤SI1)。
根据横向信息的接收,信息处理装置控制部30将显示装置32中显示的车外图像G2,变更为基于包含有由步骤SI1接收的横向信息的选择摄像头信息所示的车外拍摄用摄像头的拍摄结果所得到的图像(步骤SI2)。
接下来,信息处理装置控制部30停止俯瞰图像数据向便携终端3的发送,开始车外图像数据的发送(步骤SI3)。
步骤SI3中,信息处理装置控制部30从以规定周期生成的合成图像数据中提取车外图像数据。接下来,信息处理装置控制部30对所提取的车外图像数据,进行与便携终端3的触摸面板9的分辨率、尺寸对应的图像处理,将进行了图像处理之后的车外图像数据向便携终端3发送。信息处理装置控制部30以与生成合成图像数据的周期对应的周期执行车外图像数据的发送。
如图16的流程图FF所示,便携终端3的终端控制部20开始进行车外图像数据的接收(步骤SF8)。接下来,终端控制部20基于由步骤SF8开始接收的车外图像数据,使显示有车外图像G2的车外图像显示画面GM2b在触摸面板9中显示(步骤SF9)。
车外图像显示画面GM2b中显示的车外图像G2的内容基于俯瞰用摄像头的拍摄结果,与信息处理装置4的显示装置32中显示的车外图像G2同步地,随时变化。
步骤SF9的处理的结果为,根据便携终端3的壳体8的朝向从“纵向”变化为“横向”,替代俯瞰图像显示画面GM2a而显示车外图像显示画面GM2b。该结果的效果与第1模式的说明所述地相同。
在由步骤SF9显示了车外图像显示画面GM2b之后,终端控制部20监视壳体8是否进行了“右动”或者“左动”的某一运动(步骤SF10),并监视壳体8的朝向是否成为“纵向”(步骤SF11)。
在壳体8没有进行“右动”或者“左动”的任一运动(步骤SF10:否),且壳体8的朝向成为“纵向”的情况下(步骤SF11:是),终端控制部20将处理次序向步骤SF2转移。该结果为,在便携终端3的壳体8的朝向从“横向”变化为“纵向”的情况下,在触摸面板9中,替代车外图像显示画面GM2b而显示俯瞰图像显示画面GM2a。该结果的效果与第1模式的说明所述地相同。
另一方面,在壳体8的朝向没有成为“纵向”(步骤SF11:否),且壳体8进行了“右动”或者“左动”的任一动作的情况下(步骤SF10:是),终端控制部20将处理次序向步骤SF12转移。即,终端控制部20在壳体8的朝向为“横向”时壳体8进行了“右动”或者“左动”的情况下,将处理次序向步骤SF12转移。
步骤SF12中,终端控制部20判断壳体8的运动是“右动”还是“左动”。在壳体8的运动为“右动”的情况下(步骤SF12:“右动”),终端控制部20依照与车外拍摄用摄像头拍摄的方向对应的第1顺序,从车外拍摄用摄像头中选择1个车外拍摄用摄像头(步骤SF13)。
接下来,终端控制部20将包含有表示便携终端3的朝向为“横向”的信息、以及表示由步骤SF13选择的车外拍摄用摄像头的信息的横向信息向信息处理装置4发送(步骤SF14)。步骤SF14的处理之后,终端控制部20将处理次序向步骤SF10转移。
根据步骤SF14的横向信息的发送,信息处理装置4执行图17C的流程图FI的处理,将显示装置32中显示的车外图像G2变更为基于包含有横向信息的选择摄像头信息所示的车外拍摄用摄像头的拍摄结果所得到的图像。而且,信息处理装置4开始基于选择摄像头信息所示的车外拍摄用摄像头的拍摄结果所得到的车外图像数据向便携终端3的发送。由此,便携终端3的触摸面板9的车外图像显示画面GM2b中显示的车外图像G2,成为基于由步骤SF13选择的车外拍摄用摄像头的拍摄结果所得到的图像。
另一方面,步骤SF12中,壳体8的运动为“左动”的情况下(步骤SF12:“左动”),终端控制部20依照与车外拍摄用摄像头拍摄的方向对应的第2顺序,从车外拍摄用摄像头中选择1个车外拍摄用摄像头(步骤SF15)。
接下来,终端控制部20将包含有表示便携终端3的朝向为“横向”的信息、以及表示由步骤SF15选择的车外拍摄用摄像头的信息的横向信息向信息处理装置4发送(步骤SF16)。步骤SF16的处理之后,终端控制部20将处理次序向步骤SF10转移。
根据步骤SF16的横向信息的发送,信息处理装置4执行图17C的流程图FI的处理,使显示装置32中显示的车外图像G2变更为基于包含有横向信息的选择摄像头信息所示的车外拍摄用摄像头的拍摄结果所得到的图像。而且,信息处理装置4开始基于选择摄像头信息所示的车外拍摄用摄像头的拍摄结果所得到的车外图像数据向便携终端3的发送。由此,便携终端3的触摸面板9的车外图像显示画面GM2b中显示的车外图像G2,成为基于由步骤SF16选择的车外拍摄用摄像头的拍摄结果所得到的图像。
以上,说明了第2模式。第2模式与上述的第1模式相比较,信息处理装置4向便携终端3发送的数据的数据量小,通信效率高。
接着,针对与车辆行进控制处理中的向触摸面板9的显示有关的处理,说明便携终端3执行的其他处理。
如上所述,当向车辆行进控制模式转移之后,在便携终端3的触摸面板9中,显示有车辆控制画面GM2(俯瞰图像显示画面GM2a或者车外图像显示画面GM2b。)。并且,在车辆控制画面GM2中显示有行进控制按钮QB。如上所述,行进控制按钮QB是控制车辆S的行进的按钮,在该按钮被触摸操作的期间,车辆S沿着轨道行进,在该按钮没有被触摸操作的期间,车辆S的行进停止。
并且,终端控制部20在车辆控制画面GM2中所显示的行进控制按钮QB被触摸操作之后,在触摸面板9被接触的状态下触摸操作的位置移动了的情况下,追随触摸操作的位置的移动而使行进控制按钮QB的位置移动。由此,即便是在行进控制按钮QB被触摸操作之后,在触摸面板9被接触的状态下触摸操作的位置移动了的情况,也能够维持行进控制按钮QB被触摸操作的状态。
如上所述,图12的状态J4表示触摸面板9中所显示的画面刚从锁定画面GM1向车辆控制画面GM2切换完后的车辆控制画面GM2。图12的状态J5表示触摸操作的位置从状态J4的触摸操作的位置移动之后的车辆控制画面GM2。如图12的状态J5所示,根据触摸位置的移动,行进控制按钮QB的位置追随触摸位置而移动,维持行进控制按钮QB被触摸操作的状态。
图12的状态J6表示便携终端3的朝向从状态J5被设为横向,替代状态J5时所显示的俯瞰图像显示画面GM2a而在触摸面板9中显示车外图像显示画面GM2b的样子。当从状态J5向状态J6转移时,用户使状态J5时正在触摸操作行进控制按钮QB的手指维持接触触摸面板9的状态。如状态J5、状态J6所示,终端控制部20将触摸面板9中所显示的画面从俯瞰图像显示画面GM2a切换到了车外图像显示画面GM2b时,也维持显示有行进控制按钮QB的状态,并且追随触摸操作的位置移动而使行进控制按钮QB的位置移动,并维持行进控制按钮QB被触摸操作的状态。
在车辆控制画面GM2的显示时,由终端控制部20进行以上的处理,由此起到以下的效果。
即,即便在用户对行进控制按钮QB进行了触摸操作之后,触摸操作的手指的位置偏移了的情况下,也能够维持行进控制按钮QB被触摸操作的状态。由此,用户在操作行进控制按钮QB时,不需要在特定的位置高精准地持续触摸操作,用户的便利性高。尤其,如上所述,在本实施方式中,在进行车辆自动移动的期间,会存在用户变更便携终端3的壳体8的朝向的情况。并且,即使随着壳体8朝向的变更,被触摸操作的位置偏移了的情况下,也能够维持行进控制按钮QB被触摸操作的状态,由此用户的便利性高。此外,设想了在单手握持壳体8并单手操作触摸面板9的情况下,进行触摸操作的位置容易发生偏移,由此在用户单手握持壳体8并单手操作触摸面板9的情况下,上述的处理更为有效。
另外,在行进控制按钮QB的触摸操作被解除的情况下,终端控制部20在触摸操作被解除时的行进控制按钮QB的位置上继续显示行进控制按钮QB。根据该构成,用户再次对行进控制按钮QB进行触摸操作的情况下,只要在解除了触摸操作时的位置上进行触摸操作即可,用户的便利性高。
此外,在行进控制按钮QB的触摸操作被解除的情况下,也可以替代上述的处理,终端控制部20执行以下的处理。即,在行进控制按钮QB的触摸操作被解除的情况下,也可以在预先决定的特定的位置上显示行进控制按钮QB。预先决定的特定的位置作为一例而是与锁定画面GM1中的滑动条BR1的右端BR1b对应的位置。根据该构成,在对行进控制按钮QB的触摸操作被解除的情况下,在同一位置上显示有行进控制按钮QB,由此用户容易寻找行进控制按钮QB的位置,提高用户的便利性。
另外,终端控制部20在行进控制按钮QB被触摸操作时、和没有被触摸操作时,使表示行进控制按钮QB的图像变化。
图12的状态J4~J6中的行进控制按钮QB处于被触摸操作的状态,图12的状态J7中的行进控制按钮QB处于没有被触摸操作的状态。
如状态J4~J6所示,在行进控制按钮QB被触摸操作的情况下,表示行进控制按钮QB的图像是由圆状图像、和将该圆状图像的周围包围的环状图像构成的。环状图像可以为通过动态图像使样式根据时间经过而变化的图像。另一方面,如状态J7所示,在行进控制按钮QB没有被触摸操作的情况下,表示行进控制按钮QB的图像为圆状图像,不包含环状图像。
用户通过对表示行进控制按钮QB的图像进行观察,能够简单且准确地认识到行进控制按钮QB被触摸操作的情况以及没有被触摸操作的情况。
另外,终端控制部20在如图12的状态J4、状态J5所示,显示俯瞰图像显示画面GM2a的情况下,与表示车辆S的图像重叠地对表示车辆S的排档的状态的标识进行显示。在本实施方式中,终端控制部20在车辆S的排档的状态为驻车(P)的情况下,将表现文字“P”的标识与表示车辆S的图像重叠地显示,在倒车(R)的情况下,将表现文字“R”的标识与表示车辆S的图像重叠地显示,在驾驶(D)的情况下,将表现文字“D”的标识与表示车辆S的图像重叠地显示,在空档(N)的情况下,将表现文字“N”的标识与表示车辆S的图像重叠地显示,在低速(L)的情况下,将表现文字“L”的标识与表示车辆S的图像重叠地显示。终端控制部20与信息处理装置4通信来认识车辆S的排档的状态。
用户通过参照与表示车辆S的图像重叠地显示的标识,能够准确地认识车辆S的排档的状态。
如图9所示,通过车辆自动驾驶,车辆S移动至驻车位置,并在驻车位置上停车,由此完成流程图FA的车辆行进控制处理以及流程图FB的车辆行进控制处理。在车辆S停车在车辆位置上的情况下,以规定方法向用户通知该情况。处于车外的用户利用上述的专用遥控器,关闭发动机开关,将车门上锁,由此能够从车辆S附近离开。
此外,第1模式、第2模式中,信息处理装置4向便携终端3发送的合成图像数据、俯瞰图像数据、以及车外图像数据分别相当于“基于设在车辆S上的摄像头的拍摄结果所得到的拍摄数据”。
<使车辆S出库的情况>
接着,说明使车辆S出库的情况。
图18的流程图FJ是表示信息处理装置4的动作的流程图,流程图FK是表示便携终端3的动作的流程图。以下,以使车辆S从与驻车场的1个驻车区域对应的驻车位置出库的情况为例,来说明信息处理装置4以及便携终端3的动作。
用户在通过车辆自动移动进行出库的情况下,走到驻车位置近前。此外,用户可以搭乘在车辆S中,但为了便于说明,以下说明用户从车辆S下车的例子。
接下来,用户操作上述的专用遥控器,启动车辆S的发动机开关。伴随车辆S的发动机开关的启动,从辅助电源向信息处理装置4供给电力,并且信息处理装置4的电源被启动。
接下来,用户操作便携终端3的触摸面板9,启动专用应用程序AP(步骤S3)。此外,用户在启动专用应用程序AP时,将便携终端3的壳体8的朝向设为“纵向”。
便携终端3的终端控制部20通过在步骤S3由用户启动的专用应用程序AP的功能,执行流程图FK的处理。
而且,用户对触摸面板9进行规定操作,进行在触摸面板9中显示出库开始指示画面的指示(步骤S4)。
如图18的流程图FK所示,根据步骤S4的指示,终端控制部20使出库开始指示画面显示在触摸面板9中(步骤SK1)。
出库开始指示画面是能够输入进行基于车辆自动移动的出库的指示的画面,显示有进行该指示的情况下被触摸操作的触摸操作按钮。用户在通过车辆自动移动进行出库的情况下,操作出库开始指示画面中所显示的触摸操作按钮(步骤S5)。
当检测到由用户操作了出库开始指示画面的触摸操作按钮时,终端控制部20向信息处理装置4发送出库开始指示信息(步骤SK2)。
如图18的流程图FJ所示,信息处理装置4的信息处理装置控制部30接收出库开始指示信息(步骤SJ1)。
接下来,信息处理装置控制部30根据出库开始指示信息的接收,将信息处理装置4的动作模式向出库模式变更(步骤SJ2)。
根据动作模式向出库模式的转移,信息处理装置控制部30执行候选位置决定处理(步骤SJ3)。
候选位置决定处理是决定使车辆S从驻车位置移动并能够停车的一个或者多个位置的处理。由候选位置决定处理决定的一个或者多个位置是使车辆S通过出库而停车的位置的候选。以下,将由候选位置决定处理决定的各位置分别表现为“候选位置”。
在步骤SJ3的候选位置决定处理中,信息处理装置控制部30进行与上述的驻车位置决定处理相同的处理,决定一个或者多个候选位置。候选位置决定处理中,决定候选位置的处理的方法也可以为各种方法。
在由步骤SJ3决定了一个或者多个候选位置之后,信息处理装置控制部30执行候选位置路径信息生成处理(步骤SJ4)。
候选位置路径信息生成处理是生成自动驾驶路径信息的处理,该自动驾驶路径信息包含有表示从驻车位置直到由步骤SJ3决定的候选位置为止的轨道的轨道信息。以下,将包含有表示从驻车位置到候选位置的轨道的轨道信息的自动驾驶路径信息称为“候选位置路径信息”。步骤SJ4中,信息处理装置控制部30在由步骤SJ3的候选位置决定处理决定了多个候选位置的情况下,生成与多个候选位置对应的多个候选位置路径信息。
接下来,信息处理装置控制部30将由步骤SJ4生成的各候选位置路径信息分别向便携终端3发送(步骤SJ5)。
而且,信息处理装置控制部30生成基于来自俯瞰用摄像头的输入所得到的俯瞰图像数据,并且开始进行俯瞰图像数据向便携终端3的发送(步骤SJ6)。信息处理装置控制部30基于从俯瞰用摄像头以规定周期输入的拍摄图像数据,以与规定周期对应的周期,执行俯瞰图像数据的生成以及发送。
如图18的流程图FK所示,便携终端3的终端控制部20接收在步骤SJ5由信息处理装置4发送的一个或者多个候选位置路径信息(步骤SK3)。另外,终端控制部20开始俯瞰图像数据的接收(步骤SK4)。
接下来,终端控制部20基于由步骤SK3接收的各候选位置路径信息以及由步骤SK4开始接收的俯瞰图像数据,在触摸面板9中显示选择画面GM3(步骤SK5)。
当显示了选择画面GM3之后,终端控制部20监视相对于选择画面GM3是否具有选择候选位置的输入(步骤SK6)。以下,具体说明选择画面GM3的内容以及步骤SK6的处理。
图19是表示选择画面GM3的一例的图。
选择画面GM3是用户进行从候选位置中选择1个候选位置的输入的画面。如图19所示,在选择画面GM3中显示有俯瞰图像G1。终端控制部20基于从信息处理装置4接收的俯瞰图像数据,显示俯瞰图像G1。在选择画面GM3中所显示的俯瞰图像G1的中央部,显示有表示车辆S的现在位置图像X1。现在位置图像X1是表示车辆S的现在位置的图像。
如图19所示,在选择画面GM3中显示有候选位置图像X2。候选位置图像X2是表示候选位置(车辆S通过出库而停车的位置的候选。)的图像。候选位置图像X2在具有多个候选位置的情况(接收到多个候选位置路径信息的情况。)下,显示有多个。
在由图19所例举的选择画面GM3中,候选位置图像X2是矩形的框图像。此外,候选位置图像X2的形状并不限于图19所示的形状。
候选位置图像X2在选择画面GM3中,显示在与现实空间中的实际候选位置所对应的位置上。因此,选择画面GM3中的现在位置图像X1、与候选位置图像X2之间的位置关系成为与现实空间中的车辆S的现在位置与候选位置之间的位置关系所对应的状态。
终端控制部20基于候选位置路径信息,与俯瞰图像G1重叠地显示一个或者多个候选位置图像X2。用户基于选择画面GM3中显示的候选位置图像X2,能够准确地认识到车辆S与候选位置之间的位置关系。
如图19所示,选择画面GM3中,在现在位置图像X1的下方显示有滑动单元SU2。滑动单元SU2具有一个或者多个滑动条BR2、和1个滑动按钮SB2。
选择画面GM3中显示的滑动条BR2的个数是与候选位置图像X2的个数相同的。如图19所示,各滑动条BR2分别是以位于现在位置图像X1的下方的共同的基端PP1为起点,向着各候选位置图像X2分别延伸的带状目标物。例如,如图19所例举地,在选择画面GM3中作为候选位置图像X2显示有第1图像、第2图像以及第3图像的这3个候选位置图像X2。
该情况下,在选择画面GM3中,滑动条BR2显示有“3个”。若将3个滑动条BR2分别表现为第1滑条、第2滑条以及第3滑条,则第1滑条是从基端PP1向着第1图像延伸的带状目标物,第2滑条是从基端PP1向着第2图像延伸的带状目标物,第3滑条是从基端PP1向着第3图像延伸的带状目标物。
滑动按钮SB2是触摸操作按钮,根据用户的触摸滑动操作,能够沿着滑动条BR2(在显示有多个滑动条BR2的情况下,能够沿着全部的滑动条BR2。)移动。如图19所示,滑动按钮SB2在没有被用户触摸操作的情况下,维持位于基端PP1的状态。滑动按钮SB2能够在从滑动条BR2的基端PP1到前端PP2的范围内移动。
图20是说明触摸面板9中所显示的画面的变迁的图。在图20中,适当地与触摸面板9中所显示的画面一并,示出操作画面的用户手指的一部分。
图20的状态J10表示用户没有进行触摸操作的状态的选择画面GM3。如上所述,选择画面GM3是用户进行从候选位置中选择1个候选位置的输入的画面。在进行选择候选位置的输入的情况下,用户在状态J10的选择画面GM3中,用手指触摸操作位于基端PP1的滑动按钮SB2。
接下来,用户通过触摸滑动操作,使滑动按钮SB2沿着滑动条BR2中的、朝向希望使车辆S通过出库而停车的候选位置的候选位置图像X2延伸的滑动条BR2移动。根据触摸滑动操作,终端控制部20追随手指所接触的位置,使滑动按钮SB2沿着滑动条BR2移动。图20的状态J11表示滑动按钮SB2通过触摸滑动操作而沿着滑动条BR2移动的状态的选择画面GM3。
如图20的状态J11所示,与触摸滑动操作相应地,在选择画面GM3中,显示有表示在车辆S从驻车位置向候选位置移动的情况下车辆S通过的轨道的轨道图像X3。轨道图像X3是将现在位置图像X1和候选位置图像X2沿着车辆S向候选位置移动时的轨道连结的带状图像,具有与车辆S的宽度对应的宽度。
终端控制部20基于候选位置路径信息,与俯瞰图像G1重叠地显示一个或者多个轨道图像X3。用户基于选择画面GM3中显示的轨道图像X3,能够准确地认识到在车辆S通过车辆自动移动而移动到候选位置的情况下的轨道(路径)。
进行触摸滑动操作的用户使滑动按钮SB2移动至滑动条BR2的前端PP2,以规定期间(例如,3秒。)维持滑动按钮SB2位于前端PP2的状态。由此,选择候选位置的输入完成。
此外,若在输入候选位置向车辆行进控制模式转移的指示完成之前,触摸滑动操作被解除,则终端控制部20根据触摸滑动操作的解除,使滑动按钮SB2移动至基端PP1。
步骤SK6中,终端控制部20基于来自触摸面板9的输入,监视滑动按钮SB2是否以规定期间位于滑动条BR2的前端PP2。并且,终端控制部20在滑动按钮SB2以规定期间位于滑动条BR2的前端PP2的情况下,判断为具有选择候选位置的输入。
步骤SK6中,判断为具有选择候选位置的输入的情况下(步骤SK6:是),终端控制部20将与滑动按钮SB2以规定期间位于前端PP2的滑动条BR2所对应的候选位置图像X2的候选位置,决定为出库后使车辆S停车的位置(步骤SK7)。
如上所述,在本实施方式中,用户通过使滑动按钮SB2沿着所希望的滑动条BR2移动这一简单的操作,能够从候选位置中决定希望车辆S出库之后停车的候选位置。由此,用户的便利性高。尤其,由于构成为各滑动条BR2分别向着各候选位置图像X2延伸,所以用户能够有感觉地把握哪个滑动条BR2与哪个候选位置图像X2具有对应关系。
另外,在本实施方式中,滑动按钮SB2以规定期间位于滑动条BR2的前端PP2后,输入才完成。由于该构成,防止了用户手指与触摸面板9偶然地接触,导致违背用户意愿地选择候选位置。
在由步骤SK7,决定了使车辆S停车的位置之后,终端控制部20将动作模式向车辆行进控制模式转移(步骤SK8)。
根据动作模式的转移,终端控制部20将触摸面板9中所显示的画面从选择画面GM3向车辆控制画面GM2切换(步骤SK9)。
图20的状态J12表示触摸面板9中所显示的画面刚从选择画面GM3向车辆控制画面GM2切换完后的车辆控制画面GM2。此外,画面刚向车辆控制画面GM2切换完后,便携终端3的壳体8的朝向为“纵向”。
出库时显示的车辆控制画面GM2是与驻车时显示的车辆控制画面GM2相同的。当将画面从选择画面GM3向车辆控制画面GM2切换时,终端控制部20将选择画面GM3中的滑动按钮SB2向行进控制按钮QB(操作按钮)切换。即,终端控制部20并非根据画面的切换,重新显示行进控制按钮QB来作为与滑动按钮SB2不同的按钮,而是根据画面的切换,使位于滑动条BR2的前端PP2的滑动按钮SB2不变更位置地作为行进控制按钮QB来发挥作用。因此,在画面刚切换完后,行进控制按钮QB位于选择画面GM3中的滑动条BR2的前端PP2,另外,行进控制按钮QB处于由用户触摸操作的状态。
此外,也可以替代图20的状态J12,显示图20的状态J13所示的车辆控制画面GM2。在由状态J13所示的车辆控制画面GM2中,从车辆S的驻车位置朝向所选择的候选位置的轨道图像X3,成为明示行车方向的箭头形状。在状态J13所示的方式中,通过显示车辆控制画面GM2,用户能够准确地认识到从驻车位置出库之后的车辆S的行车方向。
根据向车辆行进控制模式的转移,终端控制部20将表示由步骤SK7决定的候选位置的信息向信息处理装置4发送(步骤SK10)。如图18的流程图FJ所示,信息处理装置4的信息处理装置控制部30接收表示候选位置的信息(步骤SJ7)。
如图18的流程图FJ以及流程图FK所示,便携终端3的动作模式向车辆行进控制模式转移之后,信息处理装置4的信息处理装置控制部30以及便携终端3的终端控制部20协作来执行车辆行进控制处理(步骤SJ8、步骤SK11)。
在出库时的车辆行进控制处理中,进行与驻车时的车辆行进控制处理相同的处理。此外,信息处理装置控制部30向车辆驱动控制装置5输出与由步骤SJ7接收到的信息所示的候选位置对应的自动驾驶路径信息。
通过车辆自动驾驶,车辆S从驻车位置移动到所选择的候选位置(出库后停车位置),在所选择的候选位置停车,由此流程图FJ的车辆行进控制处理、以及流程图FK的车辆行进控制处理完成。在车辆S在所选择的候选位置停车的情况下,以规定方法向用户通知该情况。处于车外的用户利用上述的专用的遥控器,将车门开锁,而能够搭乘于车辆S。
但是,在出库模式中,根据驻车于驻车位置的车辆S的状态,具有多个模式。
终端控制部20根据出库模式,变更选择画面GM3中的候选位置图像X2以及滑动单元SU2的显示方式。例如,终端控制部20通过以下的方法,根据出库模式来变更选择画面GM3中的候选位置图像X2以及滑动单元SU2的显示方式。即,事先在终端存储部22中针对各个出库模式而存储以与出库模式对应的方式显示候选位置图像X2和滑动单元SU2的图像数据。
并且,终端控制部20在使选择画面GM3在触摸面板9中显示时,特定出出库模式,从终端存储部22读取与所特定的出库模式对应的图像数据,根据必要来加工图像数据,使用加工后的图像数据来显示选择画面GM3。根据该构成,能够使用预先准备的图像数据来显示选择画面GM3,由此能够提高处理效率。作为出库模式,例如具有以下的第1模式~第6模式。
第1模式是车辆S通过“前进”出库,出库后能够供车辆S停车的候选位置存在有车辆S的前方的位置、车辆S的前方右侧的位置、和车辆S的前方左侧的位置这三个位置的模式。例如,车辆S驻车于在前方具有宽阔空间的驻车位置的状态的情况下,出库模式为第1模式。
由图19以及图20所例举的选择画面GM3是与第1模式对应的选择画面GM3。
第2模式是车辆S通过“后退”出库,出库后能够供车辆S停车的候选位置存在有车辆S的后方的位置、车辆S的后方右侧的位置、和车辆S的后方左侧的位置这三个位置的模式。例如,车辆S驻车于在后方具有宽阔空间的驻车位置的状态的情况下,出库模式为第2模式。
图21的状态J20表示与第2模式对应的选择画面GM3。
第3模式是车辆S通过“前进”出库,出库后能够供车辆S停车的候选位置存在有车辆S的前方右侧的位置和车辆S的前方左侧的位置这两个位置的模式。例如,车辆S进行纵列驻车,在车辆S的前方右侧和前方左侧具有能够供车辆S停车的空间的情况下,出库模式为第3模式。
图21的状态J21表示与第3模式对应的选择画面GM3。
第4模式是车辆S通过“后退”出库,出库后能够供车辆S停车的候选位置存在有车辆S的后方右侧的位置和车辆S的后方左侧的位置这两个位置的模式。例如,车辆S进行纵列驻车,在车辆S的后方右侧和后方左侧具有能够供车辆S停车的空间的情况下,出库模式为第4模式。
图21的状态J22表示与第4模式对应的选择画面GM3。
第5模式是车辆S既可以通过“前进”也可以通过“后退”出库,出库后能够供车辆S停车的候选位置存在有车辆S的前方右侧的位置、车辆S的前方左侧的位置、车辆S的后方右侧的位置、和车辆S的后方左侧的位置这四个位置的模式。例如,车辆S进行纵列驻车,在车辆S的前方右侧、前方左侧、后方右侧、后方左侧具有能够供车辆S停车的空间的情况下,出库模式为第5模式。
图21的状态J23表示与第5模式对应的选择画面GM3。
第6模式是车辆S既可以通过“前进”也可以通过“后退”出库,出库后能够供车辆S停车的候选位置存在有车辆S的前方的位置、车辆S的前方右侧的位置、车辆S的前方左侧的位置、车辆S的后方的位置、车辆S的后方右侧的位置、和车辆S的后方左侧的位置这六个位置的模式。例如,车辆S驻车于在前方以及后方具有宽阔空间的驻车位置的状态的情况下,出库模式为第6模式。
图21的状态J24表示与第6模式对应的选择画面GM3。
但是,在车辆S的候选位置为多个的情况下,具有候选位置中存在因障碍物的存在或限制关系而实际上车辆S的移动被禁止的候选位置的情况。
这种情况下,终端控制部20在选择画面GM3的显示时执行以下的处理。即,终端控制部20在与移动被禁止的候选位置对应的滑动条BR2上,显示向候选位置的移动被禁止的图像,禁止滑动按钮SB2沿着与移动被禁止的候选位置对应的滑动条BR2移动。
图22的状态J30表示在图19的选择画面GM3中,向与从基端PP1向着上方左侧延伸的滑动条BR2对应的候选位置的移动被禁止的情况下,终端控制部20所显示的选择画面GM3的一例。
如图22的状态J30所示,选择画面GM3中,在与移动被禁止的候选位置对应的滑动条BR2上,显示有表示向候选位置的移动被禁止的图像。而且,在与移动被禁止的候选位置对应的候选位置图像X2中,也显示有表示移动被禁止的图像。
在存在移动被禁止的候选位置的情况下,通过进行上述的处理,用户能够准确地认识到移动被禁止的候选位置。另外,能够防止用户选择移动被禁止的候选位置。
此外,在存在移动被禁止的候选位置的情况下,也可以构成为,终端控制部20替代上述的处理来执行以下的处理。即,终端控制部20禁止与移动被禁止的候选位置对应的滑动条BR2的显示。
图22的状态J31表示图19的选择画面GM3中,向与从基端PP1向着上方左侧延伸的滑动条BR2对应的候选位置的移动被禁止的情况下,终端控制部20所显示的选择画面GM3的一例。
如图22的状态J31所示,选择画面GM3中,与移动被禁止的候选位置对应的滑动条BR2没有被显示。由此,能够防止用户选择移动被禁止的候选位置。
<第1变形例>
接着,说明第1变形例。
在上述的实施方式中构成为,出库时通过滑动单元SU2从候选位置中选择1个候选位置。
对于该构成,也可以使候选位置图像X2作为触摸操作按钮来发挥作用,通过对候选位置图像X2进行触摸操作,能够选择候选位置。
该情况下,只要构成为,在候选位置图像X2被连续触摸操作多次(例如2次。)的情况下,确定候选位置的选择,就能够防止在用户错误地触摸操作了候选位置图像X2的情况下,与被错误操作的候选位置图像X2对应的候选位置被选择。
此外,也可以为,在候选位置图像X2被触摸操作而候选位置被选择的情况下,终端控制部20将动作模式向车辆控制模式转移,替代选择画面GM3而显示车辆控制画面GM2。另外,也可以为,在候选位置图像X2被触摸操作而候选位置被选择的情况下,终端控制部20不是将动作模式向车辆控制模式立刻转移,而是显示锁定画面GM1来替代选择画面GM3,在相对于锁定画面GM1具有规定输入的情况下,才将动作模式向车辆控制模式转移,替代锁定画面GM1而显示车辆控制画面GM2。
<第2变形例>
接着,说明第2变形例。
在上述的实施方式中,对于驻车时的处理,以驻车位置具有1个为前提,说明了处理。但是,也可以构成为,从多个驻车位置的候选中选择1个驻车位置,将所选择的驻车位置的候选决定为使车辆S驻车的位置。
该情况下,只要终端控制部20在使锁定画面GM1显示在触摸面板9中之前,将与选择画面GM3相同的画面在触摸面板9中显示,基于相对于触摸面板9的操作,决定驻车位置即可。
如以上说明那样,本实施方式的便携终端3(终端)具有壳体8、设在壳体8上的触摸面板9(显示面板)、检测壳体8的状态的壳体状态检测部23和终端控制部20。终端控制部20取得基于设在车辆S上的摄像头的拍摄结果所得到的拍摄数据,使基于取得的拍摄数据所得到的图像在触摸面板9中显示,并且根据由壳体状态检测部23检测到的壳体8的状态,切换触摸面板9中所显示的图像。
根据该构成,用户通过进行使便携终端3的壳体8的状态变化这一简单的操作,能够切换触摸面板9中所显示的基于拍摄图像数据所得到的图像,当由便携终端3显示基于设在车辆S上的摄像头的拍摄结果所得到的图像时,能够提高用户的便利性。
另外,在本实施方式中,终端控制部20在由壳体状态检测部23检测到壳体8的朝向成为第1朝向的情况下、和检测到壳体8的朝向成为与第1朝向不同的第2朝向的情况下,切换触摸面板9中所显示的图像。
根据该构成,用户通过进行将便携终端3的壳体的朝向切换为第1朝向或第2朝向这一简单的操作,能够切换触摸面板9中所显示的基于拍摄图像数据所得到的图像,当由便携终端3显示基于设在车辆S上的摄像头的拍摄结果所得到的图像时,能够提高用户的便利性。
另外,在本实施方式中,壳体8是具有长方形状的正面8a的板状部件。触摸面板9设在壳体8的正面8a。第1朝向是壳体8的正面8a的长边的方向成为沿着铅垂方向的状态的朝向,第2朝向是壳体8的正面8a的长边的方向成为沿着与铅垂方向正交的方向的状态的朝向。
根据该构成,用户通过进行将便携终端3的壳体8的朝向切换为“壳体8的正面8a的长边的方向成为沿着铅垂方向的状态的朝向”或“壳体8的正面8a的长边的方向成为沿着与铅垂方向正交的方向的状态的朝向”这一简单的操作,能够切换触摸面板9中所显示的基于拍摄图像数据所得到的图像,当由便携终端3显示基于设在车辆S上的摄像头的拍摄结果所得到的图像时,能够提高用户的便利性。
另外,在本实施方式中,终端控制部20在由壳体状态检测部23检测到壳体8的朝向成为第1朝向的情况下,作为基于拍摄数据所得到的图像而在触摸面板9中显示俯瞰车辆S的图像、即俯瞰图像G1,在由壳体状态检测部23检测到壳体8的朝向成为第2朝向的情况下,作为基于拍摄数据所得到的图像而在触摸面板9中显示由摄像头拍摄到的车外的图像、即车外图像G2。
根据该构成,用户通过进行变更便携终端3的壳体8的朝向这一简单的操作,能够将触摸面板9中所显示的图像在俯瞰图像G1与车外图像G2之间切换。
另外,在本实施方式中,在车辆S上设有拍摄车外的多个车外拍摄用摄像头。终端控制部20在由壳体状态检测部23检测到壳体8的朝向成为第2朝向的情况下,依照与车辆S的状态对应的规定优先顺位,从多个车外拍摄用摄像头中选择1个车外拍摄用摄像头,在触摸面板9中显示基于所选择的车外拍摄用摄像头的拍摄结果所得到的车外图像G2。
根据该构成,能够在触摸面板9中显示用户所必要的可能性高的车外图像G2,用户的便利性高。
在此,规定优先顺位例如是越能够拍摄到车辆S的行车方向的车外拍摄用摄像头越成为高顺位的优先顺位。
根据该构成,能够在触摸面板9中显示用户所必要的可能性高的车外图像G2,用户的便利性高。
另外,规定优先顺位例如是越能够拍摄到与车辆S接近的物体的车外拍摄用摄像头越成为高顺位的优先顺位。
根据该构成,能够在触摸面板9中显示用户所必要的可能性高的车外图像G2,用户的便利性高。
另外,在本实施方式中,终端控制部20在使基于一个车外拍摄用摄像头的拍摄结果所得到的1个车外图像G2在触摸面板9中显示之后,由壳体状态检测部23检测到壳体8进行了规定运动的情况下,替代这一个车外图像G2,使基于与这一个车外拍摄用摄像头不同的其他车外拍摄用摄像头的拍摄结果所得到的其他的车外图像G2在触摸面板9中显示。
根据该构成,用户通过使壳体8进行规定运动这一简单的操作,能够切换触摸面板9中所显示的车外图像G2,用户的便利性高。
另外,在本实施方式中,多个车外拍摄用摄像头分别朝向不同的方向拍摄车外。并且,规定运动是壳体8的状态以第1方式变化的第1运动、或者壳体8的状态以与第1方式不同的第2方式变化的第2运动的任意一个。终端控制部20在由壳体状态检测部23检测到壳体8进行了第1运动的情况下,以与车外拍摄用摄像头所拍摄的方向对应的第1顺序切换车外图像G2。终端控制部20在由壳体状态检测部23检测到壳体8进行了第2运动的情况下,以与车外拍摄用摄像头所拍摄的方向对应且与第1顺序不同的第2顺序来切换车外图像G2。
根据该构成,用户能够以自身所希望的顺序来切换图像,用户的便利性高。
另外,终端控制部20在触摸面板9中显示基于拍摄数据所得到的图像,并且与基于拍摄数据的图像重叠地,显示可触摸操作的行进控制按钮QB(操作按钮),在切换触摸面板9中所显示的图像的情况下也维持行进控制按钮QB的显示。终端控制部20在行进控制按钮QB被触摸操作的期间,向设在车辆S中的信息处理装置4发送指示车辆S的行进的行进指示信号。
根据该构成,用户能够操作行进控制按钮QB控制车辆S的行进,并同时切换触摸面板9中所显示的图像。
另外,如以上说明那样,本实施方式的便携终端3具有显示图像并接受触摸操作的触摸面板9、和终端控制部20。终端控制部20使显示有可触摸操作的行进控制按钮QB的车辆控制画面GM2在触摸面板9中显示,并且在车辆控制画面GM2中所显示的行进控制按钮QB被触摸操作之后触摸操作的位置移动了的情况下,追随触摸操作的位置的移动地使行进控制按钮QB的位置移动并维持行进控制按钮QB被触摸操作的状态。终端控制部20在车辆控制画面GM2中所显示的行进控制按钮QB被触摸操作的期间,向设在车辆S中的信息处理装置4发送指示车辆S的行进的行进指示信号,并根据对行进控制按钮QB的触摸操作的解除,停止行进指示信号的发送。
根据该构成,当用户对行进控制按钮QB进行了触摸操作之后,即便触摸操作的手指的位置偏移了的情况下,也能够维持行进控制按钮QB被触摸操作的状态。由此,用户在操作行进控制按钮QB时,不需要高精准地持续触摸操作特定的位置。因此,在用户操作便携终端3的触摸面板9来控制车辆S的行进的情况下,能够准确地进行操作。
另外,在本实施方式中,终端控制部20在对车辆控制画面GM2中所显示的行进控制按钮QB的触摸操作被解除的情况下,在触摸操作被解除时的行进控制按钮QB的位置上继续显示行进控制按钮QB。
根据该构成,当用户再次对行进控制按钮QB进行触摸操作时,行进控制按钮QB会位于用户易于触摸操作的位置,由此能够提高用户的便利性。
此外,对于上述构成,也可以为,终端控制部20在对车辆控制画面GM2中所显示的行进控制按钮QB的触摸操作被解除的情况下,在车辆控制画面GM2中的规定位置上显示行进控制按钮QB。
根据该构成,当用户再次对行进控制按钮QB进行触摸操作时,行进控制按钮QB会位于用户易于触摸操作的位置,由此能够提高用户的便利性。
另外,在本实施方式中,终端控制部20使显示有滑动条BR1和滑动按钮SB1的锁定画面GM1显示在触摸面板9中,该滑动按钮SB1位于滑动条BR1的一端,根据触摸滑动操作而沿着滑动条BR1移动,另一方面,根据触摸滑动操作的解除而移动至滑动条BR1的一端。终端控制部20在通过触摸滑动操作使滑动按钮SB1在规定期间位于滑动条BR1的另一端的情况下,将触摸面板9中显示的画面从锁定画面GM1向车辆控制画面GM2切换,并且将位于滑动条BR1的另一端的滑动按钮SB1切换为行进控制按钮QB并作为行进控制按钮QB来发挥作用。
根据该构成,用户进行简单的作业,进行将滑动按钮SB1触摸滑动操作这一简单的作业,能够将画面从锁定画面GM1向车辆控制画面GM2切换,并且在向车辆控制画面GM2切换之后,能够简单地触摸操作行进控制按钮QB。
另外,在本实施方式中,终端控制部20在行进控制按钮QB被操作时和行进控制按钮QB没有被操作时,使表示行进控制按钮QB的图像变化。
根据该构成,用户能够简单且准确地认识到行进控制按钮QB被触摸操作的情况以及没有被触摸操作的情况。
另外,在本实施方式中,终端控制部20在显示车辆控制画面GM2的期间,取得基于设在车辆S中的摄像头的拍摄结果所得到的拍摄数据,使基于所取得的拍摄数据得到的图像在触摸面板9中显示,并且与基于拍摄数据得到的图像重叠地显示行进控制按钮QB。终端控制部20根据壳体状态检测部23检测到的壳体8的状态,切换触摸面板9中所显示的图像,另一方面,在切换了触摸面板9中所显示的图像的情况下也维持行进控制按钮QB的显示。
根据该构成,用户能够操作行进控制按钮QB来控制车辆S的行进,并同时切换触摸面板9中所显示的图像。
另外,在本实施方式中,终端控制部20在由壳体状态检测部23检测到壳体8的朝向成为第1朝向的情况下,作为基于拍摄数据得到的图像而在触摸面板9中显示俯瞰车辆S的图像、即俯瞰图像G1,在由壳体状态检测部23检测到壳体8的朝向成为与第1朝向不同的第2朝向的情况下,作为基于拍摄数据所得到的图像而在触摸面板9中显示由车外拍摄用摄像头拍摄到的车外的图像、即车外图像G2。
根据该构成,用户通过进行变更便携终端3的壳体8的朝向这一简单的操作,能够将触摸面板9中所显示的图像在俯瞰图像G1与车外图像G2之间切换。
另外,如以上说明那样,本实施方式的便携终端3的终端控制部20显示选择画面GM3,该选择画面GM3显示有表示车辆S的现在位置的现在位置图像X1、表示车辆S从现在位置移动而停车的位置的候选即候选位置的一个或者多个候选位置图像X2、从基端PP1向着各候选位置图像X2分别延伸的滑动条BR2、以及位于基端PP1并根据触摸滑动操作沿着滑动条BR2移动的滑动按钮SB2,基于滑动按钮SB的移动,从候选位置中决定供车辆S停车的位置。
根据该构成,用户能够准确地进行决定使车辆S停车的位置的操作。
另外,在本实施方式中,终端控制部20在滑动按钮SB2以规定期间位于1个滑动条BR2的前端的情况下,将与这一个滑动条BR2对应的候选位置决定为供车辆S停车的位置。
根据该构成,能够防止由用户的错误操作决定供车辆S停车的位置。
另外,在本实施方式中,终端控制部20在选择画面GM3显示表示从车辆S的现在位置直到候选位置为止的轨道的轨道图像X3。
根据该构成,用户通过参照选择画面GM3,能够准确地认识到从车辆S的现在位置直到候选位置为止的轨道。
另外,在本实施方式中,终端控制部20在车辆S向候选位置的移动被禁止的情况下,在与移动被禁止的候选位置对应的滑动条BR2上显示表示向候选位置的移动被禁止的图像,禁止滑动按钮SB2沿着与移动被禁止的候选位置对应的滑动条BR2移动。
根据该构成,能够防止用户选择移动被禁止的候选位置。
对于上述构成,也可以为,终端控制部20在车辆S向候选位置的移动被禁止的情况下,禁止与移动被禁止的候选位置对应的滑动条BR2的显示。
根据该构成,能够防止用户选择移动被禁止的候选位置。
另外,在本实施方式中,终端控制部20在决定了供车辆S停车的位置的情况下,将触摸面板9中所显示的画面从所述选择画面GM3向车辆控制画面GM2切换,并且将滑动按钮SB切换为可触摸操作的操作按钮。终端控制部20在车辆控制画面GM2中所显示的行进控制按钮QB被触摸操作的期间,向设在车辆S中的信息处理装置4发送指示车辆S的行进的行进指示信号,根据对行进控制按钮QB的触摸操作的解除,停止行进指示信号的发送。
根据该构成,用户能够准确地控制车辆S的行进。
另外,在本实施方式中,终端控制部20在行进控制按钮QB被操作时和行进控制按钮QB没有被操作时,使表示行进控制按钮QB的图像变化。
根据该构成,用户能够简单且准确地认识到行进控制按钮QB被触摸操作的情况以及没有被触摸操作的情况。
另外,在本实施方式中,车辆S的现在位置是车辆S现在正在驻车的驻车位置,候选位置是供车辆S从驻车位置出库而停车的出库后停车位置。
根据该构成,用户能够在出库时进行确切的操作来选择出库后停车位置。
另外,由变形例所说明地那样,也可以为,车辆S的现在位置是停驻在驻车位置之前的车辆S所停车的驻车前位置,候选位置是供车辆S驻车的驻车位置。
根据该构成,用户能够在驻车时进行确切的操作来选择使车辆S驻车的驻车位置。
另外,由变形例所说明地那样,也可以为,便携终端3的终端控制部20显示选择画面GM3,该选择画面GM3显示有表示车辆S的现在位置的现在位置图像X1、以及表示车辆S从现在位置移动而停车的位置的候选即候选位置的一个或者多个候选位置图像X2,基于对候选位置图像X2的操作,从候选位置中决定供车辆S停车的位置。
根据该构成,用户能够准确地进行决定使车辆S停车的位置的操作。
另外,如以上说明那样,本实施方式的便携终端3的终端控制部20在第1模式的情况下,从信息处理装置4接收包含俯瞰车辆S的俯瞰图像G1以及由设在车辆S中的摄像头拍摄的车外图像G2在内的合成图像的合成图像数据,在由壳体状态检测部23检测到壳体8的朝向成为第1朝向的情况下,基于合成图像数据使俯瞰图像G1在触摸面板9中显示,在由壳体状态检测部23检测到壳体8的朝向成为与第1朝向不同的第2朝向的情况下,基于合成图像数据使车外图像G2在触摸面板9中显示。
根据该构成,便携终端3在显示基于设在车辆S中的摄像头的拍摄结果所得到的图像时,能够以恰当的方式显示图像,提高用户的便利性。
另外,在本实施方式中,终端控制部20在第1模式的情况下,在由壳体状态检测部23检测到壳体8的朝向成为第1朝向的情况下,从合成图像数据提取与俯瞰图像G1对应的俯瞰图像数据,基于所提取的俯瞰图像数据使俯瞰图像G1在触摸面板9中显示。终端控制部20在由壳体状态检测部23检测到壳体8的朝向成为第2朝向的情况下,从合成图像数据提取与车外图像G2对应的车外图像数据,基于所提取的车外图像数据使车外图像G2在触摸面板9中显示。
根据该构成,终端控制部20基于从信息处理装置4接收的合成图像数据,能够恰当地显示俯瞰图像G1以及车外图像G2。
另外,在本实施方式中,壳体8为具有长方形状的正面8a的板状部件,触摸面板9设在壳体8的正面8a,俯瞰图像G1是在观察正面8a时长边沿纵向延伸的长方形状图像,车外图像G2是在观察正面8a时长边沿横向延伸的长方形状图像,所述第1朝向是壳体8的正面8a的长边的方向成为沿着铅垂方向的状态的朝向,所述第2朝向是壳体8的正面8a的长边的方向成为沿着与铅垂方向正交的方向的状态的朝向。
根据该构成,终端控制部20在壳体8的形状的基础上,能够根据壳体8的朝向显示与壳体8的朝向适合的恰当的图像。
另外,在本实施方式中,信息处理装置4的信息处理装置控制部30在第2模式中,取得表示便携终端3的壳体8的状态的信息,基于所取得的信息检测到便携终端3的壳体8的朝向成为第1朝向的情况下,从合成图像数据提取与俯瞰图像G1对应的俯瞰图像数据,将提取的俯瞰图像数据向便携终端3发送,在基于取得的信息检测到便携终端3的壳体8的朝向成为与第1朝向不同的第2朝向的情况下,从合成图像数据提取与车外图像G2对应的车外图像数据,将提取的车外图像数据向便携终端3发送。
根据该构成,信息处理装置4能够在便携终端3中以恰当的方式显示图像,能够提高用户的便利性。
此外,上述的实施方式仅仅是表示本发明一个方式的内容,能够在本发明的范围内任意地进行变形以及应用。
例如,对于作为便携终端3的处理而说明的处理,也可以为,便携终端3和能够与便携终端3通信的外部的装置(包括信息处理装置4。)协作地执行。同样地,对于作为信息处理装置4的处理而说明的处理,也可以为,信息处理装置4和能够与信息处理装置4通信的外部的装置(包括便携终端3。)协作地执行。
例如,用图所说明的功能模块是为了便于理解本申请发明而根据主要的处理内容来分类表示各装置的功能构成的概略图。各装置的构成也能够根据处理内容分类为更多的构成要素。另外,1个构成要素能够以执行更多的处理的方式分类。另外,各构成要素的处理可以由1个硬件执行,也可以由多个硬件执行。另外,各构成要素的处理可以由1个程序实现,也可以由多个程序实现。
另外,图示的流程图的处理单位是为了便于理解各装置的处理而根据主要的处理内容来划分的。本申请发明并没有由处理单位的划分方式、名称所制限。各装置的处理能够根据处理内容划分为更多的处理单位。另外,也能够以使1个处理单位包括更多的处理的方式划分。另外,只要进行同样的处理,上述的流程图的处理顺序也不限于图示的例子。
附图标记说明
1 信息处理系统
2 车辆系统
3 便携终端(终端)
4 信息处理装置
5 车辆驱动控制装置
9 触摸面板(显示面板)
23 壳体状态检测部
30 信息处理装置控制部
CA1 前方拍摄用摄像头(摄像头)
CA2 前方右侧拍摄用摄像头(摄像头)
CA3 侧方右侧拍摄用摄像头(摄像头)
CA4 后方右侧拍摄用摄像头(摄像头)
CA5 后方拍摄用摄像头(摄像头)
CA6 后方左侧拍摄用摄像头(摄像头)
CA7 侧方左侧拍摄用摄像头(摄像头)
CA8 前方左侧拍摄用摄像头(摄像头)
G1 俯瞰图像
G2 车外图像
G 合成图像
GM1 锁定画面
GM2 车辆控制画面
GM3 选择画面

Claims (7)

1.一种终端,其特征在于,具有:
触摸面板,其显示图像,并且接受触摸操作;和
终端控制部,其使显示有可触摸操作的操作按钮的车辆控制画面显示在所述触摸面板中,并且在所述车辆控制画面中所显示的所述操作按钮被触摸操作之后触摸操作的位置移动了的情况下,追随触摸操作的位置的移动而使所述操作按钮的位置移动并维持所述操作按钮被触摸操作的状态,
所述终端控制部在所述车辆控制画面中所显示的所述操作按钮被触摸操作的期间内,向设在车辆中的信息处理装置发送指示所述车辆行进的行进指示信号,并根据对所述操作按钮的触摸操作的解除,停止所述行进指示信号的发送,
所述终端控制部使显示有滑动条和滑动按钮的锁定画面显示在所述触摸面板中,该滑动条是带状目标物,该滑动按钮位于所述滑动条的一端,根据触摸滑动操作而沿着所述滑动条移动,另一方面,根据触摸滑动操作的解除而移动至所述滑动条的一端,该触摸滑动操作是在维持手指与所述触摸面板接触的状态的同时使手指所接触的位置移动的操作,
所述终端控制部在所述锁定画面中作为背景而显示由遮蔽图像覆盖的所述车辆控制画面,并且越随着所述滑动按钮从所述滑动条的一端向另一端移动,使覆盖所述车辆控制画面的遮蔽图像的颜色变得越浅,
所述终端控制部在通过触摸滑动操作使所述滑动按钮在规定期间位于所述滑动条的另一端的情况下,将所述触摸面板中显示的画面从所述锁定画面向所述车辆控制画面切换,并且将位于所述滑动条的另一端的所述滑动按钮切换为所述操作按钮并作为所述操作按钮来发挥作用。
2.根据权利要求1所述的终端,其特征在于,
所述终端控制部在对所述车辆控制画面中所显示的所述操作按钮的触摸操作被解除的情况下,在触摸操作被解除时的所述操作按钮的位置上继续显示所述操作按钮。
3.根据权利要求1所述的终端,其特征在于,
所述终端控制部在对所述车辆控制画面中所显示的所述操作按钮的触摸操作被解除的情况下,在所述车辆控制画面中的规定位置上显示所述操作按钮。
4.根据权利要求1所述的终端,其特征在于,
所述终端控制部在所述操作按钮被操作时和所述操作按钮未被操作时,使表示所述操作按钮的图像变化。
5.根据权利要求1所述的终端,其特征在于,
还具有壳体、和检测所述壳体的状态的壳体状态检测部,
所述终端控制部在显示所述车辆控制画面的期间内,取得基于设在所述车辆中的摄像头的拍摄结果所得的拍摄数据,在所述触摸面板中显示基于所取得的所述拍摄数据所得的图像,并且与基于所述拍摄数据所得的图像重叠地显示所述操作按钮,
所述终端控制部根据所述壳体状态检测部检测到的所述壳体的状态,切换所述触摸面板中所显示的图像,另一方面,在切换了所述触摸面板中所显示的图像的情况下,也维持所述操作按钮的显示。
6.根据权利要求5所述的终端,其特征在于,
所述终端控制部在由所述壳体状态检测部检测到所述壳体的朝向成为第1朝向的情况下,在所述触摸面板中作为基于所述拍摄数据所得的图像而显示俯瞰所述车辆的图像、即俯瞰图像,
所述终端控制部在由所述壳体状态检测部检测到所述壳体的朝向成为与所述第1朝向不同的第2朝向的情况下,在所述触摸面板中作为基于所述拍摄数据所得的图像而显示由所述摄像头拍摄到的车外的图像、即车外图像。
7.一种终端的控制方法,该终端具有显示图像并接受触摸操作的触摸面板,所述终端的控制方法的特征在于,
将显示有可触摸操作的操作按钮的车辆控制画面显示在所述触摸面板中,并且在所述车辆控制画面中所显示的所述操作按钮被触摸操作之后触摸操作的位置移动了的情况下,追随触摸操作的位置的移动而使所述操作按钮的位置移动并维持所述操作按钮被触摸操作的状态,
在所述车辆控制画面中所显示的所述操作按钮被触摸操作的期间内,向设在车辆中的信息处理装置发送指示所述车辆行进的行进指示信号,并根据对所述操作按钮的触摸操作的解除,停止所述行进指示信号的发送,
使显示有滑动条和滑动按钮的锁定画面显示在所述触摸面板中,该滑动条是带状目标物,该滑动按钮位于所述滑动条的一端,根据触摸滑动操作而沿着所述滑动条移动,另一方面,根据触摸滑动操作的解除而移动至所述滑动条的一端,该触摸滑动操作是在维持手指与所述触摸面板接触的状态的同时使手指所接触的位置移动的操作,
在所述锁定画面中作为背景而显示由遮蔽图像覆盖的所述车辆控制画面,并且越随着所述滑动按钮从所述滑动条的一端向另一端移动,使覆盖所述车辆控制画面的遮蔽图像的颜色变得越浅,
在通过触摸滑动操作使所述滑动按钮在规定期间位于所述滑动条的另一端的情况下,将所述触摸面板中显示的画面从所述锁定画面向所述车辆控制画面切换,并且将位于所述滑动条的另一端的所述滑动按钮切换为所述操作按钮并作为所述操作按钮来发挥作用。
CN201780071900.7A 2016-12-19 2017-12-15 终端、以及终端的控制方法 Active CN110023148B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2016-245986 2016-12-19
JP2016245986 2016-12-19
PCT/JP2017/045092 WO2018116978A1 (ja) 2016-12-19 2017-12-15 端末、及び端末の制御方法

Publications (2)

Publication Number Publication Date
CN110023148A CN110023148A (zh) 2019-07-16
CN110023148B true CN110023148B (zh) 2022-01-21

Family

ID=62626602

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780071900.7A Active CN110023148B (zh) 2016-12-19 2017-12-15 终端、以及终端的控制方法

Country Status (5)

Country Link
US (1) US11067978B2 (zh)
EP (1) EP3556612B1 (zh)
JP (1) JP6986518B2 (zh)
CN (1) CN110023148B (zh)
WO (1) WO2018116978A1 (zh)

Families Citing this family (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102017214650A1 (de) * 2017-08-22 2019-02-28 Volkswagen Aktiengesellschaft Verfahren zum Betreiben eines Kraftfahrzeugs sowie Kraftfahrzeug
KR102077573B1 (ko) * 2018-01-31 2020-02-17 엘지전자 주식회사 자동 주차 시스템 및 차량
KR102506876B1 (ko) * 2018-08-23 2023-03-08 현대자동차주식회사 원격제어장치, 이를 이용한 원격주차보조 시스템 및 그의 제어 방법
JP7159802B2 (ja) * 2018-11-15 2022-10-25 トヨタ自動車株式会社 車両用電子ミラーシステム
JP7309497B2 (ja) * 2018-11-19 2023-07-18 アルパイン株式会社 移動体用投影装置、携帯端末、プログラム
JP7205236B2 (ja) * 2019-01-08 2023-01-17 トヨタ自動車株式会社 リモート走行システム及びリモート走行アプリケーションソフト
KR20200130883A (ko) 2019-04-26 2020-11-23 현대모비스 주식회사 주차 지원 장치 및 방법
JP7276023B2 (ja) 2019-09-06 2023-05-18 トヨタ自動車株式会社 車両遠隔指示システム、及び自動運転車両
CN110733338B (zh) * 2019-11-18 2021-05-07 中国热带农业科学院农业机械研究所 一种适用于农用车的手动遥控两用控制装置及其控制方法
JP7279622B2 (ja) * 2019-11-22 2023-05-23 トヨタ自動車株式会社 表示装置および表示プログラム
FR3104792A1 (fr) * 2019-12-11 2021-06-18 Psa Automobiles Sa Procédé de guidage d’un véhicule dans une zone de stationnement
WO2021127693A1 (en) * 2019-12-16 2021-06-24 Magna Electronics Inc. Vehicular trailering guidance system
DE112019008010T5 (de) * 2019-12-26 2022-10-06 Mitsubishi Electric Corporation Tastdarstellungsplatte und tastdarstellungsknopf
CN111086509B (zh) * 2019-12-30 2021-09-17 北汽福田汽车股份有限公司 车辆控制方法、装置、存储介质以及车辆
US10845943B1 (en) * 2020-02-14 2020-11-24 Carmax Business Services, Llc Systems and methods for generating a 360-degree viewing experience
JP7483426B2 (ja) 2020-03-16 2024-05-15 フォルシアクラリオン・エレクトロニクス株式会社 遠隔操作システム及び操作端末
CN112141089B (zh) * 2020-06-24 2022-10-28 上汽通用五菱汽车股份有限公司 可切换泊车模式的智能泊车系统及方法
US11816943B2 (en) * 2020-07-14 2023-11-14 Carrier Corporation System and method for visually aided access control
KR20220012068A (ko) * 2020-07-22 2022-02-03 현대모비스 주식회사 휴대 단말기의 회전 정보를 이용한 차량 제어 장치 및 그 방법
US11618378B2 (en) 2020-07-23 2023-04-04 Denso International America, Inc. Methods and systems for guiding an operator of a vehicle during a vehicle-sharing session
JP7372599B2 (ja) * 2020-09-15 2023-11-01 トヨタ自動車株式会社 車両制御装置
CN114374930B (zh) * 2020-10-16 2023-05-16 华为技术有限公司 消息提示方法、系统、车载终端以及计算机可读存储介质
JP7551518B2 (ja) 2021-01-26 2024-09-17 富士フイルム株式会社 情報処理装置及び情報処理プログラム
JP2022114063A (ja) * 2021-01-26 2022-08-05 トヨタ自動車株式会社 リモート走行システム
JP7184948B2 (ja) * 2021-03-19 2022-12-06 本田技研工業株式会社 遠隔操作システム
CN113183976B (zh) * 2021-04-30 2024-08-13 广东以诺通讯有限公司 一种汽车系统控制方法
CN115334191B (zh) * 2021-05-10 2023-10-20 博泰车联网科技(上海)股份有限公司 控制方法、存储介质及电子设备
US20220382275A1 (en) * 2021-05-28 2022-12-01 Jaguar Land Rover Limited Computer readable medium, apparatus, and method for controlling vehicle movement
JP7360483B2 (ja) 2022-01-24 2023-10-12 本田技研工業株式会社 情報端末、制御システム、及び制御方法
CN114537417A (zh) * 2022-02-27 2022-05-27 重庆长安汽车股份有限公司 一种基于hud和触摸设备的盲操作方法、系统和车辆
JP7444915B2 (ja) * 2022-03-22 2024-03-06 本田技研工業株式会社 情報端末、制御方法、及び制御プログラム

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102346624A (zh) * 2010-07-30 2012-02-08 比亚迪股份有限公司 一种移动终端及其控制方法
JP2012076483A (ja) * 2010-09-30 2012-04-19 Aisin Seiki Co Ltd 駐車支援装置
JP2014193662A (ja) * 2013-03-28 2014-10-09 Nissan Motor Co Ltd 駐車支援装置
JP2016074285A (ja) * 2014-10-03 2016-05-12 本田技研工業株式会社 車両遠隔操作システム
GB2534471A (en) * 2015-12-22 2016-07-27 Daimler Ag Method for operating a motor vehicle by remote control

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0234624A (ja) 1988-07-22 1990-02-05 Hitachi Ltd エポキシ樹脂組成物
US7657849B2 (en) * 2005-12-23 2010-02-02 Apple Inc. Unlocking a device by performing gestures on an unlock image
JP5472256B2 (ja) 2011-05-06 2014-04-16 株式会社デンソー 車両用表示装置および情報表示システム
US9417754B2 (en) * 2011-08-05 2016-08-16 P4tents1, LLC User interface system, method, and computer program product
JP6124169B2 (ja) 2012-06-08 2017-05-10 クラリオン株式会社 表示装置
JP2014065392A (ja) 2012-09-25 2014-04-17 Aisin Seiki Co Ltd 携帯端末、遠隔操作システム、遠隔操作方法、及びプログラム
JP2014196009A (ja) 2013-03-29 2014-10-16 パナソニック株式会社 駐車支援装置、これに用いられる携帯端末、および、プログラム
JP2014197267A (ja) * 2013-03-29 2014-10-16 ブラザー工業株式会社 画像表示装置、画像表示方法及び画像表示プログラム
JP2015054530A (ja) 2013-09-10 2015-03-23 スズキ株式会社 駐車支援システム
JP6260174B2 (ja) 2013-09-27 2018-01-17 日産自動車株式会社 監視画像提示システム
JP2016164726A (ja) * 2015-03-06 2016-09-08 シャープ株式会社 電子機器

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102346624A (zh) * 2010-07-30 2012-02-08 比亚迪股份有限公司 一种移动终端及其控制方法
JP2012076483A (ja) * 2010-09-30 2012-04-19 Aisin Seiki Co Ltd 駐車支援装置
JP2014193662A (ja) * 2013-03-28 2014-10-09 Nissan Motor Co Ltd 駐車支援装置
JP2016074285A (ja) * 2014-10-03 2016-05-12 本田技研工業株式会社 車両遠隔操作システム
GB2534471A (en) * 2015-12-22 2016-07-27 Daimler Ag Method for operating a motor vehicle by remote control

Also Published As

Publication number Publication date
EP3556612A4 (en) 2020-08-05
US11067978B2 (en) 2021-07-20
JP6986518B2 (ja) 2021-12-22
EP3556612B1 (en) 2022-11-09
JPWO2018116978A1 (ja) 2019-10-24
US20200041992A1 (en) 2020-02-06
CN110023148A (zh) 2019-07-16
EP3556612A1 (en) 2019-10-23
WO2018116978A1 (ja) 2018-06-28

Similar Documents

Publication Publication Date Title
CN110023148B (zh) 终端、以及终端的控制方法
CN109383404B (zh) 显示系统、显示方法及存储程序的介质
JP4792948B2 (ja) 車車間通信システム
CN105991942B (zh) 车辆及用于控制车辆的方法
KR101964541B1 (ko) 자율 주행 모드 동안의 자동차용 통신 장치를 작동시키기 위한 방법, 통신 장치 및 자동차
JP6769860B2 (ja) 端末、及び端末の制御方法
JP2021195080A (ja) 車載装置、及び制御方法
JP4802686B2 (ja) 車車間通信システム
JP2021094937A (ja) 車両用表示装置及び駐車支援システム
JP4930716B2 (ja) 車両用遠隔操作装置
KR20160114486A (ko) 이동단말기 및 이동 단말기의 제어방법
CN111443705A (zh) 车载处理装置及车载处理装置的控制方法
WO2018180756A1 (ja) 運転支援システム
JP2020192877A (ja) 制御装置、制御方法、およびプログラム
CN115123281A (zh) 图像显示系统
US11358592B2 (en) In-vehicle processing apparatus and in-vehicle processing system
JP4725310B2 (ja) 車車間通信システム
JP7228614B2 (ja) 画像表示システム
JP5236328B2 (ja) 車両運転支援装置
JP6831505B2 (ja) 端末、端末の制御方法、情報処理装置、及び情報処理装置の制御方法
KR101856255B1 (ko) 내비게이션 디스플레이 장치
JP6831504B2 (ja) 端末、及び端末の制御方法
JP4710575B2 (ja) 車車間通信システム
JP2023071106A (ja) 路側機、車両、制御装置、及び、車両制御方法
JP2008254691A (ja) 表示画像切り替え装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant