CN108944454A - 电子装置、电子装置的控制方法及计算机可读记录介质 - Google Patents

电子装置、电子装置的控制方法及计算机可读记录介质 Download PDF

Info

Publication number
CN108944454A
CN108944454A CN201810826190.0A CN201810826190A CN108944454A CN 108944454 A CN108944454 A CN 108944454A CN 201810826190 A CN201810826190 A CN 201810826190A CN 108944454 A CN108944454 A CN 108944454A
Authority
CN
China
Prior art keywords
guidance
driveway
vehicle
signal
indicator
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201810826190.0A
Other languages
English (en)
Other versions
CN108944454B (zh
Inventor
赵浩亨
车旼奎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hyundai Motor Co
Kia Corp
Original Assignee
Thinkware Systems Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Thinkware Systems Corp filed Critical Thinkware Systems Corp
Publication of CN108944454A publication Critical patent/CN108944454A/zh
Application granted granted Critical
Publication of CN108944454B publication Critical patent/CN108944454B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/22Display screens
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/08Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/10Path keeping
    • B60W30/12Lane keeping
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/18Propelling the vehicle
    • B60W30/18009Propelling the vehicle related to particular drive situations
    • B60W30/18163Lane change; Overtaking manoeuvres
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/265Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network constructional aspects of navigation devices, e.g. housings, mountings, displays
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3626Details of the output of route guidance instructions
    • G01C21/3647Guidance involving output of stored or live camera images or video streams
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3667Display of a road map
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3697Output of additional, non-guidance related information, e.g. low fuel level
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/80Arrangements for controlling instruments
    • B60K35/81Arrangements for controlling instruments for controlling displays
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/146Display means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2554/00Input parameters relating to objects
    • B60W2554/80Spatial relation or speed relative to objects
    • B60W2554/802Longitudinal distance
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2555/00Input parameters relating to exterior conditions, not covered by groups B60W2552/00, B60W2554/00
    • B60W2555/60Traffic rules, e.g. speed limits or right of way
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60YINDEXING SCHEME RELATING TO ASPECTS CROSS-CUTTING VEHICLE TECHNOLOGY
    • B60Y2300/00Purposes or special features of road vehicle drive control systems
    • B60Y2300/08Predicting or avoiding probable or impending collision
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60YINDEXING SCHEME RELATING TO ASPECTS CROSS-CUTTING VEHICLE TECHNOLOGY
    • B60Y2300/00Purposes or special features of road vehicle drive control systems
    • B60Y2300/18Propelling the vehicle
    • B60Y2300/18008Propelling the vehicle related to particular drive situations
    • B60Y2300/18166Overtaking, changing lanes

Landscapes

  • Engineering & Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Automation & Control Theory (AREA)
  • Physics & Mathematics (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • General Physics & Mathematics (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Mathematical Physics (AREA)
  • Traffic Control Systems (AREA)
  • Navigation (AREA)

Abstract

电子装置、电子装置的控制方法及计算机可读记录介质。本发明公开电子装置、电子装置的控制方法及计算机可读记录介质。本发明的控制方法包括:生成用于执行对车辆驾驶进行辅助的驾驶相关引导的信息的步骤;利用所生成的信息来生成用于执行驾驶相关引导的指示符的步骤;以及在导航画面的规定区域以重叠的方式显示所生成的指示符的步骤。

Description

电子装置、电子装置的控制方法及计算机可读记录介质
本申请是原案申请号为201510305615.X的发明专利申请(申请日:2015年6月5日,发明名称:电子装置、电子装置的控制方法及计算机可读记录介质)的分案申请。
技术领域
本发明涉及电子装置、电子装置的控制方法及计算机可读的记录介质,更详细地,涉及执行对车辆驾驶进行辅助的驾驶相关引导的电子装置、电子装置的控制方法及计算机可读的记录介质。
背景技术
当车辆行驶时,最重要的是安全行驶及预防交通事故,为此,在车辆安装有执行控制车辆的姿势、控制车辆结构装置的功能等的多种辅助装置及安全带、安全气囊等安全装置。
不仅如此,近期,设置于车辆的黑匣子等的装置存储车辆的行驶影像及从各种传感器传输的数据,从而处于在车辆设置当车辆发生交通事故时用于查明车辆的事故原因的装置的趋势。由于也可以在智能手机、平板电脑等便携式终端设备安装黑匣子或导航仪应用等,因而被用作如上所述的车辆用装置。
但实际上,目前在这种车辆用装置中的行驶影像的利用率非常低。更具体地,即使通过目前安装于车辆的摄像头等的视觉传感器来获得车辆的行驶影像,车辆的电子装置仅停留于单纯地显示、传送这种影像或仅停留于生成是否脱离车道线等简单的周边通知信息。
并且,作为目前受关注的新的车辆电子装置,还提出平视显示器(HUD,Head-UpDisplay)或增强现实界面,但在这些装置中,对车辆的行驶影像的利用率也仅停留在单纯显示或生成简单的通知信息的层面。
发明内容
本发明为了解决上述的问题而提出,本发明的目的在于,提供生成用于对车辆驾驶进行辅助的驾驶相关引导的指示符,并在导航画面的规定区域显示所生成的指示符的电子装置、电子装置的控制方法及计算机可读的记录介质。
用于实现上述目的的本发明的一实施例的电子装置的控制方法包括:生成用于执行对车辆驾驶进行辅助的驾驶相关引导的信息的步骤;利用所生成的上述信息来生成用于执行上述驾驶相关引导的指示符的步骤;以及在导航画面的规定区域以重叠的方式显示所生成的上述指示符的步骤。
而且,可在生成用于执行上述驾驶相关引导的信息的步骤中,生成包含信号灯的信号种类信息、上述车辆所处的车行道的车道线信息、上述车辆所处的车行道的位置信息、与位于上述车辆的前方的其他车辆之间的距离信息及用于上述导航的路径信息中的至少一种的用于执行上述驾驶相关引导的信息。
并且,本发明还可以包括利用所生成的上述信息来决定对上述车辆行驶进行辅助的车道线脱离引导、防止与前方车辆碰撞的引导、信号灯的信号变更引导、车行道变更引导及车道线脱离引导中需要引导的项目的步骤。
而且,上述导航画面可以为增强现实(Augmented Reality:AR)导航画面。
并且,上述指示符可包括:第一区域,用于执行上述防止与前方车辆碰撞的引导;第二区域,位于上述第一区域的左右侧,用于执行上述车道线脱离引导;第三区域,位于上述第一区域、第二区域的上端,用于执行上述信号变更引导;以及第四区域,贯通上述第二区域,用于执行上述车行道变更引导。
而且,上述指示符可包括:第一区域,用于执行上述防止与前方车辆碰撞的引导;第三区域,位于上述第一区域的上端,用于执行上述信号变更引导;以及第四区域,用于执行上述车行道变更引导,用于执行上述车道线脱离引导的第二区域可位于上述增强现实导航画面的车道线部分。
并且,可在上述指示符生成步骤中生成用于激活上述多个区域中的与需要引导的项目相对应的区域的指示符。
而且,本发明还可包括:在车辆的驾驶相关影像数据中决定消失点(Vanishingpoint)的步骤;以及基于所决定的上述消失点,在上述增强现实导航画面中决定用于显示上述指示符的规定区域的步骤。
并且,可在决定用于显示上述指示符的规定区域的步骤中,将从所决定的上述消失点隔开规定距离的区域决定为用于显示上述指示符的规定区域。
另一方面,用于实现上述目的的本发明一实施例的电子装置包括:显示部,用于显示画面;引导相关信息生成部,生成用于执行对车辆驾驶进行辅助的驾驶相关引导的信息;指示符生成部,用于利用所生成的上述信息来生成用于执行上述驾驶相关引导的指示符;以及控制部,控制上述显示部在导航画面的规定区域以重叠的方式显示所生成的上述指示符。
而且,上述引导相关信息生成部可生成包含信号灯的信号种类信息、上述车辆所处的车行道的车道线信息、上述车辆所处的车行道的位置信息、与位于上述车辆的前方的其他车辆之间的距离信息及用于上述导航的路径信息中的至少种的用于执行上述驾驶相关引导的信息。
并且,上述引导相关信息生成部可利用所生成的上述信息来决定对上述车辆行驶进行辅助的车道线脱离引导、防止与前方车辆碰撞的引导、信号灯的信号变更引导、车行道变更引导及车道线脱离引导需要引导的项目。
而且,上述导航画面可以为增强现实导航画面。
并且,上述指示符可包括:第一区域,用于执行上述防止与前方车辆碰撞的引导;第二区域,位于上述第一区域的左右侧,用于执行上述车道线脱离引导;第三区域,位于上述第一区域、第二区域的上端,用于执行上述信号变更引导;以及第四区域,贯通上述第二区域,用于执行上述车行道变更引导。
而且,上述指示符可包括:第一区域,用于执行上述防止与前方车辆碰撞的引导;第三区域,位于上述第一区域的上端,用于执行上述信号变更引导;以及第四区域,用于执行上述车行道变更引导,用于执行上述车道线脱离引导的第二区域可位于上述增强现实导航画面的车道线部分。
并且,上述指示符生成部可生成用于激活上述多个区域中的与需要引导的项目相对应的区域的指示符。
而且,上述指示符生成部可基于在车辆的驾驶相关影像数据中决定的消失点,在上述增强现实导航画面中决定用于显示上述指示符的规定区域。
并且,上述指示符生成部可将从所决定的上述消失点隔开规定距离的区域决定为用于显示上述指示符的规定区域。
另一方面,用于实现上述目的的本发明的一实施例的计算机可读记录介质可以记录用于在计算机中执行上述电子装置的控制方法的程序代码。
根据上述本发明的多种实施例,可执行车道线脱离引导、防止与前方车辆碰撞的引导、信号灯的信号变更引导、车行道变更引导及车道线脱离引导等驾驶相关引导。由此,可以谋求驾驶人员对车辆的安全驾驶及方便性。
并且,根据上述本发明的多种实施例,在指示符内以与道路情况相对应的方式设计多个引导区域的各个位置,从而能够以更加直观的方法向驾驶人员提供引导。
并且,根据上述本发明的多种实施例,在增强现实导航画面以重叠的方式显示驾驶相关引导的指示符,从而能够以更加直观的方法向驾驶人员提供引导。
并且,根据上述本发明的多种实施例,通过使显示于增强现实导航画面的指示符的位置位于从消失点隔开规定距离的位置,从而能够以更加直观的方法提供引导。
附图说明
图1为表示本发明一实施例的电子装置的框图。
图2为具体表示本发明一实施例的引导相关信息生成部的框图。
图3为用于说明与本发明一实施例的电子装置相连接的系统的网络的图。
图4为表示本发明一实施例的信号种类信息生成动作的流程图。
图5为表示本发明一实施例的与停止信号相对应的关注区域影像数据及停止信号判断方法的图。
图6为表示本发明一实施例的车道线信息生成方法的流程图。
图7为表示本发明一实施例的灰度影像中的车道线种类关注区域的二进制化及一维映射的图。
图8为具体表示本发明一实施例的车行道位置信息生成方法的流程图。
图9为表示本发明一实施例的车行道决定表的图。
图10为具体表示本发明一实施例的电子装置的控制方法的流程图。
图11为具体表示本发明一实施例的电子装置的控制方法的流程图。
图12为表示本发明一实施例的指示符的图。
图13为表示本发明一实施例的用于执行信号变更引导及防止与前方车辆碰撞的引导的指示符的图。
图14为表示本发明一实施例的用于执行防止与前方车辆碰撞的引导的指示符的图。
图15为表示本发明一实施例的用于执行车行道变更引导的指示符的图。
图16为表示本发明一实施例的用于执行防止车道线脱离引导及防止与前方车辆碰撞的引导的指示符的图。
图17为表示本发明一实施例的导航画面的图。
图18为表示本发明另一实施例的导航画面的图。
图19为表示本发明一实施例的摄像头和电子装置为分离型的情况下的体现形态的图。
图20为表示本发明一实施例的摄像头和电子装置为一体型的情况下的体现形态的图。
图21为表示利用本发明一实施例的平视显示器及电子装置的体现形态的图。
具体实施方式
以下的内容仅仅例示本发明的原理。因此,本发明所属技术领域的技术人员可发明出虽然未在本说明书明确说明或图示,但可体现本发明的原理并包含于本发明的概念和范围的多种装置。并且,在本发明中列举的所有有条件的术语及实施例在原则上明确用于理解本发明的概念,并且,应理解为并不限定以如上所述的方式特别列举的实施例及状态。
并且,用于列举本发明的原理、观点及实施例,并列举特定实施例的所有详细说明应被理解为包含这种事项的结构性及功能性的等同技术方案。并且,这种等同技术方案应被理解为包括当前公开的等同技术方案,还包括今后将被研发的等同技术方案,即,以与结构无关地执行相同功能的方式发明的所有元件。
因此,例如,本说明书的框图应被理解为表示将本发明的原理具体化的例示性的回路的概念的观点。与此类似,所有流程图、状态转换图、伪代码等应被理解为无论是否实质性地显示于计算机可读介质,无论是否明确示出计算机或处理器,均表示借助计算机或处理执行的多种程序。
处理器或包括以与处理器相似的概念显示的功能块的附图中所示的多种元件的功能不仅可提供为专用硬件,而且可提供为与适当的软件相关地使用具有能够运行软件的功能的硬件。当通过处理器提供上述功能时,可借助单一专用处理器、单一共享处理器或多个个别处理器来提供上述功能,这些中的一部分可被共享。
并且,以处理、控制或与此相似的概念来提出的术语的明确使用不应以排除具有能够运行软件的能力的硬件的方式来解释,应以不受限制的方式理解为暗示性地包括数字信号处理器(DSP)硬件、用于存储软件的只读存储器(ROM)、随机存取存储器(RAM)及非易失性存储器。还可包括周知的其他惯用的硬件。
在本说明书的发明要求保护范围中,表现为用于执行在详细的说明中所记载的功能的机构的结构要素包括如执行上述功能的回路元件的组合或包括执行含有固件/微码等的所有形式的软件的功能的所有方法,并与用于运行上述软件的适当的回路相结合,来执行上述功能。借助这种发明要求保护范围来定义的本发明,借助以多种方式列举的方法来提供的功能相结合,并与发明要求保护范围所要求的方式相结合,因而能够提供上述功能的任何方法也应理解为等同于从本说明书掌握的方法相同。
通过与附图相关的以下详细的说明,可更加明确上述的目的、特征及优点,由此,本发明所属技术领域的普通技术人员可容易地实施本发明的技术思想。并且,在对本发明进行说明的过程中,若判断对公知技术的具体说明有可能使本发明的主旨变得模糊,则将省略其详细说明。
以下,参照附图,对本发明的多种实施例进行详细说明。
图1为表示本发明一实施例的电子装置的框图。参照图1,电子装置100包括存储部110、输入部120、输出部130、引导相关信息生成部140、指示符生成部150、增强现实供给部160、控制部170、通信部180、检测部190中的全部或一部分。
在这里,电子装置100可以体现为可向车辆驾驶人员提供驾驶相关引导的智能手机、平板电脑、笔记本电脑、个人数字助理(PDA,personal digital assistant)、便携式多媒体播放器(PMP,portable multimedia player)、智能眼镜、拓展现实眼镜、导航仪(navigation)、黑匣子(Black-box)等多种装置。
在这里,车辆的驾驶状态可包括车辆的停车状态、车辆的行驶状态、车辆的泊车状态等由驾驶人员驾驶车辆的多种状态。
驾驶相关引导可包括导航、车道线脱离引导、信号引导、信号变更引导、防止与前方车辆碰撞引导、车行道变更引导、车行道引导及车行道变更引导等用于辅助驾驶人员驾驶车辆的多种引导。
在这里,导航可包括:增强现实导航,在拍摄正在行驶中的车辆的前方的影像中结合使用人员的位置、方向等各种信息来执行导航;以及二维(2D,2-Dimensional)或三维(3D,3-Dimensional)导航,在二维或三维地图数据中结合使用人员的位置、方向等各种信息来执行导航。在这里,导航可解释成不仅包括在使用人员乘坐车辆进行驾驶的情况下的导航,还包括使用人员以行走或奔跑的方式移动的情况下的导航的概念。
并且,车道线脱离引导可以为对行驶中的车辆是否脱离车道线进行引导。
并且,防止与前方车辆碰撞的引导可以为若停车或行驶中的车辆与位于前方的车辆之间的距离在规定距离以内,则为了防止与前方车辆碰撞而进行引导。在这里,防止与前方车辆碰撞的引导可以为包括对位于停车中的车辆的前方的车辆是否出发进行引导的前方车辆出发引导的概念。
并且,信号引导可以为对位于驾驶中的车辆的前方的信号灯的信号状态,如停止信号、直行信号、左转弯信号、右转弯信号等进行的引导。在这里,与各个信号相对应的信号的颜色及形态可按国家而不同。以韩国为例,停止信号可以为红色圆、直行信号可以为蓝色圆、左转弯信号可以为蓝色左向箭头、右转弯信号可以为蓝色右向箭头。
并且,信号变更引导可以为用于引导位于驾驶中的车辆的前方的信号灯的信号状态发生变更的引导。作为一例,若从停止信号变更为直行信号,则对此进行引导。
并且,车行道变更引导可以为为了引导目的地为止的路径而引导车辆从车辆所处的车行道变更到其他车行道。
并且,车行道引导可以为对车辆当前所处的车行道所进行的引导。
这种能够提供多种引导的驾驶相关影像可通过朝向车辆的前方放置的摄像头来实时拍摄。在这里,摄像头可以为以与放置于车辆的电子装置100形成为一体,并拍摄车辆的前方的摄像头。在这种情况下,摄像头可以与智能手机、导航仪或黑匣子形成为一体,电子装置100可接收形成为一体的摄像头所拍摄的影像。
作为另一例,摄像头可以为与电子装置100分别放置于车辆,并拍摄车辆的前方的摄像头。在这种情况下,摄像头可以为朝向车辆的前方放置的单独的黑匣子,电子装置100通过有线/无线通信来接收单独放置的黑匣子所拍摄的影像,或若用于存储黑匣子所拍摄的影像的存储介质插入于电子装置100,则电子装置100可接收黑匣子所拍摄的影像。
以下,基于上述内容,对本发明一实施例的电子装置100进行更加具体的说明。
存储部110执行存储电子装置100的工作所需的多种数据及应用的功能。尤其,存储部110可存储电子装置100的工作所需的数据,如操作系统(OS)、路径探索应用、地图数据等。并且,存储部110可存储借助电子装置100的工作来生成的数据,如所探索到的路径数据、所接收的影像等。并且,存储部110可存储信号灯所包含的多个信号的位置关系信息、车行道判断表等。
在这里,存储部110不仅可以体现为随机存取存储器(RAM,Random AccessMemory)、闪存、只读存储器(ROM,Read Only Memory)、可擦除可编程式只读存储器(EPROM,Erasable Programmable ROM)、电可擦除可编程式只读存储器(EEPROM,ElectronicallyErasable and Programmable ROM)、寄存器、硬盘、可移动磁盘、内存卡、通用用户识别模块(USIM,Universal Subscriber Identity Module)等内置型存储元件,还可以体现为通用串行总线存储器等可拆装形态的存储元件。
输入部120执行将从电子装置100的外部输入的物理输入转换为特定的电信号的功能。在这里,输入部120可包括使用人员输入部121和传声器部123中的全部或一部分。
使用人员输入部121可接收触摸、推动动作等使用人员的输入。在这里,使用人员输入部121可利用多种按钮的形态、接收触摸式输入的触摸传感器、接收接近动作的接近传感器中的至少一个来体现。
传声器部123可接收使用人员的声音及从车辆的内外部产生的声音。
输出部130为用于输出电子装置100的数据的装置。在这里,输出部130可包括显示部131和音频输出部133中的全部或一部分。
显示部131为电子装置100输出能够以视觉性的方式识别的数据的装置。显示部131可以体现为设于电子装置100的外壳的前面的显示部。在这里,显示部131可以与电子装置100形成为一体,并输出视觉性的识别数据,还可如平视显示器,与电子装置100单独设置来输出视觉性的识别数据。
音频输出部133为电子装置100输出能够以听觉性的方式识别的数据的装置。音频输出部133能够通过表现声音的扬声器来体现电子装置100的应告知使用人员的数据。
通信部180可以为了使电子装置100与其他设备进行通信而设。通信部180可包括位置数据部181、无线互联网部183、广播收发部185、移动通信部186、近距离通信部187、有线通信部189中的全部或一部分。
位置数据部181为通过全球导航卫星系统(GNSS,Global Navigation SatelliteSystem)来获得位置数据的装置。全球导航卫星系统意味着可利用从人工卫星接收的电波信号来计算出接收终端的位置的导航系统。作为全球导航卫星系统的具体例,可根据运营主体分为全球卫星定位系统(GPS,Global Positioning System)、伽利略定位系统(Galileo)、格洛纳斯卫星导航系统(GLONASS,Global Orbiting Navigational SatelliteSystem)、北斗卫星导航系统(COMPASS)、印度区域导航卫星系统(IRNSS,Indian RegionalNavigational Satellite System)、准天顶卫星系统(QZSS,Quasi-Zenith SatelliteSystem)等。本发明一实施例的电子装置100的位置数据部181可通过接收向使用电子装置100的地区提供服务的全球导航卫星系统的信号来获得位置信息。
无线互联网部183为通过与无线互联网相连接来获得数据或发送信息的装置。可通过无线互联网部183来连接的无线互联网可以为无线局域网(WLAN,Wireless LAN)、无线宽带(Wibro,Wireless broadband)、全球微波互联接入(Wimax,World interoperabilityfor microwave access)、高速下行分组接入(HSDPA,High Speed Downlink PacketAcess)等。
广播收发部185为通过各种广播系统来收发广播信号的装置。可通过广播收发部185收发的广播系统可以为地面数字多媒体广播(DMBT,Digital MultimediaBroadcasting Terrestrial)、数字多媒体卫星广播(DMBS,Digital MultimediaBroadcasting Satellite)、高通提出的移动电视标准(Media FLO,Media Forward LinkOnly)、手持数字视频广播(DVBH,Digital Video Broadcast Handheld)、日本数字音频广播方案(ISDBT,Integrated Services Digital Broadcast Terrestrial)等。通过广播收发部185收发的广播信号可包括交通数据、生活数据等。
移动通信部186可根据第三代移动通信技术(3G,3rdGeneration)、第三代合作伙伴计划(3GPP,3rdGenerationPartnershipProject)、长期演进计划(LTE,Long TermEvoloution)等多种移动通信规格与移动通信网相连接并进行通信。
近距离通信部187为用于进行近距离通信的装置。如上所述,近距离通信部187可通过蓝牙(Bluetooth)、射频识别(RFID,Radio Frequency Identification)、红外数据组织(IrDA、Infrared Data Association)、超宽带(UWB,Ultra Wide Band)、紫蜂(ZigBee)、近场通信(NFC,Near Field Communication)、无线保真(Wi-Fi)等来进行通信。
有线通信部189为能够以有线方式使电子装置100与其他设备相连接的接口装置。有线通信部189可以为能够通过通用串行总线端口(USB Port)来进行通信的通用串行总线模块。
这种通信部180可利用位置数据部181、无线互联网部183、广播收发部185、移动通信部186、近距离通信部187、有线通信部189中的至少一个来与其他设备通信。
作为一例,在电子装置100不包括摄像功能的情况下,可利用近距离通信部187、有线通信部189中的至少一个来接收黑匣子等车辆用摄像头拍摄的影像。
作为另一例,在与多个设备通信的情况下,也可由一个设备通过近距离通信部187来通信,另一个设备通过有线通信部189通信。
检测部190为可检测电子装置100的当前状态的装置。检测部190可包括动作检测部191、光检测部193中的全部或一部分。
动作检测部191可检测电子装置100的三维空间上的运动。动作检测部191可包括三轴地磁传感器及三轴加速度传感器。可将通过动作检测部191获得的运动数据和通过位置数据部191获得的位置数据相结合,来计算出附着有电子装置100的车辆的更加准确的轨迹。
光检测部193为测定电子装置100的周边照度(illuminance)的装置。利用通过光检测部193获得的照度数据,可使显示部195的亮度与周边亮度相对应地发生变化。
电源部195为用于供给电子装置100的工作或与电子装置100相连接的其他设备的工作所需的电源的装置。电源部195可以为从内置于电子装置100的电池或车辆等外部电源处接收电源的装置。并且,根据接收电源的形态,电源部195可体现为有线通信模块119或体现为以无线的方式接收电源的装置。
另一方面,控制部170控制电子装置100的整体工作。具体地,控制部170可控制存储部110、输入部120、输出部130、引导相关信息生成部140、指示符生成部150、增强现实供给部160、通信部180、检测部190中的全部或一部分。
尤其,控制部170可控制引导相关信息生成部140生成用于执行对车辆驾驶进行辅助的驾驶相关引导的信息,使指示符生成部150利用所生成的信息来生成用于执行驾驶相关引导的指示符,使显示部131在导航画面的规定区域以重叠的方式显示所生成的指示符。
在这里,参照图2,引导相关信息生成部140可包括:信号种类信息生成部141,用于生成信号灯的信号种类信息;车道线信息生成部143,用于生成车辆所处的车行道的车道线信息;车行道位置信息生成部145,用于生成车辆所处的车行道的位置信息;路径信息生成部146,用于生成向所设定的地点进行导航的路径信息;以及距离信息生成部147,用于生成与位于车辆的前方的其他车辆之间的距离信息。将参照图4至图9来对这种引导相关信息生成部140的信息生成方法进行后述。
另一方面,指示符生成部150可利用在引导相关信息生成部140生成的信息来决定对车辆的行驶进行辅助的车道线脱离引导、防止与前方车辆碰撞的引导、信号灯的信号变更引导、车行道变更引导、车道线脱离引导中需要引导的项目。
在这里,指示符可以为在指示符内以与道路状况相对应的方式设计多个引导区域的各个位置的形态,以便能够以更加直观的方法向驾驶人员执行引导。
作为一例,指示符可包括:第一区域,用于执行防止与前方车辆碰撞的引导;第二区域,位于第一区域的左右侧,用于执行车道线脱离引导;第三区域,位于上述第一区域、第二区域的上端,用于执行信号变更引导;以及第四区域,贯通上述第二区域,用于执行车行道变更引导。
并且,作为另一例,指示符可包括:第一区域,用于执行防止与前方车辆碰撞的引导;第三区域,位于上述第一区域的上端,用于执行信号变更引导;以及第四区域,用于执行车行道变更引导。在这种情况下,用于执行车道线脱离引导的第二区域可位于增强现实导航画面的车道线部分。
在这种情况下,指示符生成部150可生成在指示符所包括的多个区域中激活与需要进行引导的项目相对应的区域的指示符。
并且,指示符生成部150能够基于在车辆的驾驶相关影像数据中决定的消失点,来决定在上述增强现实导航画面中用于显示上述指示符的规定区域。在这里,指示符生成部150从驾驶车辆的过程中由摄像头拍摄的影像中抽取车道线,并延伸所抽取的车道线,从而将相互交叉的点决定为消失点。并且,指示符生成部150可将从所决定的消失点隔开规定距离的区域决定为用于显示指示符的规定区域。
另一方面,控制部170能够以执行车辆的驾驶相关引导的方式控制输出部130。具体地,控制部170可将显示部131控制成在导航画面的规定区域以重叠的方式显示在指示符生成部150所生成的指示符。并且,控制部170可将音频输出部133控制成以声音方式输出车辆的驾驶相关引导。
并且,控制部170能够与增强现实供给部160相联动来控制电子装置100基于增强现实来执行驾驶相关引导。在这里,增强现实可以为在呈现使用人员实际看到的现实世界的画面中以在视觉上重叠的方式供给附加信息(例如,表示关注的地点(PointOfInterest:POI)的图形要素、表示至目的地的路径的图形要素等)的方法。作为一例,增强现实可通过利用车辆前挡风玻璃的平视显示器或利用其他影像输出装置的影像叠加来供给,像这样,增强现实供给部160可生成现实影像或叠加于玻璃的界面影像等。由此,可体现增强现实导航仪或车辆信息系统等。
图3为用于说明与本发明一实施例的电子装置相连接的系统的网络的图。参照图3,本发明的一实施例的电子装置100可体现为导航仪、黑匣子、智能手机或其他车辆用增强现实界面供给装置等设置于车辆的各种装置,并且可与多种通信网及其他电子设备61、62、63、64相连接。
并且,电子装置100可根据从人工卫星20接收的电波信号来与全球定位系统相联动,从而计算出当前的位置及当前的时间。
各个人工卫星20可发送频率波段不同的L波段频率。电子装置100可基于从各人工卫星20发送的L波段频率到达电子装置100所需的时间来计算出当前的位置。
另一方面,电子装置100可通过通信部180,并借助控制站40(ACR)、基站50(RAS)等来以无线方式与网络30相连接。若电子装置100与网络30相连接,则还能与以间接的方式与网络30相连接的其他电子设备61、62相连接,并交换数据。
另一方面,电子装置100还可以通过具有通信功能的其他设备63来以间接的方式与网络30相连接。例如,在电子装置未具有可以与网络30相连接的模块的情况下,可通过近距离通信等来与具有通信功能的其他设备63进行通信。
图4为表示本发明一实施例的信号种类信息生成动作的流程图。参照图4,首先,信号种类信息生成部141可在驾驶相关影像数据中决定包括信号灯的关注区域(步骤S101)。在这种情况下,由于信号灯位于消失点的上部区域,因此,信号种类信息生成部141可将所决定的消失点的上部区域决定为关注区域。另一方面,作为另一例,信号种类信息生成部141可在驾驶相关影像数据中将事先设定的规定区域决定为关注区域。
而且,信号种类信息生成部141能够以预设定的像素值为基准来对所决定的关注区域的影像数据进行转换,从而生成关注区域影像数据(步骤S102)。在这种情况下,作为一例,信号种类信息生成部141可将所决定的关注区域的影像数据适用于以下数学式1来生成关注区域影像数据。
数学式1:
其中,R、G、B可以为所决定的关注区域的影像数据的R值、G值、B值,K可以为成为转换基准的预设定的像素值,x、y、z可以为特定系数。作为一例,K可以为平均像素值128。
由此,信号种类信息生成部141可生成明确划分信号灯的信号区域部分的关注区域影像数据。
另一方面,分别与信号灯所包括的多个信号相对应的信号的颜色和/或形态可按国家而不同。以韩国为例,停止信号可以为红色圆、直行信号可以为蓝色圆、左转弯信号可以为蓝色左向箭头、右转弯信号可以为蓝色右向箭头。
因此,上述的预设定的像素值及x、y、z可根据算法来具有互不相同的值。
另一方面,信号种类信息生成部141可在关注区域影像数据中适用第一区域、第二区域来检测信号灯的信号区域部分的影像数据(步骤S103)。具体地,信号种类信息生成部141可对关注区域影像数据适用具有第一面积的第一区域和包括第一区域并具有第二面积的第二区域来检测信号灯的信号区域部分的影像数据。在这里,第一区域、第二区域可以为与信号灯的信号的形状相对应的形状。作为一例,在信号灯的信号为圆形、椭圆形、四角形的情况下,第一区域及第二区域可以为圆形、椭圆形、四角形。
另一方面,信号种类信息生成部141可对第二区域的面积像素值与第一区域的面积像素值的差和预设定的面积像素值进行比较(步骤S104)。在这里,预设定的面积像素值可通过反映分别与信号灯所包含的多个信号相对应的颜色和/或形状等来发生变更。
而且,信号种类信息生成部141可根据比较结果来生成信号灯的信号种类信息(步骤S105)。
对于步骤S103、步骤104及步骤105,将参照图5来进行具体说明。
图5为表示本发明的一实施例的与停止信号相对应的关注区域影像数据及停止信号判断方法的图。在信号灯显示红色的停止信号的情况下,若信号种类信息生成部141以预设定的像素值为基准对关注区域的影像数据进行转换,则可生成如图5的(a)部分所示的关注区域影像数据501。其中,如502所示,可在关注区域影像数据501上生成信号灯的红色停止信号。
在这种情况下,信号种类信息生成部141可在关注区域影像数据501适用第一区域504、第二区域503来检测信号灯的信号区域部分502的影像数据。
而且,信号种类信息生成部141可对第二区域503的面积像素值与第一区域504的面积像素值之间的差和预设定的面积像素值进行比较来生成信号灯的信号种类信息。作为一例,若第二区域503的面积像素值与第一区域504的面积像素值之间的差小于预设定的面积像素值(即,在如图5的(b)部分所示的情况下,第一区域504的面积像素值大),则可将信号种类信息判断为停止信号。
另一方面,虽然在图5中省略,但对直行信号以及左转弯信号、右转弯信号灯等转弯信号的判断也能以与上述的方法相似的方式执行。作为一例,信号种类信息生成部141可利用上述的方法和/或信号灯的信号区域部分的影像数据的形状(例如,箭头形状)来判断转弯信号。
根据这种如图5所示的信号种类信息生成方法,以预设定的像素值为基准将关注区域的影像数据平均化的状态来判断信号种类信息,因而可提高影像处理速度,由此,可在行驶、停车状态时刻变化的驾驶状态下,可迅速判断信号种类信息。
另一方面,如图5所示的信号种类信息生成方法仅仅是本发明的一例示,本发明并不局限于此。因此,可利用从作为彩色影像的驾驶相关影像数据检测与停止信号相对应的红色信号或与直行信号相对应的蓝色信号来判断信号种类信息等多种信号种类信息生成方法。
另一方面,根据本发明的一实施例,若判断信号种类信息为停止信号,则信号种类信息生成部141可事先使第一区域及第二区域在关注区域影像数据中位于用于显示出发信号、左转弯/右转弯等的转弯信号的区域。在这种情况下,信号种类信息生成部141可利用存储于存储部110的多个信号的位置关系信息来使第一区域及第二区域事先位于上述位置。在这种情况下,通过提高影像处理速度,可更加迅速地判断从停止信号变更为直行信号或左转弯/右转弯等的转弯信号。
图6为具体表示本发明一实施例的车道线信息生成方法的流程图。参照图6,首先,车道线信息生成部143将彩色影像数据转换成灰度影像(步骤S201),并且可从所转换的灰度影像中检测车道线区域(步骤S202)。
具体地,车道线信息生成部143可从所拍摄的驾驶相关影像中抽取用于检测车道线的区域。并且,若道路的一部分受影子的影响,则难以使车道线信息生成部143检测车道线,因此,为了将影子的影响最小化,可事先对原影像校正光源。
而且,车道线信息生成部143可根据事先设定的摄像头的位置或摄像头的设置角度来将有可能存在车道线的区域检测为车道线区域。例如,车道线信息生成部143可将车道线可以开始的位置作为起点来决定车道线区域。并且,车道线信息生成部143可通过驾驶相关影像内的车行道的宽度(左侧车道线区域与右侧车道线区域之间的最大宽度)和摄像头的视角来推定车道线区域开始的位置和车道线区域的长度。
并且,车道线信息生成部143将与车道线检测区域相对应的灰度影像转换为边缘影像,并可以基于从所转换的边缘影像中抽取的直线位置来检测车道线区域。更为具体地,可通过公知的多种算法将驾驶相关影像转换为边缘影像,边缘影像可包括显示多个直线的边缘。此时,车道线信息生成部143可将所检测到的直线的位置识别为车道线。并且,车道线信息生成部143可基于具有规定的车道线的宽度的直线的位置,在多个候选直线中决定车道线区域。
之后,若检测出车道线区域,则车道线信息生成部143可基于车道线区域,来设定车道线种类关注区域(步骤S203)。具体地,若检测出车道线区域,则车道线信息生成部143可设定以所检测到的车道线区域为基准的车道线种类关注区域(ROI,Region Ofinterest)。车道线种类关注区域可意味着包括用于判断车道线的线的种类及颜色的车道线及上述车道线的周边规定区域的驾驶相关影像的部分。
之后,车道线信息生成部143可以对车道线种类关注区域执行二进制化(步骤S204),将二进制化的部分的灰度影像映射为一维区域(步骤S205),并利用视觉连续性及速度中的至少一个来识别线的种类(步骤S206)。
车道线信息生成部143可从所转换的灰度影像中抽取车道线种类关注区域的部分灰度影像,并可对部分灰度影像执行二进制化。用于进行二进制化的基准值可根据关注区域的部分灰度影像的平均灰度值来决定。由此,车道线信息生成部143可从部分灰度影像中明确地区别仅判断为车道线的部分。
而且,车道线信息生成部143可将从二进制化的部分灰度影像中识别的各线(左侧及右侧)映射为一维区域。而且,通过分析被映射为一维区域的各线的图案,可以识别线的种类。
更为具体地,图7表示灰度影像中的车道线种类关注区域的二进制化及一维映射。
如图7所示,若对车道线种类关注区域执行二进制化,则可获得被二进制化的影像700。在被二进制化的影像700中,可将以白色显示的部分识别为车道线,而除此之外的部分可被识别为黑色。
而且,在被二进制化的影像700中识别到的各线可被映射为一维区域。车道线信息生成部143可利用被映射为一维区域的影像710来容易地判别线的种类。
例如,车道线信息生成部143可基于映射为一维的各线的始点及长度特征,来判断是否为虚线或实线。并且,车道线信息生成部143可利用被映射为一维的各线对时间的连续性及速度来判断是否为虚线或实线。而且,车道线信息生成部143首先可根据上述始点及长度特征来决定是否为虚线或实线后,其次可利用对时间的连续性及速度来最终决定是否为虚线或实线。
更为具体地,车道线信息生成部143首先可通过对各线的始点位置的线的长度进行比较判别,来决定是否为虚线或实线。在这种情况下,车道线信息生成部143可仅借助一个影像帧也能判断是否为虚线或实线。
并且,车道线信息生成部143可根据各线是否随着时间连续地形成来更加明确地判断是虚线还是实线。例如,车道线信息生成部143可事先设定线在影像内的移动速度的连续性程度,并在各线的连续性小于事先设定的连续性程度的值的情况下,判断为虚线。
因此,根据本发明的实施例,可通过一个帧来事先区别是否是虚线还是实线,并通过连续的帧来对此进行验证,从而最终判断线的种类。
之后,车道线信息生成部143可从彩色的原影像数据中检测种类被识别的上述线部分的颜色(步骤S207)。
车道线信息生成部143可通过分析彩色影像来检测与之前种类被识别的线相对应的部分的颜色,并对此进行分类。例如,车道线信息生成部143可将所检测到的颜色分为白色、黄色或蓝色。
之后,车道线信息生成部143可基于所识别的线的种类及所分类的颜色,来生成与车辆所处的车行道相对应的车道线信息(步骤S208)。
图8为具体表示本发明一实施例的车行道位置信息生成方法的流程图。参照图8,车行道位置信息生成部145可从地图数据中获得车辆所处的道路的车行道信息(步骤S301)。在这里,道路的车行道信息可以为正在驾驶中的车辆当前所处的道路的车行道信息,可包括车辆所处的道路的车行道的数量信息。而且,道路的车行道信息可从存储于电子装置100内的存储部110的地图数据中获得,或者可从电子装置100以外的其他外部地图数据库(DB)中获得,或者可从其他电子装置100获得。
而且,车行道位置信息生成部145可利用所生成的车道线信息来判断车辆位于道路的第一车行道(第一车行道)或位于最后车行道(末尾车行道)(步骤S302)。具体地,车行道位置信息生成部145可在如图9的(a)部分所示的车行道判断表中适用与车辆所处的车行道相对应的车道线信息,来判断车辆位于道路的第一车行道或末尾车行道。
即,车行道判断表可包括根据国家、左侧线的种类及颜色、右侧线的种类及颜色来决定的第一车行道、末尾车行道。在这里,如图9的(a)部分所示的车行道判断表可以为例示性的,可根据不同的设定和不同的国家或情况来设定不同的值。
另一方面,当车辆位于第一车行道或最后车行道的情况下,车行道位置信息生成部145可通过反映车行道信息来生成车辆所处的车行道位置信息(步骤S303)。例如,若判断车辆位于最后车行道,则车行道位置信息生成部145可将车行道位置信息生成为第N车行道。而且,若与道路车行道信息相对应的车行道的数量为5个的情况下,可以对此进行反映,并将第N车行道生成为第五车行道。
而且,若根据车辆变更车行道来使车辆所处的车行道变更为位于第一车行道和最后车行道之间的车行道,则车行道位置信息生成部145可将所生成的车行道位置信息更新成变更的车行道的位置信息(步骤S304)。在这种情况下,车行道位置信息生成部145可利用车道线信息来判断是否脱离车道线,并基于此来判断车行道是否被变更。例如,若判断为车辆从第五车行道向左侧变更一个车行道,则车行道位置信息生成部145对此进行反映,从而将车行道位置信息从第五车行道更新为第四车行道。
而且,若根据车辆变更车行道来使车辆所处的位置从位于中间的车行道变更为第一车行道或最后车行道,则车行道位置信息生成部145可重新获得车辆所处的道路的车行道信息(步骤S305)。而且,通过反映重新获得的车行道信息,可重新生成车辆所处的车行道位置信息(步骤S306)。例如,若判断为车辆从第四车行道向右侧车行道变更一个车行道,则向作为之前所设定的最后车行道的第五车行道移动,从而可获得当前车辆所处的道路的车行道信息。并且,若所获得的车行道信息为第四车行道,则可将车辆所处的车行道位置信息重新生成为第四车行道。
另一方面,本发明一实施例的车行道位置信息生成方法并不局限于上述的图8。因此,根据另一实施例上述的顺序可以进行部分变更。作为一例,可在步骤S304中执行获得车辆所处的道路的车行道信息的步骤。在这种情况下,若车辆位于第一车行道或最后车行道,则车行道位置信息生成部145可生成车辆所处的车行道位置信息(步骤S303)。例如,若判断为车辆位于最后车行道,则车行道位置信息生成部145可将车行道位置信息生成为第N车行道。
而且,若根据车辆变更车行道来使车辆所处的车行道变更为位于第一车行道与最后车行道之间的车行道,则车行道位置信息生成部145可利用所生成的车行道位置信息及所获得的道路的车行道信息来更新车行道位置信息(步骤S304)。例如,若判断为车辆从与末尾车行道相对应的第N车行道向左侧车行道变更一个车行道,则对第N-1车行道反映作为车行道数量信息的N=5,从而可以将车行道位置信息更新为第四车行道。
并且,根据本发明的另一实施例,车行道位置信息生成部145可在如图9的(b)部分所示的车行道判断表适用与车辆所处的车行道相对应的车道线信息,来判断车辆是否位于道路的第一车行道、中央车行道、末尾车行道。但在这种情况下,在道路的中央车行道为多个的情况(例如,车行道的数量为4个以上的情况)下,无法准确知晓在多个中央车行道中的车辆所处的车行道,因此,优选地,本发明一实施例可使用如图8所示的方法。
另一方面,路径信息生成部146可利用地图数据、交通流量相关信息等来生成用于向车辆的驾驶人员设定的地点导航的路径信息。
并且,距离信息生成部147可生成与位于车辆的前方的其他车辆之间的距离信息。作为一例,距离信息生成部147可在车辆的驾驶相关影像数据中决定包括前方车辆的关注区域,并利用所决定的关注区域的影像数据来生成与位于车辆的前方的其他车辆之间的距离信息。作为另一例,距离信息生成部147可通过接收在设置于车辆的前方的距离检测传感器,如红外线传感器、超声波传感器等中生成的感测信息来生成与位于车辆的前方的其他车辆之间的距离信息。
由此,引导相关信息生成部140可生成包含信号灯的信号种类信息、车辆所处的车行道的车道线信息、车辆所处的车行道的位置信息、与位于车辆的前方的其他车辆之间的距离信息及用于导航的路径信息中的至少种的用于执行上述驾驶相关引导的信息。
图10为具体表示本发明一实施例的电子装置的控制方法的流程图。参照图10,首先,引导相关信息生成部140可生成用于执行对车辆驾驶进行辅助的驾驶相关引导的信息(步骤S401)。
而且,引导相关信息生成部140可利用所生成的信息来决定对车辆行驶的车道线脱离引导、防止与前方车辆碰撞的引导、信号灯的信号变更引导、车行道变更引导及车道线脱离引导中需要引导的项目(步骤S402)。为了便于说明,以信号变更引导作为一例来进行说明。
在停在交叉路的车辆的路径信息为直行方向的状态下,若信号种类信息从停止信号变更为左转弯信号,则引导相关信息生成部140可判断无需进行信号变更引导。或者,在停在交叉路的车辆的路径信息为直行方向的状态下,若所生成的信号种类信息从停止信号变更为直行信号,则引导相关信息生成部140可判断为需要进行信号变更引导。
并且,将车行道变更引导作为另一例来进行说明。
在行驶中的车辆的路径信息为规定距离后左转弯的状态下,若车行道位置信息并不是左转弯车行道,则引导相关信息生成部140可判断为需要进行车行道变更引导。或者,在行驶中的车辆的路径信息为规定距离后左转弯的状态下,若车行道位置信息为左转弯车行道,则引导相关信息生成部140可判断为无需进行车行道变更引导。
而且,指示符生成部150可生成在指示符所包含的多个区域中激活与需要进行引导的项目相对应的区域的指示符(步骤S403)。具体地,指示符生成部150可生成激活与需要进行引导的项目相对应的区域,并不会激活与无需进行引导的项目相对应的区域的指示符。
而且,显示部131可在导航画面的规定区域以重叠的方式显示所生成的指示符(步骤S404)。具体地,显示部131可以与增强现实供给部160联动来显示以重叠的方式显示在对驾驶中的车辆的前方进行拍摄的影像中生成的指示符的增强现实导航画面。并且,显示部131可显示在二维地图数据或三维地图数据以重叠的方式显示有所生成的指示符的二维导航画面或三维导航画面。
图11为具体表示本发明一实施例的电子装置的控制方法的流程图。参照图11,首先,引导相关信息生成部140可生成用于执行对车辆驾驶进行辅助的驾驶相关引导的信息(步骤S501)。
而且,指示符生成部150可利用所生成的信息来生成用于执行驾驶相关引导的指示符(步骤S502)。
而且,指示符生成部150可在车辆的驾驶相关影像数据中决定消失点(步骤S503)。具体地,指示符生成部150可从车辆的驾驶过程中由摄像头拍摄的拍摄影像中抽取车道线,并将延伸所抽取的车道线来相互交叉的点决定为消失点。
而且,指示符生成部150可基于在车辆的驾驶相关影像中决定的消失点,来决定在增强现实导航画面中用于显示指示符的规定区域(步骤S504)。具体地,指示符生成部150可将从所决定的消失点隔开规定距离的区域决定为用于显示指示符的规定区域。即,根据在呈现使用人员实际看到的现实世界的画面中显示附加信息的增强现实,在消失点的下部区域显示与实际道路、实际前方车辆等相对应的影像,但在消失点的上部区域显示除了与实际信号灯相对应的影像之外,并不显示驾驶过程中所需的影像。因此,指示符生成部150可将从所决定的消失点隔开规定距离的区域决定为用于显示指示符的规定区域。
而且,显示部131能够以重叠的方式在增强现实导航画面的规定区域显示所生成的指示符(步骤S505)。
图12为表示本发明一实施例的指示符的图。图12为表示处于多个引导区域均未被激活的状态的指示符的图,指示符1200可包括:第一区域1230,用于执行防止与前方车辆碰撞的引导;第二区域1220-1、1220-2,位于上述第一区域的左右侧,用于执行车道线脱离引导;第三区域1210-1、1210-2、1210-3,位于上述第一区域、第二区域的上端,用于执行信号变更引导;以及第四区域1240-1、1240-2,贯通上述第二区域,用于执行上述车行道变更引导。
即,在指示符内,多个引导区域的各个位置可以为以与实际道路情况相对应的方式设计的形态。
另一方面,并不限定于如上述的图12所示的指示符的形态,根据再一例,可省略上述第一区域至第四区域中的一个以上的区域,并且,根据另一例,除了上述第一区域至第四区域之外,还可包括如用于引导当前车辆所处的车行道为第几车行道的车行道引导等的引导区域。
另一方面,若在多个引导中决定需要进行引导的项目,则指示符生成部150可生成在上述多个区域中激活与需要进行引导的项目相对应的区域的指示符。对此,将参照图13至图16来进行详细说明。
图13为表示本发明一实施例的用于执行信号变更引导及防止与前方车辆碰撞的引导的指示符的图。具体地,在与位于车辆的前方的车辆之间的距离信息大于预设定的距离,且信号种类信息为停止信号的情况下,如图13的(a)部分所示,指示符生成部150可生成通过提示与前方车辆之间的距离充分的颜色激活第一区域1230,并激活用于执行信号变更引导的第三区域的停止信号区域1210-1的指示符。
而且,若信号灯的信号状态从停止信号变更为直行信号,则如图13的(b)部分所示,指示符生成部150可生成激活用于执行信号变更引导的第三区域的直行信号区域1210-3的指示符。
图14为表示本发明一实施例的用于执行防止与前方车辆碰撞的引导的指示符的图。具体地,在与位于车辆的前方的车辆之间的距离信息小于预设定的距离的情况下,如图14的(a)部分所示,指示符生成部150可生成通过提示与前方车辆之间的距离过近的颜色来激活第一区域1230的指示符。
而且,若与位于车辆的前方的车辆之间的距离信息非常近,则如图14的(b)部分所示,指示符生成部150可生成通过提示与前方车辆之间的距离非常近的颜色来激活第一区域1230的指示符。
图15为表示本发明的一实施例的用于执行车行道变更引导的指示符的图。具体地,在车辆需要从当前的车行道向左侧车行道变更车行道的情况下,如图15的(a)部分所示,指示符生成部150可生成激活用于引导向左侧车行道变更的第四区域的左侧车行道变更引导区域1240-1的指示符。
而且,在车辆需要从当前的车行道向右侧车行道变更车行道的情况下,如图15的(b)部分所示,指示符生成部150可生成激活用于引导向右侧车行道变更的第四区域的右侧车行道变更引导区域1240-2的指示符。
图16为表示本发明一实施例的用于执行防止车道线脱离引导及防止与前方车辆碰撞的引导的指示符的图。具体地,在与位于车辆的前方的车辆之间的距离信息大于预设定的距离,且车辆脱离左侧车道线的情况下,如图16的(a)部分所示,指示符生成部150可生成通过提示与前方车辆之间的距离充分的颜色激活第一区域1230,并激活用于执行脱离引导的第二区域的左侧车道线脱离引导区域1220-1的指示符。
而且,在与位于车辆的前方的车辆之间的距离大于预设定的距离,且车辆脱离右侧车道线的情况下,如图16的(b)部分所示,指示符生成部150可生成通过提示与前方车辆之间的距离充分的颜色激活第一区域1230,并激活用于执行车道线脱离引导的第二区域的右侧车道线脱离引导区域1220-2的指示符。
图17为表示本发明一实施例的导航画面的图。参照图17,导航画面可一同显示以重叠的方式在拍摄驾驶中的车辆的前方的影像中显示有所生成的指示符1200的增强现实导航画面1710及借助二维或三维的地图数据来执行导航的二维或三维导航画面1720。
而且,指示符1710可显示于从作为延伸车道线并相互交叉的点的消失点隔开规定距离的增强现实导航画面1710内的区域。
图18为表示本发明另一实施例的导航画面的图。参照图18,本发明另一实施例的指示符1300可包括:第一区域,用于执行防止与前方车辆碰撞的引导;第三区域,位于第一区域的上端,用于执行上述信号变更引导;以及第四区域,用于执行车行道变更引导。
在这种情况下,用于执行车道线脱离引导的第二区域1830可位于增强现实导航画面1810的车道线部分。即,在车辆脱离左侧车道线的情况下,在增强现实导航画面1810中,车辆所处的车行道的左侧车道线部分可被激活,在车辆脱离右侧车道线的情况下,在增强现实导航画面1810中,车辆所处的车行道的右侧车道线部分可被激活。
图19为表示本发明一实施例的摄像头和电子装置为分离型的情况下的体现形态的图。参照图19,分别设置的车辆用导航仪100和车辆用黑匣子200可利用有线/无线通信方式来构成本发明一实施例的系统。
车辆用导航仪100可包括:显示部145,设于导航仪的外壳191的前表面;导航仪操作键193;以及导航仪传声器195。
车辆用黑匣子200可在行驶过程及停车过程中获得车辆的数据。即,不仅可以拍摄车辆在行驶过程中的影像,而且在车辆停车的情况下,也可以拍摄影像。通过车辆用黑匣子200来获得的影像的清晰度可恒定或发生变化。例如,在发生事故前后,可使影像的清晰度高,而在通常的情况下,降低清晰度,从而可将所需的存储空间最小化,并存储关键影像。
车辆用黑匣子200可包括黑匣子摄像头222、黑匣子传声器224及附着部281。
另一方面,虽然图19示出车辆用导航仪100和单独设置的车辆用黑匣子200通过有线/无线通信方式互相连接,但车辆用导航仪100和车辆用黑匣子200也可以无需通过有线/无线通信方式相连接。在这种情况下,若用于存储黑匣子200的拍摄影像的存储介质插入于电子装置100,则电子装置100可接收所拍摄的影像。另一方面,还可以使车辆用黑匣子200具有车辆用导航仪100的功能,或者可以使车辆用导航仪100具有摄像头并实现一体化。对此,将参照图13来进行详细说明。
图20为表示本发明一实施例的摄像头和电子装置为一体型的情况下的体现形态的图。参照图20,在电子装置包含摄像头功能的情况下,使用人员能够以电子装置的摄像头部分拍摄车辆的前方,使用人员可以识别电子装置的显示部分的方式放置电子装置。由此,可体现本发明一实施例的系统。
图21为表示利用本发明一实施例的平视显示器及电子装置的体现形态的图。参照图21电子装置可通过有线/无线通信方式与平视显示器相连接,并在平视显示器上显示增强现实引导画面。
另一方面,能够以程序代码体现上述本发明的多种实施例的电子装置的控制方法来,从而以存储于多种非临时性的可读介质(non-transitory computer readablemedium)状态向各服务器或设备提供。
非临时性的可读介质并不意味着寄存器、高速缓冲存储器、存储器等短时间存储数据的介质,而是意味着半永久性存储数据,并能借助设备来读取(reading)的介质。具体地,上述的多种应用或程序可存储于光盘(CD)、数字多功能光盘(DVD)、硬盘、蓝光光盘、通用串行总线、记忆卡、只读存储器等非临时性的可读介质来提供。
并且,以上对本发明的优选实施例进行了图示和说明,但本发明并不局限于上述的特定实施例,在不脱离发明要求保护范围中申请的本发明的主旨的情况下,可由本发明所属技术领域的普通技术人员对本发明实施多种变形,并且,这些变形实施方式不应脱离本发明的技术思想或本发明的前景来单独理解。

Claims (21)

1.一种电子装置的控制方法,该方法包括以下步骤:
生成用于执行对车辆驾驶进行辅助的驾驶相关引导的信息;
通过使用所生成的信息决定多个驾驶相关引导当中的对车辆驾驶进行辅助的必要引导;
生成针对所决定的必要引导的指示符;以及
显示所生成的指示符,
其中,所生成的用于执行所述多个驾驶相关引导的信息包括信号灯的信号种类信息、车辆所处的车行道的车道线信息、上述车辆所处的车行道的位置信息、与位于上述车辆的前方的其他车辆之间的距离信息当中的至少一种,
其中,所述多个驾驶相关引导包括车道线脱离引导、防止与前方车辆碰撞的引导、信号灯的信号变更引导和车行道变更引导当中的至少两个。
2.根据权利要求1所述的电子装置的控制方法,其中,如果所述信号灯的信号种类信息从停止信号变更为直行信号,则决定步骤决定信号引导是必要的,
其中,如果所述信号变更引导是必要的,则显示步骤显示针对所述信号变更引导的指示符。
3.根据权利要求2所述的电子装置的控制方法,其中,针对所述信号变更引导的指示符包括停止信号区域和直行信号区域,
其中,所述显示步骤包括:
如果所述信号灯的信号种类信息从所述停止信号变更为所述直行信号,则所述停止信号区域不被激活并且所述直行信号区域被激活。
4.根据权利要求1所述的电子装置的控制方法,其中,如果与位于上述车辆的前方的其他车辆之间的距离信息比预定距离短,则决定步骤决定防止与前方车辆碰撞的引导是必要的,
其中,如果防止与前方车辆碰撞的引导是必要的,则显示步骤显示针对防止与前方车辆碰撞的引导的指示符。
5.根据权利要求1所述的电子装置的控制方法,其中,如果所述车辆从所述车辆所处的车行道的两侧处形成的一条车道线脱离,则决定步骤决定所述车道线脱离引导是必要的,
其中,如果所述车道线脱离引导是必要的,则显示步骤显示针对所述车道线脱离引导的指示符。
6.根据权利要求5所述的电子装置的控制方法,其中,显示针对所述车道线脱离引导的指示符包括:
如果所述车辆脱离左侧车道线,则激活增强现实影像的车行道的左侧车道线部分,
如果所述车辆脱离右侧车道线,则激活增强现实影像的车行道的右侧车道线部分。
7.根据权利要求1所述的电子装置的控制方法,其中,决定步骤基于到目的地的路径信息和所述车辆所处的车行道的位置信息来决定所述车行道变更引导是否是必要的,
其中,如果所述车行道变更引导是必要的,则显示步骤显示针对所述车行道变更引导的指示符。
8.根据权利要求7所述的电子装置的控制方法,其中,显示针对所述车行道变更引导的指示符包括:
如果所述车辆需要从当前的车行道向左侧车行道变更车行道,则激活左侧车行道变更引导区域;
如果所述车辆需要从当前的车行道向右侧车行道变更车行道,则激活右侧车行道变更引导区域。
9.根据权利要求1所述的电子装置的控制方法,其中,显示步骤在所述车辆的挡风玻璃上显示所生成的指示符。
10.根据权利要求1所述的电子装置的控制方法,其中,显示步骤显示生成的与增强现实影像有关的指示符,所述增强现实影像基于从所述车辆的摄像头获取的影像而生成。
11.一种电子装置,该电子装置包括:
显示部;
引导相关信息生成部,其被配置为生成用于执行对车辆驾驶进行辅助的驾驶相关引导的信息并且通过使用所生成的信息决定多个驾驶相关引导当中的对车辆驾驶进行辅助的必要引导;
指示符生成部,其被配置为生成针对所决定的必要引导的指示符;以及
控制部,其被配置为控制上述显示部显示所生成的指示符,
其中,所生成的用于执行所述多个驾驶相关引导的信息包括信号灯的信号种类信息、车辆所处的车行道的车道线信息、上述车辆所处的车行道的位置信息、与位于上述车辆的前方的其他车辆之间的距离信息当中的至少一种,
其中,所述多个驾驶相关引导包括车道线脱离引导、防止与前方车辆碰撞的引导、信号灯的信号变更引导和车行道变更引导当中的至少两个。
12.根据权利要求11所述的电子装置,其中,如果所述信号灯的信号种类信息从停止信号变更为直行信号,则所述引导相关信息生成部决定信号引导是必要的,
其中,如果所述信号变更引导是必要的,则所述显示部显示针对所述信号变更引导的指示符。
13.根据权利要求12所述的电子装置,其中,针对所述信号变更引导的指示符包括停止信号区域和直行信号区域,
如果所述信号灯的信号种类信息从所述停止信号变更为所述直行信号,则所述停止信号区域未被激活并且所述直行信号区域被激活。
14.根据权利要求11所述的电子装置,其中,如果与位于上述车辆的前方的其他车辆之间的距离信息比预定距离短,则所述引导相关信息生成部决定防止与前方车辆碰撞的引导是必要的,
其中,如果防止与前方车辆碰撞的引导是必要的,则所述显示部显示针对防止与前方车辆碰撞的引导的指示符。
15.根据权利要求11所述的电子装置,其中,如果所述车辆从所述车辆所处的车行道的两侧处形成的一条车道线脱离,则所述引导相关信息生成部决定所述车道线脱离引导是必要的,
其中,如果所述车道线脱离引导是必要的,则所述显示部显示针对所述车道线脱离引导的指示符。
16.根据权利要求15所述的电子装置,其中,如果所述车辆脱离左侧车道线,则所述显示部通过激活增强现实影像的车行道的左侧车道线部分来显示针对所述车道线脱离引导的指示符,
如果所述车辆脱离右侧车道线,则所述显示部通过激活增强现实影像的车行道的右侧车道线部分来显示针对所述车道线脱离引导的指示符。
17.根据权利要求11所述的电子装置,其中,所述引导相关信息生成部基于到目的地的路径信息和所述车辆所处的车行道的位置信息来决定所述车行道变更引导是否是必要的,
其中,如果所述车行道变更引导是必要的,则所述显示部显示针对所述车行道变更引导的指示符。
18.根据权利要求17所述的电子装置,其中,如果所述车辆需要从当前的车行道向左侧车行道变更车行道,则所述显示部通过激活左侧车行道变更引导区域来显示针对所述车行道变更引导的指示符,并且
如果所述车辆需要从当前的车行道向右侧车行道变更车行道,则所述显示部通过激活右侧车行道变更引导区域来显示针对所述车行道变更引导的指示符。
19.根据权利要求11所述的电子装置,其中,所述显示部在所述车辆的挡风玻璃上显示所生成的指示符。
20.根据权利要求11所述的电子装置,其中,所述显示部显示生成的与增强现实影像有关的指示符,所述增强现实影像基于从所述车辆的摄像头获取的影像而生成。
21.一种计算机可读记录介质,该计算机可读记录介质记录有用于执行电子装置的控制方法的程序代码,所述电子装置的控制方法包括以下步骤:
生成用于执行对车辆驾驶进行辅助的驾驶相关引导的信息;
通过使用所生成的信息决定多个驾驶相关引导当中的对车辆驾驶进行辅助的必要引导;
生成针对所决定的必要引导的指示符;以及
显示所生成的指示符,
其中,所生成的用于执行所述多个驾驶相关引导的信息包括信号灯的信号种类信息、车辆所处的车行道的车道线信息、上述车辆所处的车行道的位置信息、与位于上述车辆的前方的其他车辆之间的距离信息当中的至少一种,
其中,所述多个驾驶相关引导包括车道线脱离引导、防止与前方车辆碰撞的引导、信号灯的信号变更引导和车行道变更引导当中的至少两个。
CN201810826190.0A 2014-06-05 2015-06-05 电子装置、电子装置的控制方法及计算机可读记录介质 Active CN108944454B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR1020140068239A KR20150140449A (ko) 2014-06-05 2014-06-05 전자 장치, 전자 장치의 제어 방법 및 컴퓨터 판독 가능한 기록 매체
KR10-2014-0068239 2014-06-05
CN201510305615.XA CN105185134B (zh) 2014-06-05 2015-06-05 电子装置、电子装置的控制方法及计算机可读记录介质

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201510305615.XA Division CN105185134B (zh) 2014-06-05 2015-06-05 电子装置、电子装置的控制方法及计算机可读记录介质

Publications (2)

Publication Number Publication Date
CN108944454A true CN108944454A (zh) 2018-12-07
CN108944454B CN108944454B (zh) 2022-05-06

Family

ID=54768895

Family Applications (3)

Application Number Title Priority Date Filing Date
CN201810826190.0A Active CN108944454B (zh) 2014-06-05 2015-06-05 电子装置、电子装置的控制方法及计算机可读记录介质
CN201510305615.XA Active CN105185134B (zh) 2014-06-05 2015-06-05 电子装置、电子装置的控制方法及计算机可读记录介质
CN201810825632.XA Active CN108680173B (zh) 2014-06-05 2015-06-05 电子装置、电子装置的控制方法及计算机可读记录介质

Family Applications After (2)

Application Number Title Priority Date Filing Date
CN201510305615.XA Active CN105185134B (zh) 2014-06-05 2015-06-05 电子装置、电子装置的控制方法及计算机可读记录介质
CN201810825632.XA Active CN108680173B (zh) 2014-06-05 2015-06-05 电子装置、电子装置的控制方法及计算机可读记录介质

Country Status (3)

Country Link
US (2) US9676275B2 (zh)
KR (1) KR20150140449A (zh)
CN (3) CN108944454B (zh)

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11242068B2 (en) 2016-05-30 2022-02-08 Lg Electronics Inc. Vehicle display device and vehicle
CN107784864A (zh) * 2016-08-26 2018-03-09 奥迪股份公司 车辆辅助驾驶方法及系统
US20180222473A1 (en) * 2017-02-09 2018-08-09 GM Global Technology Operations LLC Collision avoidance for personal mobility devices
CN109427199B (zh) * 2017-08-24 2022-11-18 北京三星通信技术研究有限公司 用于辅助驾驶的增强现实的方法及装置
CN108132156A (zh) * 2017-12-11 2018-06-08 安徽隽世电子科技有限公司 一种车用hud全功能检测装置的检测方法
CN108204822B (zh) * 2017-12-19 2021-09-24 武汉极目智能技术有限公司 一种基于adas的车辆ar导航系统及方法
CN108646750B (zh) * 2018-06-08 2021-05-07 杭州电子科技大学 基于uwb非基站便捷式工厂agv跟随方法
JP6936907B2 (ja) * 2018-09-27 2021-09-22 本田技研工業株式会社 表示装置、表示制御方法、およびプログラム
JP6744374B2 (ja) 2018-09-27 2020-08-19 本田技研工業株式会社 表示装置、表示制御方法、およびプログラム
CN109300322B (zh) * 2018-10-31 2021-05-04 百度在线网络技术(北京)有限公司 引导线绘制方法、装置、设备和介质
CN109624851B (zh) * 2018-11-23 2022-04-19 深圳市航盛电子股份有限公司 基于增强现实的辅助驾驶方法、系统及可读存储介质
CN109472989A (zh) * 2018-12-05 2019-03-15 斑马网络技术有限公司 交通信号灯的提示方法、装置、设备及可读存储介质
KR102622169B1 (ko) * 2018-12-06 2024-01-08 팅크웨어(주) 주행 영상을 이용하여 차간 거리를 측정하는 차간 거리 측정 방법, 차간 거리 측정 장치, 전자 기기, 컴퓨터 프로그램 및 컴퓨터 판독 가능한 기록 매체
CN111339802B (zh) * 2018-12-19 2024-04-19 长沙智能驾驶研究院有限公司 实时相对地图的生成方法及装置、电子设备和存储介质
DE102019207951B4 (de) * 2019-05-29 2022-06-30 Volkswagen Aktiengesellschaft Verfahren zum Durchführen einer Korrektur der Fahrtrichtung durch ein Fahrerassistenzsystem in einem Kraftfahrzeug sowie eine Steuervorrichtung hierzu
CN110274610B (zh) * 2019-06-18 2021-04-06 北京百度网讯科技有限公司 一种导航线的检测方法、装置、电子设备及存储介质
JP7222343B2 (ja) * 2019-11-28 2023-02-15 トヨタ自動車株式会社 運転支援装置
JP2022124652A (ja) * 2021-02-16 2022-08-26 本田技研工業株式会社 地図生成装置および車両制御装置

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1637385A (zh) * 2003-12-24 2005-07-13 爱信艾达株式会社 导航装置和导航系统
US20060220904A1 (en) * 2003-03-31 2006-10-05 Volvo Lastvagnar Ab Apparatus and method for alerting a driver when a vehicle departs from a predefined driving area in a lane
CN101553709A (zh) * 2006-12-11 2009-10-07 三菱电机株式会社 导航装置
US20110052042A1 (en) * 2009-08-26 2011-03-03 Ben Tzvi Jacob Projecting location based elements over a heads up display
US20130013200A1 (en) * 2011-07-07 2013-01-10 Aisin Aw Co., Ltd. Travel guidance system, travel guidance apparatus, travel guidance method, and computer program
CN103105174A (zh) * 2013-01-29 2013-05-15 四川长虹佳华信息产品有限责任公司 一种基于ar增强现实技术的车载实景安全导航方法
CN103245342A (zh) * 2012-02-06 2013-08-14 北京四维图新科技股份有限公司 导航实现方法及装置
CN103292816A (zh) * 2012-02-23 2013-09-11 北京四维图新科技股份有限公司 电子地图生成方法、装置及路径规划方法、装置
CN103471580A (zh) * 2012-06-06 2013-12-25 三星电子株式会社 用于提供导航信息的方法、移动终端和服务器

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1469285B1 (en) 2003-04-15 2007-09-26 Harman/Becker Automotive Systems GmbH Data base system for navigation device
JP2009154647A (ja) * 2007-12-26 2009-07-16 Aisin Aw Co Ltd マルチ画面表示装置及びそのプログラム
KR20090073666A (ko) * 2007-12-31 2009-07-03 팅크웨어(주) 메신저로 위치 정보를 교환하는 내비게이션 시스템 및 방법
JP4985516B2 (ja) * 2008-03-27 2012-07-25 ソニー株式会社 情報処理装置、および情報処理方法、並びにコンピュータ・プログラム
US20110099507A1 (en) * 2009-10-28 2011-04-28 Google Inc. Displaying a collection of interactive elements that trigger actions directed to an item
JP2011128005A (ja) * 2009-12-17 2011-06-30 Fujitsu Ten Ltd ナビゲーション装置、車載表示システム及び地図表示方法
JP5728159B2 (ja) * 2010-02-02 2015-06-03 ソニー株式会社 画像処理装置、画像処理方法及びプログラム
JP4990421B2 (ja) * 2010-03-16 2012-08-01 三菱電機株式会社 路車協調型安全運転支援装置
KR101170882B1 (ko) 2010-08-12 2012-08-03 팅크웨어(주) 관심지점 표시장치 및 방법
KR20120113579A (ko) * 2011-04-05 2012-10-15 현대자동차주식회사 길안내 정보의 윈드쉴드 표시 장치 및 그 방법
JP2013015788A (ja) 2011-07-06 2013-01-24 Sony Corp 表示制御装置、表示制御方法およびプログラム
JP5921320B2 (ja) * 2012-04-27 2016-05-24 富士通テン株式会社 表示システム、携帯装置、車載装置、及び、プログラム
KR20140043948A (ko) * 2012-08-30 2014-04-14 현대엠엔소프트 주식회사 내비게이션 장치 및 화면 표시 방법

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060220904A1 (en) * 2003-03-31 2006-10-05 Volvo Lastvagnar Ab Apparatus and method for alerting a driver when a vehicle departs from a predefined driving area in a lane
CN1637385A (zh) * 2003-12-24 2005-07-13 爱信艾达株式会社 导航装置和导航系统
CN101553709A (zh) * 2006-12-11 2009-10-07 三菱电机株式会社 导航装置
US20110052042A1 (en) * 2009-08-26 2011-03-03 Ben Tzvi Jacob Projecting location based elements over a heads up display
US20130013200A1 (en) * 2011-07-07 2013-01-10 Aisin Aw Co., Ltd. Travel guidance system, travel guidance apparatus, travel guidance method, and computer program
CN103245342A (zh) * 2012-02-06 2013-08-14 北京四维图新科技股份有限公司 导航实现方法及装置
CN103292816A (zh) * 2012-02-23 2013-09-11 北京四维图新科技股份有限公司 电子地图生成方法、装置及路径规划方法、装置
CN103471580A (zh) * 2012-06-06 2013-12-25 三星电子株式会社 用于提供导航信息的方法、移动终端和服务器
CN103105174A (zh) * 2013-01-29 2013-05-15 四川长虹佳华信息产品有限责任公司 一种基于ar增强现实技术的车载实景安全导航方法

Also Published As

Publication number Publication date
CN108944454B (zh) 2022-05-06
CN108680173A (zh) 2018-10-19
KR20150140449A (ko) 2015-12-16
CN108680173B (zh) 2022-07-22
US9676275B2 (en) 2017-06-13
US20150352954A1 (en) 2015-12-10
US9987926B2 (en) 2018-06-05
US20170259667A1 (en) 2017-09-14
CN105185134B (zh) 2018-08-17
CN105185134A (zh) 2015-12-23

Similar Documents

Publication Publication Date Title
CN105185134B (zh) 电子装置、电子装置的控制方法及计算机可读记录介质
CN105300401B (zh) 电子装置及其控制方法
CN105654030B (zh) 电子装置、电子装置的控制方法、计算机程序及计算机可读记录介质
CN110091798A (zh) 电子装置、电子装置的控制方法以及计算机可读存储介质
CN103237685B (zh) 盲区显示装置及方法
US11030816B2 (en) Electronic apparatus, control method thereof, computer program, and computer-readable recording medium
US20070009137A1 (en) Image generation apparatus, image generation method and image generation program
CN110979318B (zh) 车道信息获取方法、装置、自动驾驶车辆及存储介质
CN108470162A (zh) 电子装置及其控制方法
CN108140311A (zh) 停车辅助信息的显示方法及停车辅助装置
CN105651299B (zh) 电子装置、电子装置的控制方法
CN108335507A (zh) 利用摄像头的拍摄影像的驾驶引导提供方法及装置
CN105651298B (zh) 电子装置、电子装置的控制方法
CN107356916A (zh) 车距检测方法及装置、电子设备、计算机可读存储介质
KR102299501B1 (ko) 전자 장치, 전자 장치의 제어 방법 및 컴퓨터 판독 가능한 기록 매체
JP2008040667A (ja) 画像処理装置およびプログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20210819

Address after: Seoul, South Kerean

Applicant after: Hyundai Motor Co.,Ltd.

Applicant after: Kia Co.,Ltd.

Address before: Gyeonggi Do, South Korea

Applicant before: THINKWARE SYSTEMS Corp.

TA01 Transfer of patent application right
GR01 Patent grant
GR01 Patent grant