CN109151204B - 一种基于移动终端的导航方法、装置及移动终端 - Google Patents
一种基于移动终端的导航方法、装置及移动终端 Download PDFInfo
- Publication number
- CN109151204B CN109151204B CN201811014255.8A CN201811014255A CN109151204B CN 109151204 B CN109151204 B CN 109151204B CN 201811014255 A CN201811014255 A CN 201811014255A CN 109151204 B CN109151204 B CN 109151204B
- Authority
- CN
- China
- Prior art keywords
- vehicle
- distance
- navigation
- image information
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
- H04M1/724—User interfaces specially adapted for cordless or mobile telephones
- H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
- H04M1/72406—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by software upgrading or downloading
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3602—Input other than that of destination using image analysis, e.g. detection of road signs, lanes, buildings, real preceding vehicles using a camera
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3605—Destination input or retrieval
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3667—Display of a road map
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
- G08B21/18—Status alarms
- G08B21/24—Reminder alarms, e.g. anti-loss alarms
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
- H04M1/724—User interfaces specially adapted for cordless or mobile telephones
- H04M1/72448—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
- H04M1/72454—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to context-related or environment-related conditions
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
- H04M1/724—User interfaces specially adapted for cordless or mobile telephones
- H04M1/72448—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
- H04M1/72457—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to geographic location
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
- H04W4/02—Services making use of location information
- H04W4/024—Guidance services
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
- H04W4/30—Services specially adapted for particular environments, situations or purposes
- H04W4/40—Services specially adapted for particular environments, situations or purposes for vehicles, e.g. vehicle-to-pedestrians [V2P]
- H04W4/48—Services specially adapted for particular environments, situations or purposes for vehicles, e.g. vehicle-to-pedestrians [V2P] for in-vehicle communication
Landscapes
- Engineering & Computer Science (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Automation & Control Theory (AREA)
- Human Computer Interaction (AREA)
- Environmental & Geological Engineering (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Emergency Management (AREA)
- Business, Economics & Management (AREA)
- Navigation (AREA)
- Traffic Control Systems (AREA)
Abstract
本申请公开了一种基于移动终端的导航方法、装置、移动终端及计算机可读存储介质,其中,该导航方法包括:获取所述移动终端的当前位置与导航目的地之间的第一距离;若所述第一距离小于第一预定距离,则启动所述移动终端的前置摄像头和后置摄像头,通过所述前置摄像头采集车辆驾驶员的图像信息,通过所述后置摄像头采集车辆前方的图像信息;对采集的车辆驾驶员的图像信息和/或车辆前方的图像信息进行分析得到分析结果;基于所述分析结果进行导航提示。本申请方案解决了现有的导航方法容易错过地点并且容易造成交通事故问题。
Description
技术领域
本申请属于导航技术领域,尤其涉及一种基于移动终端的导航方法、装置、移动终端及计算机可读存储介质。
背景技术
人们开车时导航去的一些目的地,在人群密集或者窄小的小路里,虽然GPS判断到达了目的地附近,但是仍然需要用户仔细再寻找目的地的位置。这时就需要用户一边开车,一边自己仔细寻找该地点。在这种情况下,驾驶者在开车过程中既要注意开车又要找地方,容易错过地点,也容易造成交通事故。
发明内容
有鉴于此,本申请提供了一种基于移动终端的导航方法、装置、移动终端及计算机可读存储介质,解决了现有的导航方法容易错过地点并且容易造成交通事故问题。
本申请的第一方面提供了一种基于移动终端的导航方法,包括:
获取所述移动终端的当前位置与导航目的地之间的第一距离;
若所述第一距离小于第一预定距离,则启动所述移动终端的前置摄像头和后置摄像头,通过所述前置摄像头采集车辆驾驶员的图像信息,通过所述后置摄像头采集车辆前方的图像信息;
对采集的车辆驾驶员的图像信息和/或车辆前方的图像信息进行分析得到分析结果;
基于所述分析结果进行导航提示。
本申请的第二方面提供了一种基于移动终端的导航装置,包括:
第一距离获取单元,用于获取当前位置与导航目的地之间的第一距离;
采集单元,用于若所述第一距离小于第一预定距离,则启动所述移动终端的前置摄像头和后置摄像头,通过所述前置摄像头采集车辆驾驶员的图像信息,通过所述后置摄像头采集车辆前方的图像信息;
分析单元,用于对采集的车辆驾驶员的图像信息和/或车辆前方的图像信息进行分析得到分析结果;
提示单元,用于基于所述分析结果进行导航提示。
本申请的第三方面提供了一种移动终端,上述移动终端包括存储器、处理器以及存储在上述存储器中并可在上述处理器上运行的计算机程序,上述处理器执行上述计算机程序时实现如上第一方面的方法的步骤。
本申请的第四方面提供了一种计算机可读存储介质,上述计算机可读存储介质存储有计算机程序,上述计算机程序被处理器执行时实现如上第一方面的方法的步骤。
本申请的第五方面提供了一种计算机程序产品,上述计算机程序产品包括计算机程序,上述计算机程序被一个或多个处理器执行时实现如上述第一方面的方法的步骤。
由上可见,本申请方案中,导航到目的地附近时,通过所述前置摄像头采集车辆驾驶员的图像信息,通过所述后置摄像头采集车辆前方的图像信息;对采集的车辆驾驶员的图像信息和/或车辆前方的图像信息进行分析得到分析结果;基于所述分析结果进行导航提示,从而可以帮助用户在复杂的环境中精确定位到终点目的地,并且能够提醒用户避免发生交通事故。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的基于移动终端的导航方法的一种实现流程示意图;
图2是本申请实施例提供的基于移动终端的导航方法的另一实现流程示意图;
图3是本申请实施例提供的基于移动终端的导航方法的另一实现流程示意图;
图4是本申请实施例提供的基于移动终端的导航方法的另一实现流程示意图;
图5是本申请实施例提供的基于移动终端的导航装置的结构框图;
图6是本申请实施例提供的移动终端的示意图。
具体实施方式
以下描述中,为了说明而不是为了限定,提出了诸如特定系统结构、技术之类的具体细节,以便透彻理解本申请实施例。然而,本领域的技术人员应当清楚,在没有这些具体细节的其它实施例中也可以实现本申请。在其它情况中,省略对众所周知的系统、装置、电路以及方法的详细说明,以免不必要的细节妨碍本申请的描述。
为了说明本申请上述的技术方案,下面通过具体实施例来进行说明。
实施例一
下面对本申请实施例提供的一种基于移动终端的方法进行描述,所述移动终端例如可以是手机、平板电脑等具备前置摄像头和后置摄像头且具有导航功能的终端设备,请参阅图1,本申请实施例中的方法包括:
在步骤101中,获取所述移动终端的当前位置与导航目的地之间的第一距离。
在本申请实施例中,用户在使用移动终端进行导航时,可以打开导航应用,并在导航应用界面中输入导航目的地,在使用移动终端进行导航的过程中,实时获取移动终端的当前位置,例如通过GPS定位方式获取移动终端的当前位置,并将该位置输入到终端的导航应用中,导航应用基于获取的移动终端的当前位置以及导航目的地,计算出当前位置与导航目的地之间的第一距离。当行驶到当前位置与导航目的地之间的距离小于第一预定距离时,表明用户当前位置在导航目的地附近。该第一预定距离默认为500m,当然用户也可以根据实际的需要对第一预定距离进行修改,例如将第一预定距离修改为0~1km之间任意的距离。
所述第一距离可以是直线距离,或者也可以是行驶距离。当所述第一距离为直线距离时,具体是指,移动终端的当前位置与导航目的地两点之间的直线长度。当所述第一距离为行驶距离时,具体是指,从移动终端的当前位置行驶到导航目的地的路程。具体采用直线距离还是行驶距离作为第一距离,可以根据导航目的地附近的地势来确定。例如,若导航目的地附近地势平坦,则以直线距离作为第一距离,若导航目的地附近地势陡峭,则以行驶距离作为第一距离。本实施根据导航目的地的地势情况选择不同的第一距离计算方法,可以提升导航的精确性。
在步骤S102中,若所述第一距离小于第一预定距离,则启动所述移动终端的前置摄像头和后置摄像头,通过所述前置摄像头采集车辆驾驶员的图像信息,通过所述后置摄像头采集车辆前方的图像信息。
在本申请实施例中,当所述第一距离小于第一预定距离时,表明用户当前处于导航目的地的附近。此时移动终端启动前置摄像头和后置摄像头,所述前置摄像头和后置摄像头可以同时启动,也可以先启动前置摄像头,然后经过预定时间之后启动后置摄像头;或者也可以先启动后置摄像头,然后在经过预定时间之后启动前置摄像头。通过所述前置摄像头采集车辆驾驶员的图像信息,通过所述后置摄像头采集车辆前方的图像信息。由于在导航过程中,移动终端的屏幕显示的是导航界面,优选地,在启动前置摄像头和后置摄像头之后,仅通过前置摄像头和后置摄像头进行图像信息采集,而不在移动终端的界面上显示前置摄像头和/或后置摄像头的取景界面。从而可以减少图形处理单元GPU的工作负荷,减少移动终端的电量消耗。
在步骤103中,对采集的车辆驾驶员的图像信息和/或车辆前方的图像信息进行分析得到分析结果;
在步骤104中,基于所述分析结果进行导航提示。
在本实施例中,在本实施例中,用户从开始导航到第一距离小于第一预定距离之前通过GPS进行导航定位,虽然GPS导航定位存在一定的定位误差,但是由于驾驶过程中车辆是沿着道路高速行驶,因此GPS导航定位误差对导航的影响不大,而到用户驾驶到导航目的地附近时,GPS导航定位由于存在定位误差,存在GPS确定的当前位置与用户实际所处的当前位置不符,甚至存在GPS定位出当前位置与导航目的地重合,导致导航结束。从而给用户造成困扰。在本实施例中,当确定用户已经导到目的地附近时,采用前置摄像头和后置摄像头进行图像采集,并基于对采集的图像的分析结果来对用户进行导航提示。
所述车辆驾驶员的图像信息至少包括车辆驾驶员的眼部特征,优选地,还可以包括车辆驾驶员的手部特征,对该车辆驾驶员的图像信息进行分析,例如可以分析车辆驾驶员的驾驶姿态,比如车辆驾驶员是否通过单手控制方向盘,若通过对车辆驾驶员的图像信息分析的结果为车辆驾驶员当前通过单手控制方向盘,则基于该分析结果向驾驶员发出提示,以提示车辆驾驶员使用双手控制方向盘。或者对该车辆驾驶员的图像信息进行分析,还可以是分析所述驾驶员的视线方向,若车辆驾驶员的视线方向偏离行车方向超过一定幅度,则向车辆驾驶员发出提示,以提示驾驶员注意行车安全。
其中车辆前方的图像信息是指车辆前进方向上的正前方的图像,通过对车辆前方的图像信息进行分析,例如,从车辆前方的图像信息中识别出包含导航目的地的信息,可以向用户发出导航提示,以提示用户按照识别出的方向进行形式。
在本申请实施例中,当用户驾驶到导航目的地附近时,实时通过前置摄像头和后置摄像头采集图像,通过对前置摄像头和后置摄像头采集的图像进行分析,基于分析结果对用户进行导航,可以帮助用户在复杂的环境中精确定位到终点目的地,并且能够提醒用户避免发生交通事故。
优选地,当第一距离小于第一预定距离,即用户已经到达导航目的地附近时,此时不再进行第一距离的计算。
应理解,上述实施例中各步骤的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本申请实施例的实施过程构成任何限定。
实施例二
在上述实施例一的基础上,下面对本申请实施例提供的另一种基于移动终端的方法进行描述,请参阅图2,本申请实施例中的通过所述前置摄像头采集车辆驾驶员的图像信息,通过所述后置摄像头采集车辆前方的图像信息包括:
在步骤S201中,获取车辆当前的车速信息。
在步骤S202中,基于所述车速信息,确定所述前置摄像头的第一采集帧率和所述后置摄像头的第二采集帧率,根据所述前置摄像头的第一采集帧率采集车辆驾驶员的图像信息,根据所述后置摄像头的第二采集帧率采集车辆前方的图像信息。
在本申请实施例中,用于导航的移动终端可以与车载系统通信连接,获取车载系统中的记录的车辆当前的行车速度。当用户驾驶到导航目的地附近时,由于导航目的地周围的环境复杂,用户需要放慢行车速度来寻找导航目的地的具体位置,此时,移动终端实时获取当前的车速信息,根据车速动态的改变前置摄像头的第一采集帧率和所述后置摄像的第二采集帧率。例如,当行车速度较快时,由于车辆前方的图像变化较快,并且用户不安全驾驶行为更容易导致交通是故,因此当行车速度较快时,相应地提高前置摄像头的第一采集帧率和后置摄像头的第二采集帧率,从而能够通过前置摄像头采集的车辆驾驶员的图像信息更精确地发现用户驾驶时的危险行为,例如单手控制方向盘,甚至双手都离开方向盘,而且通过后置摄像头采集的车辆前方的图像信息更准确地识别出导航目的地,防止由于车辆驾驶速度过快导致的后置摄像头未采集到导航目的地的问题。当检测到当前车速为0km/h,则暂停前置摄像头和后置摄像头的图像采集,从而可以降低移动终端的功耗。
优选地,上述方法还包括:
分别获取前置摄像头和/或后置摄像头连续两帧图像;
若所述连续两帧图像之间的差异值小于预定值且当前的车速不为0时,重启所述前置摄像头和/或后置摄像头。
在本实施例中,若前置摄像头和/或后置摄像头中有一个摄像头连续采集的两帧图像的差异值小于预定值,即当前采集的图像为静止画面,此时若检测到当前车辆仍然在行驶,则表明前置摄像头和/或后置摄像头中至少处于非正常工作状态,由于摄像头的非正常工作状态,后续基于对图像的分析结果对用户发出提示可能并不准确,有可能导致用户行驶超过导航目的地,甚至可能由于无法及时发现用户的危险驾驶行为而导致交通事故,因此,当车辆保持行驶状态时,如果检测到连续两帧画面保持不变时,重启前置摄像头和/或后置摄像头,重启后的前置摄像头和/或后置摄像头继续采集车辆驾驶员的图像信息和/或车辆前方的图像信息。从而进一步提高本申请导航方法的安全性。
应理解,上述实施例中各步骤的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本申请实施例的实施过程构成任何限定。
实施例三
在上述实施例一的基础上,下面对本申请实施例提供的另一种基于移动终端的方法进行描述,请参阅图3,对采集的车辆前方的图像信息进行分析得到分析结果包括:
在步骤301中,识别所述车辆前方的图像信息中是否包含导航目的地信息。
在步骤302中,若所述车辆前方的图像信息中包含导航目的地信息,则计算得到第二距离,并将所述第二距离作为所述分析结果,其中,所述第二距离为基于所述车辆前方的图像信息的深度计算得到的所述导航目的地与所述移动终端当前所在位置之间的距离。
在本申请实施例中,所述导航目的地信息,例如可以是用户在开始导航时输入的导航目的地的文字信息,比如“全家便利店”,当用户驾驶到导航目的地附近时,实时分析车辆前方的图像中是否包含“全家便利店”的文字信息,当基于图像分析结果得到当前车辆前方的图像中包含“全家便利店”的文字信息,即可以确定导航目的地就在车辆的前方。
可选地,所述导航目的地信息还可以是基于用户输入的导航目的地的文字信息通过网络搜索到的导航目的地的街景图像。通过将搜索到的导航目的地的街景图像与车辆前方的图像信息进行匹配,从而判断当前采集的车辆前方的图像信息中是否包含导航目的地的街景图像,当基于图像分析结果得到当前车辆前方的图像中包含导航目的地的街景图像,即可以确定导航目的地就在车辆的前方。
在本申请实施例中,所述后置摄像头例如可以是3D摄像头,例如通过结构光技术、双摄像头、TOF摄像头来获取3D图像。通过该3D摄像头获取的车辆前方的图像信息,在车辆前方的图像信息中包含导航目的地信息时,基于对车辆前方的图像信息的深度计算得到的上述导航目的地与上述移动终端当前所在位置之间的距离,将该距离作为分析结果返回给用户,从而提示用户导航目的地距离用户的距离,以便用户能够通过肉眼确认导航目的地的方位。
可选地,本实施例还可以基于所述车辆前方的图像信息计算所述导航目的地相对于所述当前位置的方向信息。该方向信息例如可以是所述导航目的地位于移动终端当前位置的左前方、正前方或者右前方。可以通过所述导航目的地在车辆前方的图像中所在的位置以及所述导航目的地与当前行驶方向之间的垂直距离来确定。通常车辆通行道路的宽度为15~30米,若所述导航目的地与当前行驶方向之间的垂直距离小于30米,则可以推断所述导航目的地所在的道路与当前行驶的道路属于同一条道路,若所述导航目的地与当前行驶方向之间的垂直距离大于30米,则可以推断所述导航目的地所在的道路与当前行驶的道路属于不同的道路,然后结合所述导航目的地在车辆前方的图像中所在位置,从而可以确定导航目的地相对于移动终端当前位置的方向。比如,若所述导航目的地与当前行驶方向之间的垂直距离大于30米,且所述导航目的地处于车辆前方的图像中的左侧,则确定所述方向信息为左前方;若所述导航目的地与当前行驶方向之间的垂直距离大于30米,且所述导航目的地处于车辆前方的图像中的右侧,则确定所述方向信息为右前方;若所述导航目的地与当前行驶方向之间的垂直距离小于30米,且不论所述导航目的地处于车辆前方的图像中具体位置在何处,都确定所述方向信息为正前方。
可选地,通过语音的方式播放所述第二距离以及所述方向信息和/或在显示屏上显示所述第二距离以及所述方向信息。若所述方向信息为左前方,则提醒驾驶员行驶到导航目的地时可能需要向左转向;若所述方向信息为右前方,则提醒驾驶员行驶到导航目的地时可能需要向右转向;若所述方向信息为正前方,则提醒驾驶员保持直行。
可选地,当所述第二距离小于第二预定距离时,结束导航。
在本实施例中,若第二距离小于第二预定距离,表明用户当前距离导航目的地的距离已经非常接近,不需要再依赖图像分析的方式来进行导航,因此可以触发结束导航,所述第二预定距离例如可以是50m,优选为30m~100m之间的任意距离,在此不对第二预定距离的大小进行限定。
本实施例识别所述车辆前方的图像信息中是否包含导航目的地信息;若所述车辆前方的图像信息中包含导航目的地信息,则计算得到第二距离,并将所述第二距离作为所述分析结果,其中,所述第二距离为基于所述车辆前方的图像信息的深度计算得到的所述导航目的地与所述移动终端当前所在位置之间的距离。在用户行驶到导航目的地附近时使用图像分析的导航方式来替代GPS的导航方式,克服了GPS导航存在较大误差问题,并且在通过图像分析导航至距离导航目的地的距离小于第二预定距离时结束导航,相比现有技术中通过GPS定位来结束导航更加准确,避免了通过GPS导航时,用户实际上并未到达导航目的地附近就已经结束导航的问题。
实施例四
在上述实施例三的基础上,下面对本申请实施例提供的另一种基于移动终端的方法进行描述,请参阅图4所述对采集的车辆驾驶员的图像信息进行分析得到分析结果包括:
在步骤S401中,对采集的车辆驾驶员的图像信息进行人脸检测得到当前人脸模型;
在本申请实施例中,通过前置摄像头采集车辆驾驶员的图像信息,所述车辆驾驶员的图像至少包括了驾驶员的脸部区域。该前置摄像头为3D摄像头,例如通过结构光技术、双摄像头、TOF摄像头来获取3D图像,当3D摄像头是前置双摄像头时,双摄像头分别从不同的角度捕捉包含车辆驾驶员人脸的图像,根据捕捉到的图像的差别进行深度数据计算,得到人脸3D模型。
在步骤S402中,根据所述当前人脸模型确定两眼瞳孔中心当前位置;
在步骤S403中,根据所述两眼瞳孔中心当前位置计算两眼视线注视点当前位置;
在步骤S404中,对所述两眼视线注视点当前位置进行融合得到所述驾驶员的视线信息;
在本申请实施例中,瞳孔是位于眼球的虹膜中心的小圆孔,瞳孔的颜色与人眼其他部分颜色不同,因此,确定出两眼所在当前区域后可通过图像识别方法进一步的定位两眼瞳孔所在位置,进而确定出两眼瞳孔中心当前位置,包括左眼瞳孔中心当前位置和右眼瞳孔中心当前位置。其中,两眼瞳孔中心当前位置计算两眼视线注视点当前位置以及对所述两眼视线注视点当前位置进行融合得到所述驾驶员的视线信息可参考现有技术,此处不作赘述。
在步骤S405中,判断所述视线信息是否满足预设条件,将所述判断结果作为所述分析结果。
在本申请实施例中,将车辆驾驶员的视线信息与预定条件进行比对,当所述实现信息满足预设条件时,向驾驶员发出提醒。所述预设条件例如可以是视线与行车方向之间的夹角大于预定的角度值,且超过预定的时间阈值,也就是说驾驶员的视线较长时间偏离了行驶方向,此时可以向驾驶员发出提醒,从而提醒驾驶员注视前方,若驾驶员的视线信息不满足预设条件时,表明驾驶员当前的视线没有严重偏移行驶方向,或者仅仅是短时间的偏离行驶方向,因此可以保持当前的行驶状态而无需向驾驶员发出提醒。
本实施例通过3D前置摄像头采集车辆驾驶员的图像,通过3D人脸图像分析得到驾驶员的视线信息,基于对视线分析来判断用户当前视线是否偏离行车方向,当发生视线偏离且超过预定时间时向驾驶员发出提醒,从而提高导航的安全性。
实施例五
本申请实施例五提供了一种基于移动终端的导航装置,如图5所示,本申请实施例中的导航装置500包括:
第一距离获取单元501,用于获取当前位置与导航目的地之间的第一距离;
采集单元502,用于若所述第一距离小于第一预定距离,则启动所述移动终端的前置摄像头和后置摄像头,通过所述前置摄像头采集车辆驾驶员的图像信息,通过所述后置摄像头采集车辆前方的图像信息;
分析单元503,用于对采集的车辆驾驶员的图像信息和/或车辆前方的图像信息进行分析得到分析结果;
提示单元504,用于基于所述分析结果进行导航提示。
可选地,所述采集单元包括:
车速获取子单元,用于获取车辆当前的车速信息;
帧率调整子单元,用于基于所述车速信息,确定所述前置摄像头的第一采集帧率和所述后置摄像头的第二采集帧率,根据所述前置摄像头的第一采集帧率采集车辆驾驶员的图像信息,根据所述后置摄像头的第二采集帧率采集车辆前方的图像信息。
可选地,所述分析单元包括:
图像识别子单元,用于识别所述车辆前方的图像信息中是否包含导航目的地信息;
距离计算子单元,用于若所述车辆前方的图像信息中包含导航目的地信息,则计算得到第二距离,并将所述第二距离作为所述分析结果,其中,所述第二距离为基于所述车辆前方的图像信息的深度计算得到的所述导航目的地与所述移动终端当前所在位置之间的距离。
可选地,所述提示单元通过语音的方式播放所述第二距离和/或在显示屏上显示所述第二距离。
可选地,所述分析单元对采集的车辆驾驶员的图像信息进行分析得到分析结果包括:
对采集的车辆驾驶员的图像信息进行人脸检测得到当前人脸模型;
根据所述当前人脸模型确定两眼瞳孔中心当前位置;
根据所述两眼瞳孔中心当前位置计算两眼视线注视点当前位置;
对所述两眼视线注视点当前位置进行融合得到所述驾驶员的视线信息;
判断所述视线信息是否满足预设条件,将所述判断结果作为所述分析结果。
可选的,所述基于所述分析结果进行导航提示包括:
若所述视线信息满足预设条件,则向驾驶员发出提醒;
若所述视线信息不满足预设条件,则不发出提醒。
由上述可见,在本申请实施例中,当用户驾驶到导航目的地附近时,实时通过前置摄像头和后置摄像头采集图像,通过对前置摄像头和后置摄像头采集的图像进行分析,基于分析结果对用户进行导航,可以帮助用户在复杂的环境中精确定位到终点目的地,并且能够提醒用户避免发生交通事故。
实施例六
本申请实施例六提供了一种移动终端,本申请实施例中的移动终端包括:存储器,一个或多个处理器及存储在存储器上并可在处理器上运行的计算机程序。其中:存储器用于存储软件程序以及模块,处理器通过运行存储在存储器的软件程序以及单元,从而执行各种功能应用以及数据处理,以获取上述预设事件对应的资源。具体地,处理器通过运行存储在存储器的上述计算机程序时实现以下步骤:
获取所述移动终端的当前位置与导航目的地之间的第一距离;
若所述第一距离小于第一预定距离,则启动所述移动终端的前置摄像头和后置摄像头,通过所述前置摄像头采集车辆驾驶员的图像信息,通过所述后置摄像头采集车辆前方的图像信息;
对采集的车辆驾驶员的图像信息和/或车辆前方的图像信息进行分析得到分析结果;
基于所述分析结果进行导航提示。
本申请实施例提供一种移动终端,请参阅图6,本申请实施例中的移动终端包括:处理器601,输入设备602,输出设备603,天线604,前、后置摄像头605等。处理器包括导航模块,定位模块,图像识别模块,输入输出处理等。输出设备包括显示,语音,震动等。天线,用于定位和信号传输。前、后摄像头,用于获取图像,然后将图像传输到处理器601。
应当理解,在本申请实施例中,所称处理器601可以是中央处理单元(CentralProcessing Unit,CPU),该处理器还可以是其他通用处理器、数字信号处理器(DigitalSignal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现成可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
输入设备602可以包括触摸屏、按键、手势、键盘、触控板、指纹采传感器(用于采集用户的指纹信息和指纹的方向信息)、麦克风等,输出设备503可以包括显示器、扬声器等。
存储器可以包括只读存储器和随机存取存储器,并向处理器提供指令和数据。存储器的一部分或全部还可以包括非易失性随机存取存储器。例如,存储器还可以存储设备类型的信息。
由上可见,在本申请实施例中,由上述可见,在本申请实施例中,当用户驾驶到导航目的地附近时,实时通过前置摄像头和后置摄像头采集图像,通过对前置摄像头和后置摄像头采集的图像进行分析,基于分析结果对用户进行导航,可以帮助用户在复杂的环境中精确定位到终点目的地,并且能够提醒用户避免发生交通事故。
所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,仅以上述各功能单元、模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能单元、模块完成,即将上述装置的内部结构划分成不同的功能单元或模块,以完成以上描述的全部或者部分功能。实施例中的各功能单元、模块可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中,上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。另外,各功能单元、模块的具体名称也只是为了便于相互区分,并不用于限制本申请的保护范围。上述系统中单元、模块的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述或记载的部分,可以参见其它实施例的相关描述。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者外部设备软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
在本申请所提供的实施例中,应该理解到,所揭露的装置和方法,可以通过其它的方式实现。例如,以上所描述的系统实施例仅仅是示意性的,例如,上述模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通讯连接可以是通过一些接口,装置或单元的间接耦合或通讯连接,可以是电性,机械或其它的形式。
上述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
上述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读存储介质中。基于这样的理解,本申请实现上述实施例方法中的全部或部分流程,也可以通过计算机程序来指令相关的硬件来完成,上述的计算机程序可存储于一计算机可读存储介质中,该计算机程序在被处理器执行时,可实现上述各个方法实施例的步骤。其中,上述计算机程序包括计算机程序代码,上述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。上述计算机可读存储介质可以包括:能够携带上述计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机可读存储器、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、电载波信号、电信信号以及软件分发介质等。需要说明的是,上述计算机可读存储介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减,例如在某些司法管辖区,根据立法和专利实践,计算机可读存储介质不包括是电载波信号和电信信号。
以上上述实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围,均应包含在本申请的保护范围之内。
Claims (10)
1.一种基于移动终端的导航方法,其特征在于,所述方法包括:
获取所述移动终端的当前位置与导航目的地之间的第一距离,其中,所述第一距离根据所述导航目的地附近的地势来确定为直线距离或行驶距离;
若所述第一距离小于第一预定距离,则启动所述移动终端的前置摄像头和后置摄像头,通过所述前置摄像头采集车辆驾驶员的图像信息,通过所述后置摄像头采集车辆前方的图像信息,所述后置摄像头为3D摄像头;
对采集的车辆驾驶员的图像信息和/或车辆前方的图像信息进行分析得到分析结果,其具体包括:识别所述车辆前方的图像信息中是否包含导航目的地信息,若所述车辆前方的图像信息中包含导航目的地信息,则计算得到第二距离,并将所述第二距离作为所述分析结果,其中,所述第二距离为基于所述车辆前方的图像信息的深度计算得到的所述导航目的地与所述移动终端当前所在位置之间的距离;
基于所述分析结果进行导航提示。
2.如权利要求1所述的导航方法,其特征在于,所述通过所述前置摄像头采集车辆驾驶员的图像信息,通过所述后置摄像头采集车辆前方的图像信息包括:
获取车辆当前的车速信息;
基于所述车速信息,确定所述前置摄像头的第一采集帧率和所述后置摄像头的第二采集帧率,根据所述前置摄像头的第一采集帧率采集车辆驾驶员的图像信息,根据所述后置摄像头的第二采集帧率采集车辆前方的图像信息。
3.如权利要求1所述的导航方法,其特征在于,
若所述车辆前方的图像信息中包含导航目的地信息,还包括:基于所述车辆前方的图像信息计算所述导航目的地相对于所述当前位置的方向信息。
4.如权利要求1所述的导航方法,其特征在于,所述基于所述分析结果进行导航提示包括:
通过语音的方式播放所述第二距离以及所述方向信息和/或在显示屏上显示所述第二距离以及所述方向信息。
5.如权利要求1所述的导航方法,其特征在于,还包括:
当所述第二距离小于第二预定距离时,结束导航。
6.如权利要求1至5任一项所述的导航方法,其特征在于,所述对采集的车辆驾驶员的图像信息进行分析得到分析结果包括:
对采集的车辆驾驶员的图像信息进行人脸检测得到当前人脸模型;
根据所述当前人脸模型确定两眼瞳孔中心当前位置;
根据所述两眼瞳孔中心当前位置计算两眼视线注视点当前位置;
对所述两眼视线注视点当前位置进行融合得到所述驾驶员的视线信息;
判断所述视线信息是否满足预设条件,将所述判断结果作为所述分析结果。
7.如权利要求6所述的导航方法,其特征在于,所述基于所述分析结果进行导航提示包括:
若所述视线信息满足预设条件,则向驾驶员发出提醒;
若所述视线信息不满足预设条件,则不发出提醒。
8.一种基于移动终端的导航装置,其特征在于,
第一距离获取单元,用于获取当前位置与导航目的地之间的第一距离,其中,所述第一距离根据所述导航目的地附近的地势来确定为直线距离或行驶距离;
采集单元,用于若所述第一距离小于第一预定距离,则启动所述移动终端的前置摄像头和后置摄像头,通过所述前置摄像头采集车辆驾驶员的图像信息,通过所述后置摄像头采集车辆前方的图像信息,所述后置摄像头为3D摄像头;
分析单元,用于对采集的车辆驾驶员的图像信息和/或车辆前方的图像信息进行分析得到分析结果;
提示单元,用于基于所述分析结果进行导航提示;
其中,所述分析单元包括:图像识别子单元,用于识别所述车辆前方的图像信息中是否包含导航目的地信息;
距离计算子单元,用于若所述车辆前方的图像信息中包含导航目的地信息,则计算得到第二距离,并将所述第二距离作为所述分析结果,其中,所述第二距离为基于所述车辆前方的图像信息的深度计算得到的所述导航目的地与所述移动终端当前所在位置之间的距离。
9.一种移动终端,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1至7任一项所述方法的步骤。
10.一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至7任一项所述方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811014255.8A CN109151204B (zh) | 2018-08-31 | 2018-08-31 | 一种基于移动终端的导航方法、装置及移动终端 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811014255.8A CN109151204B (zh) | 2018-08-31 | 2018-08-31 | 一种基于移动终端的导航方法、装置及移动终端 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109151204A CN109151204A (zh) | 2019-01-04 |
CN109151204B true CN109151204B (zh) | 2021-04-23 |
Family
ID=64825941
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201811014255.8A Active CN109151204B (zh) | 2018-08-31 | 2018-08-31 | 一种基于移动终端的导航方法、装置及移动终端 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109151204B (zh) |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109889990B (zh) * | 2019-01-18 | 2021-01-12 | 浙江数链科技有限公司 | 车辆进出围栏触发记录方法、装置、设备及存储介质 |
CN110361748A (zh) * | 2019-07-18 | 2019-10-22 | 广东电网有限责任公司 | 一种基于激光测距的移动装置导航方法、相关设备及产品 |
CN112990996A (zh) * | 2019-12-13 | 2021-06-18 | 斑马智行网络(香港)有限公司 | 信息的识别方法、系统、计算设备及存储介质 |
CN114323056A (zh) * | 2020-09-30 | 2022-04-12 | 比亚迪股份有限公司 | 一种驾驶导航方法,装置及汽车 |
CN112172668A (zh) * | 2020-09-30 | 2021-01-05 | 上海博泰悦臻网络技术服务有限公司 | 一种车辆辅助转向的交互控制方法、控制装置及交互系统 |
CN112665602A (zh) * | 2020-12-15 | 2021-04-16 | 斑马网络技术有限公司 | 到达兴趣区域的定位方法、电子设备及可读存储介质 |
CN116794702B (zh) * | 2023-05-30 | 2023-12-22 | 名商科技有限公司 | 一种gps盲区导航方法、系统和可读存储介质 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103968824B (zh) * | 2013-01-28 | 2018-04-10 | 华为终端(东莞)有限公司 | 一种发现增强现实目标的方法及终端 |
CN104118380B (zh) * | 2013-04-26 | 2017-11-24 | 富泰华工业(深圳)有限公司 | 行车侦测系统及方法 |
CN104580969A (zh) * | 2013-10-23 | 2015-04-29 | 中兴通讯股份有限公司 | 录像帧率调整方法和装置 |
CN104897164A (zh) * | 2014-03-06 | 2015-09-09 | 宇龙计算机通信科技(深圳)有限公司 | 视频地图分享方法、装置及系统 |
CN105788028A (zh) * | 2016-03-21 | 2016-07-20 | 上海仰笑信息科技有限公司 | 具有疲劳驾驶预警功能的行车记录仪 |
CN106289254A (zh) * | 2016-07-18 | 2017-01-04 | 乐视控股(北京)有限公司 | 导航方法及装置 |
-
2018
- 2018-08-31 CN CN201811014255.8A patent/CN109151204B/zh active Active
Also Published As
Publication number | Publication date |
---|---|
CN109151204A (zh) | 2019-01-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109151204B (zh) | 一种基于移动终端的导航方法、装置及移动终端 | |
CN110148294B (zh) | 路况状态确定方法及装置 | |
CN104252229B (zh) | 用于通过跟踪驾驶员眼睛视线来检测驾驶员是否对广告感兴趣的设备和方法 | |
US9653001B2 (en) | Vehicle driving aids | |
US9977243B2 (en) | Method for executing vehicle function using wearable device and vehicle for carrying out the same | |
KR20190115040A (ko) | 운전 거동 결정 방법, 디바이스, 장비 및 저장 매체 | |
WO2019037489A1 (zh) | 地图显示方法、装置、存储介质及终端 | |
CN104765445A (zh) | 显示器上的眼睛聚散检测 | |
JP2022520544A (ja) | 車両インテリジェント運転制御方法及び装置、電子機器並びに記憶媒体 | |
JP6613623B2 (ja) | 車載装置、運転モード制御システム、及び運転モード制御方法 | |
JP2016110449A (ja) | 運転支援システムおよび運転支援方法 | |
CN113386786B (zh) | 信息提示方法、装置、设备、介质、云控平台和车辆 | |
CN110027567A (zh) | 驾驶员的驾驶状态确定方法、装置及存储介质 | |
CN104680714A (zh) | 用于向用户发送提醒的方法及系统 | |
JP2014181927A (ja) | 情報提供装置、及び情報提供プログラム | |
CN111216127A (zh) | 一种机器人控制方法、装置、服务器及介质 | |
CN106696824A (zh) | 车辆行驶辅助方法及装置、车辆 | |
CN112258837B (zh) | 一种车辆预警的方法、相关装置、设备以及存储介质 | |
WO2018068387A1 (zh) | 一种车道识别方法及移动终端 | |
CN106200004A (zh) | 提醒方法、智能眼镜及车载系统 | |
CN107800747A (zh) | 一种乘客定位显示处理方法及装置 | |
CN109840454A (zh) | 目标物定位方法、装置、存储介质以及设备 | |
JP2018083441A (ja) | 情報表示方法及び情報表示装置 | |
CN116071949A (zh) | 一种用于辅助驾驶的增强现实的方法及装置 | |
JP2020095466A (ja) | 電子装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |