CN115408623A - 移动装置和车辆 - Google Patents
移动装置和车辆 Download PDFInfo
- Publication number
- CN115408623A CN115408623A CN202210117038.1A CN202210117038A CN115408623A CN 115408623 A CN115408623 A CN 115408623A CN 202210117038 A CN202210117038 A CN 202210117038A CN 115408623 A CN115408623 A CN 115408623A
- Authority
- CN
- China
- Prior art keywords
- information
- image
- display
- controller
- inflection point
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000003190 augmentative effect Effects 0.000 claims abstract description 78
- 230000004044 response Effects 0.000 claims abstract description 11
- 230000008859 change Effects 0.000 claims description 65
- 230000003993 interaction Effects 0.000 claims description 6
- 230000006870 function Effects 0.000 description 85
- 238000004891 communication Methods 0.000 description 39
- 238000000034 method Methods 0.000 description 10
- 206010039203 Road traffic accident Diseases 0.000 description 8
- 238000010586 diagram Methods 0.000 description 7
- 238000001514 detection method Methods 0.000 description 6
- 230000001133 acceleration Effects 0.000 description 5
- 239000003086 colorant Substances 0.000 description 5
- 230000004913 activation Effects 0.000 description 4
- 239000008186 active pharmaceutical agent Substances 0.000 description 3
- 239000005357 flat glass Substances 0.000 description 3
- 238000010295 mobile communication Methods 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 238000005401 electroluminescence Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 239000000446 fuel Substances 0.000 description 2
- 239000011521 glass Substances 0.000 description 2
- 230000007774 longterm Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 239000000725 suspension Substances 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 238000004873 anchoring Methods 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 239000002826 coolant Substances 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000001962 electrophoresis Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 239000003550 marker Substances 0.000 description 1
- 239000010705 motor oil Substances 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000012827 research and development Methods 0.000 description 1
- 239000010454 slate Substances 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/20—Instruments for performing navigational calculations
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/953—Querying, e.g. by the use of web search engines
- G06F16/9537—Spatial or temporal dependent retrieval, e.g. spatiotemporal queries
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3626—Details of the output of route guidance instructions
- G01C21/3647—Guidance involving output of stored or live camera images or video streams
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/3453—Special cost functions, i.e. other than distance or default speed limit of road segments
- G01C21/3492—Special cost functions, i.e. other than distance or default speed limit of road segments employing speed data or traffic data, e.g. real-time or historical
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3602—Input other than that of destination using image analysis, e.g. detection of road signs, lanes, buildings, real preceding vehicles using a camera
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3605—Destination input or retrieval
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3626—Details of the output of route guidance instructions
- G01C21/3635—Guidance using 3D or perspective road maps
- G01C21/3638—Guidance using 3D or perspective road maps including 3D objects and buildings
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3667—Display of a road map
- G01C21/367—Details, e.g. road map scale, orientation, zooming, illumination, level of detail, scrolling of road map or positioning of current position marker
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3691—Retrieval, searching and output of information related to real-time traffic, weather, or environmental conditions
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/53—Querying
- G06F16/538—Presentation of query results
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/587—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using geographical or spatial information, e.g. location
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/953—Querying, e.g. by the use of web search engines
- G06F16/9538—Presentation of query results
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/40—Business processes related to the transportation industry
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/003—Navigation within 3D models or images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/20—Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
- G06T7/74—Determining position or orientation of objects or cameras using feature-based methods involving reference images or patches
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/09—Arrangements for giving variable traffic instructions
- G08G1/0962—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
- G08G1/0968—Systems involving transmission of navigation instructions to the vehicle
- G08G1/096805—Systems involving transmission of navigation instructions to the vehicle where the transmitted instructions are used to compute a route
- G08G1/096827—Systems involving transmission of navigation instructions to the vehicle where the transmitted instructions are used to compute a route where the route is computed onboard
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/09—Arrangements for giving variable traffic instructions
- G08G1/0962—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
- G08G1/0968—Systems involving transmission of navigation instructions to the vehicle
- G08G1/096833—Systems involving transmission of navigation instructions to the vehicle where different aspects are considered when computing the route
- G08G1/096844—Systems involving transmission of navigation instructions to the vehicle where different aspects are considered when computing the route where the complete route is dynamically recomputed based on new data
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/09—Arrangements for giving variable traffic instructions
- G08G1/0962—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
- G08G1/0968—Systems involving transmission of navigation instructions to the vehicle
- G08G1/096833—Systems involving transmission of navigation instructions to the vehicle where different aspects are considered when computing the route
- G08G1/09685—Systems involving transmission of navigation instructions to the vehicle where different aspects are considered when computing the route where the complete route is computed only once and not updated
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/09—Arrangements for giving variable traffic instructions
- G08G1/0962—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
- G08G1/0968—Systems involving transmission of navigation instructions to the vehicle
- G08G1/096855—Systems involving transmission of navigation instructions to the vehicle where the output is provided in a suitable form to the driver
- G08G1/096861—Systems involving transmission of navigation instructions to the vehicle where the output is provided in a suitable form to the driver where the immediate route instructions are output to the driver, e.g. arrow signs for next turn
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/09—Arrangements for giving variable traffic instructions
- G08G1/0962—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
- G08G1/0968—Systems involving transmission of navigation instructions to the vehicle
- G08G1/096855—Systems involving transmission of navigation instructions to the vehicle where the output is provided in a suitable form to the driver
- G08G1/096866—Systems involving transmission of navigation instructions to the vehicle where the output is provided in a suitable form to the driver where the complete route is shown to the driver
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/09—Arrangements for giving variable traffic instructions
- G08G1/0962—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
- G08G1/0968—Systems involving transmission of navigation instructions to the vehicle
- G08G1/096877—Systems involving transmission of navigation instructions to the vehicle where the input to the navigation device is provided by a suitable I/O arrangement
- G08G1/096883—Systems involving transmission of navigation instructions to the vehicle where the input to the navigation device is provided by a suitable I/O arrangement where input information is obtained using a mobile device, e.g. a mobile phone, a PDA
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/09—Arrangements for giving variable traffic instructions
- G08G1/0962—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
- G08G1/0968—Systems involving transmission of navigation instructions to the vehicle
- G08G1/0969—Systems involving transmission of navigation instructions to the vehicle having a display in the form of a map
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
- H04W4/02—Services making use of location information
- H04W4/024—Guidance services
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
- H04W4/02—Services making use of location information
- H04W4/029—Location-based management or tracking services
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
- H04W4/80—Services using short range communication, e.g. near-field communication [NFC], radio-frequency identification [RFID] or low energy communication
Landscapes
- Engineering & Computer Science (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Automation & Control Theory (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Multimedia (AREA)
- Software Systems (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Computer Hardware Design (AREA)
- Computer Graphics (AREA)
- Data Mining & Analysis (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Mathematical Physics (AREA)
- Business, Economics & Management (AREA)
- Environmental Sciences (AREA)
- Environmental & Geological Engineering (AREA)
- Ecology (AREA)
- Biodiversity & Conservation Biology (AREA)
- Atmospheric Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Architecture (AREA)
- Library & Information Science (AREA)
- Health & Medical Sciences (AREA)
- Economics (AREA)
- General Health & Medical Sciences (AREA)
- Human Resources & Organizations (AREA)
- Marketing (AREA)
- Primary Health Care (AREA)
- Strategic Management (AREA)
- Tourism & Hospitality (AREA)
- General Business, Economics & Management (AREA)
- Navigation (AREA)
Abstract
本发明涉及移动装置和车辆,该移动装置包括:输入设备;位置接收器,用于获得当前位置;图像获得设备;显示设备,其被设置为响应于增强现实模式的执行而显示从图像获得设备获得的周围图像;以及控制器,其被设置为搜索由位置接收器获得的从当前位置到目的地的路线、目的地信息和地图信息,根据与所搜索的路线相对应的路线信息识别移动情况,根据关于所识别的移动情况的信息获得移动情况改变的拐点的位置信息,以及基于拐点的位置信息和当前位置信息控制显示设备在显示设备上显示的周围图像上显示拐点的对象图像。
Description
技术领域
本发明涉及具有将路线引导到目的地的导航功能的移动装置和车辆。
背景技术
随着数字技术的最近发展,各种类型的移动装置(诸如移动通信终端、智能电话、平板个人计算机(PC)、笔记本、个人数字助理(PDA)、可穿戴设备、数码相机和个人计算机)被广泛使用。
最近,在可以在移动装置中执行的功能中,除了呼叫功能、多媒体回放功能(例如,音乐回放和视频回放)和因特网功能之外的导航功能的研究和开发正在增加。
这里的导航功能是也在车辆中执行的功能,并且当执行导航功能时,移动装置或车辆通常利用全球定位系统(GPS)来识别当前位置。
这种全球定位系统(GPS)可能由于在室内、地下或存在许多高层建筑的区域中与卫星的通信故障而不能准确地识别当前位置,并且可能在实际当前位置与所识别的当前位置之间具有非常大的误差范围。
此外,当移动装置或车辆执行导航功能时,移动装置或车辆由于在邻近目的地的位置处终止导航功能而可能无法准确地将用户引导到目的地,直到用户到达目的地。
包括在本发明的背景技术部分中的信息仅用于增强对本发明的一般背景的理解,并且可以不被视为承认或以任何形式暗示该信息构成本领域技术人员已知的现有技术。
发明内容
本发明的各个方面涉及提供移动装置和车辆,该移动装置和车辆被配置为在执行导航模式和增强现实模式期间在增强现实功能中控制对象图像的显示的同时将路线引导到目的地,并且在将路线引导到目的地期间显示拥堵路段和事故路段并建议替代路线。
本发明的各个方面涉及提供移动装置和车辆,该移动装置和车辆被配置为使用对象图像以重点显示诸如目的地的受关注点(POI),或者以透明度调节显示受关注点(POI)。
本发明的附加方面将部分地在下面的描述中阐述,并且部分地从描述中将是显而易见的,或者可以通过实践本发明来学习。
根据本发明的一个方面,移动装置包括:输入设备,其被配置为接收用户输入;位置接收器,其被配置为接收用于获得当前位置的位置信息;图像获得设备,其被配置为获得周围环境的图像;显示设备,其被配置为响应于增强现实模式的执行而显示从图像获得设备获得的周围图像;以及控制器,其被配置为当在增强现实模式的执行期间从用户输入接收目的地信息时,搜索从当前位置到目的地的路线,根据与所搜索的路线相对应的路线信息识别移动情况,根据关于所识别的移动情况的信息获得移动情况改变的拐点的位置信息,以及根据拐点的位置信息和当前位置信息控制显示设备在显示设备上显示的周围图像上显示拐点的对象图像。
移动装置的控制器可以根据当前位置信息和拐点的位置信息获得从当前位置到拐点的距离信息,以及根据所获得的距离信息改变拐点的对象图像的显示信息,并且拐点的对象图像的显示信息可以包括形状信息和颜色信息中的至少一个。
当移动装置的控制器断定到拐点的距离大于或等于第一参考距离时,该控制器可以根据当前位置信息、目的地信息和地图信息识别目的地的方向,并且控制显示设备在显示设备上显示的周围图像上显示从当前位置定向到目的地方向的对象图像。
当移动装置的控制器断定到拐点的距离小于第一参考距离并且大于或等于第二参考距离时,该控制器可以基于拐点的位置和地图信息控制显示设备在周围图像上显示长距离拐点的对象图像。第一参考距离可以长于第二参考距离。
当移动装置的控制器根据路线信息断定在预设距离内存在多个拐点时,该控制器可以将第二参考距离改变为第三参考距离。
移动装置的控制器可以根据关于所识别的移动情况的信息,当移动情况是平稳情况时,控制显示设备以第一颜色显示长距离拐点的对象图像;当控制器断定移动情况是拥堵情况或事故情况时,控制显示设备以第二颜色显示长距离拐点的对象图像;以及当控制器断定移动情况是路线改变情况时,控制显示设备以第三颜色显示长距离拐点的对象图像。
当由移动装置的控制器接收交通信息时,该控制器可以根据所接收的交通信息、目的地信息、当前位置信息、路线信息和地图信息来确定路线改变是否是必要的。
当移动装置的控制器断定到拐点的距离小于第二参考距离时,该控制器可以基于拐点的位置和地图信息控制显示设备在周围图像上显示短距离拐点的对象图像。
移动装置的控制器可以根据关于所识别的移动情况的信息,当控制器断定移动情况是路线保持情况时,控制显示设备以第一颜色显示短距离拐点的对象图像;当控制器断定移动情况是拥堵情况或事故情况时,控制显示设备以第二颜色显示短距离拐点的对象图像;以及当控制器断定移动情况是路线改变情况时,控制显示设备以第三颜色显示短距离拐点的对象图像。
当移动装置的控制器断定定向对象图像的显示位置与短距离拐点的对象图像的显示位置一致并且与长距离拐点的对象图像的显示位置不一致时,控制器可以控制显示设备显示交通信息。
当移动装置的控制器断定定向对象图像的显示位置与短距离拐点的对象图像的显示位置不一致并且与长距离拐点的对象图像的显示位置不一致时,控制器可以控制显示设备显示交通信息和替代路线信息。
移动装置的控制器可以根据目的地信息、当前位置信息、路线信息和地图信息确定到目的地的距离是否小于或等于预定距离,当控制器断定到目的地的距离小于或等于预定距离时,从周围图像识别与目的地信息相对应的目的地图像,并且控制显示设备在所识别的目的地图像上重叠和显示强调的对象图像。
移动装置的控制器可以根据目的地信息、当前位置信息、路线信息和地图信息来确定到目的地的距离是否小于或等于预定距离,当控制器断定到目的地的距离小于或等于预定距离时,从周围图像识别与目的地信息相对应的目的地图像,并且控制所识别的目的地图像和剩余图像的透明度彼此不同。
移动装置的控制器可以从周围图像识别与目的地图像相邻的地面图像,控制显示设备在所识别的地面图像上显示网格状对象图像,以及控制显示设备在目的地图像上重叠和显示锚定标记图像。
根据本发明的另一方面,车辆包括:输入设备,其被配置为接收用户输入;位置接收器,其被配置为接收用于获得当前位置的位置信息;速度检测器,其被配置为检测行驶速度;图像获得设备,其被配置为获得周围环境的图像;显示设备,其被配置为响应于增强现实模式的执行而显示从图像获得设备获得的周围图像;以及控制器,其被配置为当在增强现实模式和导航模式的交互作用期间,控制器从用户输入接收目的地信息时,搜索从当前位置到目的地的路线,根据与所搜索的路线相对应的路线信息和由速度检测器检测的行驶速度信息识别移动情况,根据关于所识别的移动情况的信息获得移动情况改变的拐点的位置信息,以及根据拐点的位置信息和当前位置信息控制显示设备在显示设备上显示的周围图像上显示拐点的对象图像。
车辆的控制器可以根据当前位置信息和拐点的位置信息获得从当前位置到拐点的距离信息,以及根据所获得的距离信息改变拐点的对象图像的显示信息。拐点的对象图像的显示信息可以包括形状信息和颜色信息中的至少一个。
当车辆的控制器断定到拐点的距离大于或等于第一参考距离时,控制器可以基于当前位置信息、目的地信息和地图信息识别目的地的方向,并且控制显示设备在显示设备上显示的周围图像上显示从当前位置定向到目的地方向的对象图像;当控制器断定到拐点的距离小于第一参考距离并且大于或等于第二参考距离时,基于拐点的位置和地图信息控制显示设备在周围图像上显示长距离拐点的对象图像;并且当控制器断定到拐点的距离小于第二参考距离时,基于拐点的位置和地图信息控制显示设备在周围图像上显示短距离拐点的对象图像。第一参考距离可以长于第二参考距离。
当车辆的控制器断定定向对象图像的显示位置与短距离拐点的对象图像的显示位置一致并且与长距离拐点的对象图像的显示位置不一致时,控制器可以控制显示设备显示交通信息;并且当控制器断定定向对象图像的显示位置与短距离拐点的对象图像的显示位置不一致并且与长距离拐点的对象图像的显示位置不一致时,控制显示设备显示交通信息和替代路线信息。
当由车辆的控制器接收交通信息时,控制器可以基于所接收的交通信息、目的地信息、当前位置信息、路线信息和地图信息来确定路线改变是否是必要的,并且当控制器断定路线改变是必要的时将改变路线的点识别为拐点。
车辆的控制器可以根据目的地信息、当前位置信息、路线信息、行驶速度信息和地图信息来确定到目的地的距离是否小于或等于预定距离,当控制器断定到目的地的距离小于或等于预定距离时,从周围图像识别与目的地信息相对应的目的地图像,并且控制显示设备在所识别的目的地图像上重叠和显示强调的对象图像。
当搜索从当前位置到目的地的路线时,车辆的控制器可以根据由位置接收器获得的当前位置信息、目的地信息和地图信息搜索从当前位置到目的地的路线;并且当控制显示设备在显示设备上显示的周围图像上显示拐点的对象图像时,根据拐点的位置信息、地图信息和当前位置信息控制显示设备在显示设备上显示的周围图像上显示拐点的对象图像。
本发明的方法和装置具有其他特征和优点,这些特征和优点将从结合在本文的所附附图和以下具体实施方式中显而易见或更详细地阐述,所附附图和以下具体实施方式一起用于解释本发明的某些原理。
附图说明
图1是根据本发明的各种示例性实施例的移动装置的控制示意图;
图2和图3是根据本发明的各种示例性实施例的移动装置的显示设备的示例性显示示图;
图4A、图4B、图5、图6、图7A、图7B、图8、图9、图10和图11是根据本发明的各种示例性实施例的移动装置的增强现实功能的对象图像的示例性显示示图;
图12A和图12B是根据本发明的各种示例性实施例的移动装置的控制流程图;以及
图13是根据本发明的另一示例性实施例的车辆的控制示意图。
可以理解,所附附图不必是按比例绘制的,呈现了说明本发明的基本原理的各种特征的略微简化的表示。如本文包括的本发明的具体设计特征(例如包括具体尺寸、取向、位置和形状)将部分地由具体预期应用和使用环境确定。
在附图中,参考标号是指贯穿附图的若干图的本发明的相同或等效部分。
具体实施方式
现在将详细参考本发明的各种实施例,其示例在所附附图中示出并在下文中描述。虽然将结合本发明的示例性实施例来描述本发明,但是将理解,本描述并不旨在将本发明限制于那些示例性实施例。另一方面,本发明旨在不仅涵盖本发明的示例性实施例,而且涵盖可以包括在如所附权利要求所限定的本发明的精神和范围内的各种替代、修改、等同物和其他实施例。
贯穿说明书,相同的参考标号是指相同的元件。本说明书并未描述实施例的所有要素,并且将省略本发明的技术领域中的一般内容或实施例之间的重复内容。在示例性实施例中使用的术语“部件”、“模块”、“构件”和“块”可以体现为软件或硬件,并且根据示例性实施例,多个“单元”、“模块”、“构件”和“块”也可以体现为一个组件,或者一个“单元”、“模块”、“构件”和“块”包括多个组件。
贯穿说明书,当一个部件被称为“连接”到另一部件时,它不仅包括直接连接,而且包括间接连接,并且间接连接包括通过无线网络连接。
此外,当描述部件“包括”元件时,除非另有特别说明,否则意味着该元件可以进一步包括其他元件,不排除其他元件。
术语“第一”、“第二”等用于区分一个元件与另一元件,并且该元件不受上述术语的限制。
除非上下文另有明确规定,否则单数形式“一(a)”、“一个(an)”和“该(the)”包括复数指称。
在每个步骤中,为了便于解释而使用标识号,标识号不描述步骤的顺序,并且除非上下文清楚地说明特定的顺序,否则可以不同于指定的顺序执行每个步骤。
在下文中,将参考所附附图详细描述本发明。
图1是根据本发明的各种示例性实施例的移动装置的控制框图,将参考图2、图3、图4A、图4B、图5、图6、图7A、图7B、图8、图9、图10和图11来描述该移动装置。
移动装置1可以是用户可以携带的终端。
移动装置1可以是可以可拆卸地安装在车辆上的终端,或者是可以嵌入在车辆的仪表板中的终端。移动装置1可以是在车辆中执行音频、视频和导航功能的音频视频导航(AVN)终端。
移动装置1可以被实施为被配置用于通过网络访问车辆的计算机或便携式终端。
这里,计算机例如可以包括其上安装有WEB浏览器的笔记本、台式机、膝上型电脑、平板PC(tablet PC)、平板PC(slate PC)等,以及便携式终端,其是确保便携性和移动性的无线通信设备,可以例如包括所有种类的基于手持的无线通信设备,诸如个人通信系统(PCS)、全球移动通信系统(GSM)、个人数字蜂窝(PDC)、个人手持电话系统(PHS)、个人数字助理(PDA)、国际移动电信(IMT)-2000、码分多址(CDMA)-2000、W-码分多址(W-CDMA)、无线宽带互联网(WiBro)终端和智能电话,以及可穿戴设备,诸如手表、戒指、手镯、脚链、项链、眼镜、隐形眼镜和头戴设备(HMD)。
移动装置1包括用户界面110、声音输出设备120、位置接收器130、图像获得设备140、通信设备150、控制器160和存储设备161。
用户界面110接收用户输入并输出各种信息,以便用户可以识别。用户界面110可以包括输入设备111和显示设备112。
输入设备111接收用户输入。
输入设备111可以接收移动装置1的锁定命令、锁定解除命令、开机命令和关机命令,并且可以接收显示设备112的图像显示命令。
输入设备111可以接收用于可由移动装置1执行的各种功能的操作命令,并且可以接收各种功能的设置值。
当移动装置1设置在车辆中时,输入设备111可以接收用于要在车辆中执行的各种功能的操作命令。
例如,要在移动装置1中执行的功能可以包括呼叫功能、文本功能、音频功能、视频功能、导航功能、地图功能、广播回放功能、无线电功能、内容回放功能、因特网搜索功能和增强现实功能,并且可以包括执行移动装置1中安装的至少一个应用的功能。
增强现实(AR)功能是通过将虚拟相关信息(例如,文本、图像等)与真实对象(例如,真实环境)合成来显示的技术。与仅针对虚拟空间和对象的虚拟现实(VR)功能不同,增强现实功能通过向作为真实环境的对象提供虚拟相关对象来向用户提供仅在真实环境中难以获得的附加信息。
移动装置1中安装的至少一个应用可以是用于向用户提供至少一个服务的应用。这里,该服务可以是为了用户的安全、方便和乐趣而提供信息。
输入设备111可以接收用于执行导航功能的导航应用(NAVI API)的执行命令,可以接收用于执行增强现实功能的增强现实应用(AR API)的执行命令,并且可以接收用于执行地图功能的地图应用(MAP API)的执行命令。
输入设备111可以响应于导航功能的执行而接收目的地信息,并且可以接收用于在多条路线中选择任意一个路线的路线选择信息。
输入设备111可以在增强现实功能或地图功能的执行期间接收目的地信息。
输入设备111可以在增强现实功能的执行期间接收关于受关注点(POI)的受关注点(POI)信息。
输入设备111可以被实施为用于输入显示在显示设备112上的光标移动命令和图标或按钮选择命令的微动转盘或触摸板。
输入设备111可以包括硬件设备,诸如各种按钮或开关、踏板、键盘、鼠标、跟踪球、各种控制杆、手柄和摇杆。
此外,输入设备111可以包括图形用户界面(GUI),诸如触摸面板,即,软件设备。触摸面板可以被实施为触摸屏面板(TSP),以与显示设备112形成层结构。
显示设备112可以响应于控制器160的控制命令将关于在移动装置1中执行的至少一个功能的执行信息显示为图像,并且可以将对应于由输入设备112接收的用户输入的信息显示为图像。
显示设备112可以显示用于可以在移动装置1中执行的功能的应用的图标。例如,如图2所示,显示设备112可以显示增强现实应用的图标110a、导航应用的图标110b和地图显示应用的图标110c。
显示设备112可以在执行导航功能期间显示地图信息、目的地信息和路线引导信息,并且可以显示关于当前位置的当前位置信息。即,当执行导航功能时,显示设备112可以显示导航图像,在该导航图像中,地图图像中到目的地的路线引导图像与指示当前位置的当前位置图像匹配。
如图3所示,显示设备112可以响应于执行增强现实功能期间的用户输入来显示搜索POI的搜索窗口110d,并且可以显示预先存储的受关注点(POI)的图标。显示设备112可以以按钮的形式显示关于先前搜索或存储的POI的信息。
显示设备112可以在执行增强现实功能期间显示由图像获得设备140获得的图像的同时,在可能发生移动情况变化的拐点的显示位置处显示拐点的对象图像。
拐点的对象图像可以包括短距离拐点图像和长距离拐点图像。此外,拐点的对象图像可以包括虚线图像、点图像和箭头图像。
例如,当到拐点的距离长时,显示设备112可以通过基于当前位置显示指向目的地方向的拐点的对象图像,使用户能够容易地识别目的地的方向。这里,指向目的地方向的拐点的对象图像可以是作为定向对象图像的点状直线(以下称为虚线)图像。
显示设备112可以通过将对象图像重叠在与目的地相对应的目的地图像中来显示。作为用于强调目的地图像的强调图像的目的地图像中重叠的对象图像可以是强调的对象图像。
例如,如图4A所示,显示设备112可以通过在与目的地相对应的目的地图像(例如,建筑物图像)上显示指示目的地的强调的对象图像AR1,使用户能够容易地识别目的地。
显示设备112可以显示强调的对象图像AR1,以便通过往复和以规则间隔显示指示目的地的强调的对象图像(AR1)或以规则时间间隔重复显示和不显示指示目的地的强调的对象图像AR1来向用户显示为其好像在移动。
显示设备112可以显示除目的地图像之外的图像M1,该图像M1比目的地图像模糊。
如图4B所示,显示设备112可以通过在执行增强现实功能期间在与目的地相对应的目的地图像上显示第一强调的对象图像AR1,在与目的地图像相邻的地面图像上显示引导目的地的第二强调的对象图像AR2,以及一起显示强调其是目的地的第三强调的对象图像AR3,来精确并且准确地显示目的地。
指示目的地的第一强调的对象图像AR1可以是由虚线形成的多边形图像。
用于引导目的地的第二强调的对象图像AR2可以是通过平面检测的网格图像。这里,平面检测是当需要在垂直平面上显示增强现实(AR)的对象图像时检测平面。
作为是锚定标记图像的强调其是目的地的第三强调的对象图像AR3可以使用户能够掌握锚定值的精确位置。
显示设备112可以强调显示与目的地相对应的目的地图像,并且可以通过调光处理将目的地图像以外的剩余图像M1显示得比目的地图像更模糊。
如图5所示,显示设备112可以同时显示导航图像和增强现实图像,同时在显示设备112的不同显示区域中显示导航图像和增强现实图像。
即,显示设备112可以在第一显示区域a1中显示增强现实图像,并在第二显示区域a2中显示导航图像。
显示设备112可以包括阴极射线管(CRT)、数字光处理(DLP)面板、等离子体显示面板、液晶显示(LCD)面板、电致发光(EL)面板、电泳显示(EPD)面板、电致变色显示(ECD)面板、发光二极管(LED)面板或有机发光二极管(OLED)面板,但不限于此。
移动装置1可以进一步包括用于接收用户的语音的声音接收器。在这种情况下,控制器160可以执行语音识别功能,并且可以通过语音识别功能识别用户输入。
声音接收器可以包括将声波转换成电信号的麦克风。可以设置一个或两个或多个麦克风,并且该一个麦克风可以是定向的。
该两个或多个麦克风可以被实施为麦克风阵列。
声音输出设备120可以输出用于由移动装置1执行的功能的声音。声音输出设备120可以包括至少一个或多个扬声器。
例如,声音输出设备120可以在执行导航功能时将路线引导信息输出为声音。
扬声器将放大的低频音频信号转换为原始声波,在空气中生成小波,并复制声波,输出音频数据作为用户可以听到的声音。
位置接收器130接收用于获得关于移动装置1的当前位置的当前位置信息的信号。
位置接收器130可以是与多个GPS卫星通信的全球定位系统(GPS)接收器。GPS接收器包括:天线模块,用于接收来自多个GPS卫星的信号,并且可以包括:软件,用于通过使用与多个GPS卫星的位置信号相对应的距离和时间信息来获得当前位置;以及输出设备,其被配置用于输出所获得的车辆位置信息。
位置接收器130可以包括视觉定位服务(VPS)。
图像获得设备140获得移动装置1周围的图像,并将关于所获得的图像的图像信息发送到控制器160。图像信息可以是图像数据。
图像获得设备140具有移动装置1的正面视图。
图像获得设备140可以包括至少一个或多个相机,用于获得移动装置1前后方向的外部图像。
假设移动装置的显示设备的显示表面是移动装置的主体的前表面,则至少一个相机可以布置在移动装置的主体的前表面上,并且其他相机可以布置在移动装置的主体的后表面上。后表面可以是相对于主体在与前表面的方向相反的方向上定向的表面。
图像获得设备140可以包括作为相机的CCD或CMOS图像传感器,并且还可以包括诸如RGB-D传感器(KINECT)、结构光传感器(TOF)和立体相机的三维空间识别传感器。
通信设备150可以从外部服务器2接收至少一个应用,并且可以接收关于所安装的应用的更新信息。
通信设备150可以从外部服务器2接收用户对多用途设施中的至少一个的访问次数。
通信设备150可以包括实现内部组件之间通信的一个或多个组件,并且可以例如包括短距离通信模块、有线通信模块和无线通信模块中的至少一个。
短距离通信模块可以包括使用无线通信网络在短距离内发送和接收信号的各种短距离通信模块,诸如蓝牙模块、红外通信模块、射频识别(RFID)通信模块、近场通信(NFC)模块和Zigbee通信模块。
有线通信模块可以包括各种有线通信模块,诸如控制器局域网(CAN)通信模块、局域网(LAN)模块、WAN(广域网(WAN)模块和增值网络(VAN)模块,以及各种有线通信模块,诸如通用串行总线(USB)、高清多媒体接口(HDMI)、数字可视接口(DVI)、推荐标准232(RS-232)、电力线通信和普通老式电话业务(POTS)。
有线通信模块还可以包括本地互连网络(LIN)。
除了Wi-Fi模块和无线宽带模块之外,无线通信模块还可以包括支持各种无线通信方法的无线通信模块,诸如全球移动通信系统(GSM)、码分多址(CDMA)、宽带码分多址(WCDMA)、通用移动电信系统(UMTS)、时分多址(TDMA)、长期演进(LTE)和超宽带(UWB)模块。
控制器160基于在输入设备111、图像获得设备140和声音接收器中的至少一个中接收的移动装置1的锁定解除命令、开机命令和图像显示命令中的至少一个来控制显示设备112的图像显示。
控制器160可以在由输入设备111接收增强现实应用的执行命令时控制增强现实功能的执行图像的显示,可以控制导航应用的执行以激活导航应用,并且还可以控制地图应用的执行以激活地图应用。
当接收增强现实应用的执行按钮的选择信号时,控制器160可以确定已经接收增强现实应用的执行命令。增强现实应用的执行按钮可以是物理按钮。
当由输入设备111接收的触摸位置信息与增强现实应用的图标的显示位置信息相对应时,控制器160可以确定已经接收增强现实应用的执行命令。
控制器160可以在由输入设备111接收增强现实应用的执行命令时控制图像获得设备140的激活,并且可以控制位置接收器130的激活。
控制器160可以在执行增强现实应用期间,当图像获得设备140被激活时,对由图像获得设备140获得的图像执行图像处理,并控制经图像处理的图像的显示,并且当位置接收器130被激活时,控制器160可以基于从位置接收器130输出的位置信息来获得移动装置1的当前位置信息。
当由输入设备111接收导航应用的执行命令时,控制器160可以获得存储在存储设备中的地图信息,并控制位置接收器130的激活。
当设置多个导航应用时,控制器160可以在执行增强现实功能期间执行与预设导航应用或由用户选择的导航应用的交互。
当设置多个导航应用时,控制器160可以接收用于驾驶车辆的导航应用的选择信号或接收用于用户行走的导航应用的选择信号。
控制器160可以在执行增强现实功能期间结合导航功能将存储在导航应用中的POI信息、目的地信息、当前位置信息和关于多条路线的信息发送到增强现实应用。
控制器160可以识别在执行导航功能期间由输入设备111输入的目的地信息,识别在位置接收器130中接收的当前位置信息,基于所识别的当前位置信息和目的地信息搜索从当前位置到目的地的路线,获得关于所搜索的路线的路线引导信息,控制显示设备112显示地图信息、当前位置信息、目的地信息和路线信息匹配的导航图像,以及控制显示设备112和声音输出设备120中的至少一个基于当前位置信息输出路线引导信息。当前位置信息可以响应于移动装置1的移动而实时改变。
控制器160还可以将通过输入设备111接收的受关注点的信息设置为目的地信息。
当搜索到多条路线时,控制器160可以控制显示设备112显示关于多条路线的路线信息。
控制器160可以控制显示设备112显示关于多条路线中的每一个的详细信息。该详细信息可以包括到达时间、移动距离、交通信息等。
当由输入设备111选择了多条路线中的任何一个时,控制器160可以进行控制以显示关于所选择的路线的路线信息。
当在导航功能和增强现实功能的交互期间接收路线引导命令时,控制器160可以控制显示设备112和声音输出设备120中的至少一个的操作,以在显示导航图像的同时输出路线信息和路线引导信息。
以下,将描述在增强现实功能和导航功能的交互期间控制器160的显示控制配置。
控制器160可以控制显示设备112在增强现实功能和导航功能的交互期间同时显示导航图像和增强现实图像,同时将显示设备112的区域划分为至少两个区域,并控制显示设备112分别在所划分的区域中显示导航图像和增强现实图像。
控制器160基于从当前位置到目的地的路线信息、移动速度信息和交通信息中的至少一个来识别移动装置1的移动情况,并确定所识别的移动情况是否已经改变。在这种情况下,控制器160可以确定移动情况的改变是否是交通情况的改变,并且当确定是交通情况的改变时,可以进一步确定到目的地的路线信息是否已经改变。
移动速度信息可以是行驶速度信息。移动装置1的移动情况的改变可以包括交通情况的改变和路线的改变。
控制器160可以基于路线信息、移动速度信息和交通信息中的至少一个来获得移动装置1的移动情况要改变的拐点的位置信息,基于所获得的拐点的位置信息、地图信息、路线信息和当前位置信息获得从当前位置到拐点的位置的距离信息,基于所获得的距离信息获得关于要在周围图像上显示的拐点的对象图像的信息,以及基于所获得的关于拐点的对象图像的信息控制显示设备112在周围图像上显示拐点的对象图像。
要在增强现实图像中显示的拐点的对象图像是使用户能够容易地识别移动情况改变的位置和移动情况改变的原因的图像,根据到发生移动情况改变的位置的距离和移动情况改变的原因,该对象图像可以具有不同的形状和颜色。
移动装置1的移动情况的改变的原因可以包括交通拥堵和交通事故中的至少一个,并且可以包括与到目的地的到达时间的改变相对应的路线的改变。
控制器160可以基于当前位置信息和到拐点的距离信息来改变拐点的对象图像的显示信息。在这种情况下,控制器160可以改变拐点的对象图像的形状和颜色中的至少一个。
如图6所示,当基于当前位置信息和到拐点的距离信息确定到拐点的距离大于或等于第一参考距离时,控制器160可以基于当前位置信息和目的地的位置信息,基于增强现实图像中的当前位置的显示位置来确定目的地的方向,并且可以控制显示设备112显示从当前位置的显示位置指向目的地的方向的拐点的对象图像。指向目的地的方向的拐点的对象图像(其是定向对象图像)可以是虚线图像AR4。
当显示指向目的地的方向的虚线图像时,控制器160可以基于由输入设备111输入的显示关闭命令来控制虚线图像的不显示,并且基于由输入设备111输入的显示打开命令来控制虚线图像的显示。
如图7A所示,当基于从当前位置到拐点的距离信息确定到拐点的距离大于或等于第二参考距离并且小于第一参考距离时,控制器160可以识别拐点的显示位置信息,以基于当前位置信息、地图信息和拐点的位置信息在增强现实图像中显示拐点,控制显示设备112基于所识别的拐点的显示位置信息显示拐点的对象图像AR5,并控制显示设备112将从当前位置到拐点的距离信息显示为围绕拐点的对象图像的文本图像AR6。作为点图像的拐点的对象图像AR5可以是指示长距离拐点的长距离拐点图像。
如图7B所示,当控制拐点的对象图像显示为点图像时,当移动装置1的移动情况的改变的原因是平稳驾驶时,控制器160可以控制显示设备112将拐点的对象图像显示为第一颜色的点图像,当移动情况的改变的原因是交通拥堵或交通事故时,可以控制显示设备112将拐点的对象图像显示为第二颜色的点图像,并且当移动情况的改变的原因是到替代路线的改变时,可以控制显示设备112将拐点的对象图像显示为第三颜色的点图像。
第一颜色、第二颜色和第三颜色可以是不同的颜色。例如,第一颜色可以是绿色,第二颜色可以是灰色,并且第三颜色可以是红色。
控制器160可以基于从当前位置到目的地的路线信息和交通信息来确定移动装置1的移动情况是否存在改变;当确定移动装置1的移动情况存在改变时,可以确定到目的地的到达时间是否存在改变;并且当确定到达时间存在改变时,可以控制显示设备112在移动到主要路线时搜索可能比到达时间更早到达的次要路线,并将搜索到的次要路线显示为替代路线。
当基于改变的替代路线的路线信息引导路线时,控制器160可以基于主要路线信息和次要路线信息识别路线改变的拐点的位置信息,识别拐点的显示位置信息以根据当前位置信息和拐点的位置信息在增强现实图像中显示拐点,并控制显示设备112将所识别的显示位置信息中的拐点显示为第三颜色的点图像。
如图8所示,当基于从当前位置到拐点的距离信息确定到拐点的距离小于第二参考距离时,控制器160可以识别拐点的显示位置信息,以基于地图信息、当前位置信息和拐点的位置信息在增强现实图像中显示拐点,并控制显示设备112将所识别的显示位置信息中的拐点的对象图像显示为箭头图像。箭头图像可以是指示短距离拐点的短距离拐点图像。
当控制拐点的对象图像显示为箭头图像时,当保持移动装置1的移动情况时,控制器160可以控制显示设备112将拐点的对象图像显示为第一颜色的箭头图像,当移动情况的改变的原因是交通拥堵或交通事故时,可以控制显示设备112将拐点的对象图像显示为第二颜色的点图像,并且当移动情况的改变的原因是路线的改变时,可以控制显示设备112将拐点的对象图像显示为第三颜色的箭头图像。
移动情况的保持可以包括保持到目的地的路线作为主要路线。
箭头图像的第一颜色、第二颜色和第三颜色可以是不同的颜色。例如,第一颜色可以是绿色,第二颜色可以是灰色,并且第三颜色可以是红色。
当基于路线信息确定存在多个相邻拐点时,控制器160可以将第二参考距离改变为第三参考距离。第三参考距离可以长于第二参考距离,并且短于第一参考距离。相邻拐点可以是存在于预设距离内的拐点。
相邻拐点可以存在于邻近十字路口改变(IC)或交叉路口改变(JC)的位置。可以由用户设置第三参考距离。
控制器160识别增强现实图像中的相应拐点的对象图像的位置(即,虚线图像的显示位置、箭头图像的显示位置和点图像的显示位置)是否彼此一致。
如图9所示,当确定虚线图像AR4的显示位置与箭头图像AR7的显示位置一致,并且虚线图像AR4的显示位置与点图像AR5的显示位置一致时,控制器160可以控制关于到目的地的剩余时间和剩余距离的信息的显示,控制显示设备112显示关于要移动到目的地的道路名称的道路名称信息以及左转弯和右转弯信息,基于交通信息控制短距离拐点的图像和长距离拐点的图像的颜色变化,以及当确定当前位置邻近目的地时控制路线引导直到到达目的地。
当确定当前位置邻近目的地时,控制器160可以控制显示设备112删除导航图像并在显示设备112的整个区域上显示增强现实图像,并且控制显示设备112在增强现实图像上显示用于引导到达目的地的路线的箭头图像和直线图像。
如图10所示,当确定虚线图像AR4的显示位置与箭头图像AR7的显示位置一致并且虚线图像AR4的显示位置与点图像AR5的显示位置不一致时,控制器160还可以控制显示设备112以附加地将交通信息显示为文本图像。在这种情况下,控制器160可以基于交通信息改变长距离拐点的图像的颜色,并控制仅在特定时间段内将交通信息显示为文本图像。
如图11所示,当确定虚线图像AR4的显示位置与箭头图像AR7的显示位置不一致并且虚线图像AR4的显示位置与点图像AR5的显示位置一致时,控制器160可以控制显示设备112显示交通信息和替代路线信息AR8。
交通信息可以包括指示交通拥堵或交通事故的象形图图像信息。
控制器160可以控制显示设备112显示导航图像,基于目的地的预期到达时间信息、当前时间信息、参考距离信息、移动速度信息、当前位置信息和目的地信息中的至少一个来确定当前位置是否邻近目的地,并且当确定当前位置邻近目的地时,控制显示设备112显示增强现实图像。
当确定当前位置邻近目的地时,控制器160可以基于地图信息、由图像获得设备140获得的图像信息和目的地信息来识别由图像获得设备140获得的图像中的对象图像中与目的地信息相对应的对象(例如,建筑物)的图像,并基于所识别的对象图像的显示位置信息来显示用于强调目的地的强调的对象图像。
地图信息可以是存储在存储设备161中的信息,并且可以从服务器2接收。地图信息可以包括建筑物信息和多用途设施信息,并且还可以包括每个建筑物或多用途设施的地址信息和停车场位置信息。
用于强调目的地的强调的对象图像可以包括用于在视觉上识别与目的地信息相对应的对象图像的高亮图像或多边形图像,并且可以包括由虚线形成的多边形图像。
例如,控制器160可以识别与目的地信息相对应的对象图像的区域,识别所识别的区域的边缘部分,并匹配和显示由虚线形成的多边形图像与所识别的边缘部分。由虚线形成的多边形图像可以与形成所识别的边缘部分的形状相同或相似。
控制器160可以识别与目的地信息相对应的对象图像的区域,并在所识别的区域中重叠和显示预设颜色的多边形图像,从而可以将目的地图像显示为高亮图像。
控制器160可以识别与目的地信息相对应的对象图像,基于所识别的对象的图像的位置信息识别垂直平面,控制显示设备112基于所识别的垂直平面的位置信息显示网格图像,以及基于网格图像的位置信息和对象图像的位置信息显示锚定标记图像。
控制器160可以识别与目的地信息相对应的对象图像,并将除所识别的对象图像(即,第一对象图像)之外的其余对象图像(即,第二对象图像)的透明度调整为不同于第一对象图像的透明度。
例如,控制器160可以保持第一对象图像的透明度,并将第二对象图像的透明度调整为比第一对象图像的透明度更高的透明度。
控制器160可以将第一对象图像的透明度调整为第一透明度,并将第二对象图像的透明度调整为第二透明度。第二透明度可以高于第一透明度。
控制器160可以在第一对象图像的区域中重叠并显示预设颜色的多边形形状图像。
控制器160可以基于移动速度信息确定移动速度是否小于参考速度;当确定移动速度小于参考速度时,基于当前位置信息和目的地的位置信息确定从当前位置到目的地的距离是否小于或等于设定距离;当确定从当前位置到目的地的距离小于或等于设定距离时,识别与目的地信息相对应的对象图像;以及控制显示设备112在所识别的对象的图像上显示指示目的地的强调的对象图像。
当确定从当前位置到目的地的距离小于或等于设定距离时,控制器160可以获得关于直到到达目的地的剩余时间的信息和关于剩余距离的信息,控制所获得的剩余时间信息和剩余距离信息的显示,并控制显示设备显示关于要移动到目的地的道路名称的道路名称信息以及左转弯和右转弯信息。
存储设备161存储地图信息。
存储设备161存储关于第一参考距离、第二参考距离和第三参考距离的信息,存储关于设定距离的信息,并存储与长距离拐点相对应的点图像的颜色信息和与短距离拐点相对应的箭头图像的颜色信息。
存储设备161可以存储关于用于引导道路的对象图像的信息,并存储关于指示目的地的对象图像的信息。
存储设备161可以存储关于受关注点的位置信息。受关注点可以是由用户选择的点。
存储设备161可以被实施为非易失性存储设备(诸如高速缓存、只读存储器(ROM)、可编程ROM(PROM)、可擦除可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)以及闪存)、易失性存储设备(诸如随机存取存储器(RAM))和存储介质(诸如硬盘驱动器(HDD)和CD-ROM)中的至少一种,但不限于此。存储设备161可以是被实施为与以上关于控制器160描述的处理器分离的芯片的存储器,或者可以被实施为具有处理器的单个芯片。
根据图1所示的移动装置1的组件的性能,可以添加或删除至少一个组件。本领域技术人员将容易理解,组件的相互位置可以根据系统的性能或结构而改变。
图1所示的每个组件表示诸如现场可编程门阵列(FPGA)和专用集成电路(ASIC)的软件和/或硬件组件。
图12A和图12B是根据本发明的各种示例性实施例的移动装置的控制流程图。
当由输入设备111接收增强现实应用的执行命令时,移动装置1可以通过执行增强现实应用来执行增强现实功能。在这种情况下,移动装置1可以通过图像获得设备140获得图像,并通过显示设备112显示所获得的图像(171)。
当在执行增强现实功能的状态下由输入设备111接收目的地信息时(172),移动装置1可以执行导航应用并将目的地信息发送到导航应用。
移动装置1可以响应于导航应用的执行来控制位置接收器130的激活。
移动装置1通过执行导航应用,基于当前位置信息和目的地信息搜索从当前位置到目的地的路线(173),并显示其中用于所搜索的路线的路线信息和路线引导信息与地图信息匹配的导航图像(174)。在这种情况下,移动装置1可以在显示设备112的部分区域中显示增强现实图像,并且在另一区域中显示导航图像。
移动装置1在显示导航图像的同时周期性地识别当前位置信息。移动装置1可以显示关于到达目的地所需的总时间的信息,并且可以显示关于最终目的地的到达时间的信息。
移动装置1基于从当前位置到目的地的路线信息、移动速度信息和交通信息中的至少一个来识别移动装置1的移动情况(175),并确定所识别的移动情况是否已经改变(176)。在这种情况下,移动装置1可以确定移动情况的改变是否是交通情况的改变,并且当确定是交通情况的改变时,可以进一步确定到目的地的路线信息是否已经改变。
移动速度信息可以是行驶速度信息。移动装置1的移动情况的改变可以包括交通情况的改变和路线的改变。
移动装置1可以基于路线信息、移动速度信息和交通信息中的至少一个来获得移动装置1的移动情况要改变的拐点的位置信息(177),基于所获得的拐点的位置信息和当前位置信息获得从当前位置到拐点的位置的距离信息(178),基于所获得的距离信息获得关于要在增强现实图像中显示的对象图像的信息,以及基于所获得的关于对象图像的信息在增强现实图像中显示对象图像(179)。
要在增强现实图像中显示的对象图像是使用户能够容易地识别移动情况改变的位置和移动情况改变的原因的图像,根据到发生移动情况改变的位置的距离和移动情况改变的原因,该对象图像可以具有不同的形状和颜色。
移动装置1的移动情况的改变的原因可以包括交通拥堵和交通事故中的至少一个,并且可以包括与到目的地的到达时间的改变相对应的路线的改变。
当基于当前位置信息和到拐点的距离信息确定到拐点的距离大于或等于第一参考距离时,移动装置1可以基于当前位置信息、路线信息、地图信息和目的地的位置信息,基于增强现实图像中的当前位置的显示位置来识别目的地的方向,并且可以显示从当前位置的显示位置指向目的地的方向的拐点的对象图像。指向目的地的方向的拐点的对象图像可以是虚线图像AR4。
当基于从当前位置到拐点的距离信息确定到拐点的距离大于或等于第二参考距离并且小于第一参考距离时,移动装置1可以显示长距离拐点的对象图像,并且当确定到拐点的距离小于第二参考距离时,可以显示短距离拐点的对象图像。
长距离拐点的对象图像可以显示为点图像,并且从当前位置到围绕点图像的拐点的距离信息可以显示为文本图像。
当显示长距离拐点的对象图像时,当交通状况是平稳状况时,对象图像可以显示为第一颜色的点图像,当发生交通拥堵或交通事故时,对象图像可以显示为第二颜色的点图像,以及当路线改变为替代路线时,对象图像可以显示为第三颜色的点图像。
短距离拐点的对象图像可以显示为箭头图像。
当显示短距离拐点的对象图像时,当保持主要路线时,对象图像可以显示为第一颜色的箭头图像,当发生交通拥堵或交通事故时,对象图像可以显示为第二颜色的箭头图像,以及当路线改变为替代路线时,对象图像可以显示为第三颜色的箭头图像。
在增强现实图像中显示拐点的对象图像之后,移动装置1识别虚线图像的显示位置、短距离拐点的对象图像(即,箭头图像)的显示位置和长距离拐点的对象图像(即,点图像)的显示位置是否彼此一致,并且响应于识别结果额外显示路线引导信息(180)。
当确定增强现实图像中的虚线图像的显示位置与箭头图像的显示位置一致,并且虚线图像的显示位置与点图像的显示位置一致时,移动装置1可以显示关于到目的地的剩余时间和剩余距离的信息,显示关于要移动到目的地的道路名称的道路名称信息以及左转弯和右转弯信息,基于交通信息改变短距离拐点的图像和长距离拐点的图像的颜色,以及当确定当前位置邻近目的地时控制路线引导直到到达目的地。
移动装置1可以基于移动速度信息确定移动速度是否小于参考速度;当确定移动速度小于参考速度时,基于当前位置信息和目的地的位置信息确定从当前位置到目的地的距离是否小于或等于设定距离;当确定从当前位置到目的地的距离小于或等于设定距离时,识别与目的地信息相对应的对象图像;以及控制显示设备112在所识别的对象的图像上显示指示目的地的对象图像。
移动装置1可以在从出发时间点移动期间一起显示导航图像和增强现实图像,并且当确定当前时间点与关于到达时间的信息相对应时,可以通过切换图像显示模式来显示增强现实图像。
当在从出发时间点移动期间一起显示导航图像和增强现实图像时,移动装置1可以在导航图像上仅显示增强现实图像中的对象图像。
当确定当前时间点与关于到达时间的信息相对应时,移动装置1可以分别显示增强现实图像和导航图像,同时显示大于导航图像的增强现实图像。在这种情况下,移动装置1可以在显示增强现实图像时获得的周围图像上显示对象图像。当目的地改变时,移动装置1可以显示关于改变的目的地的可能到达时间的信息。
当确定当前位置邻近目的地时,移动装置1可以删除导航图像并在显示设备112的整个区域上显示增强现实图像,并且在增强现实图像上显示用于引导到目的地的路线的箭头图像和直线图像。
当确定虚线图像的显示位置与箭头图像的显示位置一致并且虚线图像的显示位置与点图像的显示位置不一致时,移动装置1附加地将交通信息显示为文本图像。在这种情况下,移动装置1可以基于交通信息改变长距离拐点的图像的颜色,并且仅在特定时间段内将交通信息显示为文本图像。
当确定虚线图像的显示位置与箭头图像的显示位置不一致并且虚线图像的显示位置与点图像的显示位置不一致时,移动装置1显示交通信息和替代路线信息。
交通信息可以包括指示交通拥堵或交通事故的象形图图像信息。
移动装置1可以在执行导航功能期间基于当前位置信息和目的地信息来确定当前位置是否邻近目的地(181),并且当确定当前位置邻近目的地时可以切换到增强现实图像。
确定当前位置是否邻近目的地可以包括:基于当前位置信息和目的地信息获得当前位置与目的地之间的距离信息;以及当基于所获得的距离信息和预定距离信息确定当前位置与目的地之间的距离小于或等于预定距离时,确定当前位置邻近目的地。
移动装置1可以基于目的地的预期到达时间和当前时间来确定当前位置是否邻近目的地。即,移动装置1可以基于目的地的预期到达时间和当前时间来获得直到到达目的地的剩余时间,并且当所获得的剩余时间小于或等于预定时间段时,确定当前位置邻近目的地。
当确定当前位置邻近目的地时,移动装置1可以基于地图信息、由图像获得设备140获得的图像信息和目的地信息来识别由图像获得设备140获得的图像中的对象图像中与目的地信息相对应的对象图像(182),并基于所识别的对象图像的显示位置信息来显示用于强调目的地的强调的对象图像。
用于强调目的地的强调的对象图像可以包括用于在视觉上识别与目的地信息相对应的对象图像的高亮图像或多边形图像,并且可以包括由虚线形成的多边形图像。
用于强调目的地的强调的对象图像可以包括与对象图像的区域重叠的预设颜色的多边形图像。
当基于移动速度信息确定移动速度小于参考速度并且到目的地的距离小于预定距离时,移动装置1可以确定平面检测是否可能(183),当确定平面检测可能时,在与对象图像相邻的位置处显示锚定标记图像(184),以及当确定平面检测不可能时,在对象图像上显示虚线图形图像(185)。
锚定标记图像的显示可以包括:识别与目的地信息相对应的对象图像;基于所识别的对象图像的位置信息识别垂直平面;基于所识别的垂直平面的位置信息显示网格图像;以及基于网格图像的位置信息和对象图像的位置信息显示锚定标记图像。
移动装置1可以识别与目的地信息相对应的对象图像,并将除所识别的对象图像(即,第一对象图像)之外的其余对象图像(即,第二对象图像)的透明度调整为不同于第一对象图像的透明度。
当由用户接收目的地到达命令时,移动装置1可以终止增强现实应用和导航应用。
图13是根据本发明的另一示例性实施例的车辆的控制示意图。
车辆3包括具有外部和内部的主体,以及其中安装有驾驶所需的机械设备作为除主体之外的其余部分的底盘。
车辆3的底盘(其是用于支撑主体的框架)设置有分别布置在前、后、左和右的车轮、被配置用于向前、后、左和右车轮提供驱动力的动力设备、转向设备、被配置用于向前、后、左和右车轮提供制动力的制动设备、以及被配置用于调整车辆3的悬挂的悬挂设备。
主体的外部包括前面板、发动机罩、车顶面板、后面板、前门、后门、左门、右门以及分别设置在前门、后门、左门、右门上以打开和关闭的窗玻璃。
主体的外部进一步包括天线,用于接收来自全球定位系统(GPS)卫星、广播站等的信号,并执行无线车辆网络(车辆对一切(V2X)),诸如与其他车辆的通信(V2V)和与基础设施的通信(V2I)。
主体的内部包括乘员所坐的座椅,仪表板,布置在仪表板上并包括转速表、速度表、冷却液温度计、燃油表、转向指示器、远光灯指示器、警示灯、安全带警示灯、车程计、里程表、变速杆指示灯、车门打开警示灯、发动机油警示灯和低燃油警示灯的仪表板(即,仪表盘),设置有空调的通风口和控制面板的中央面板,以及设置在中央面板上以接收音频设备和空调的操作命令的主机单元。
为了用户方便,车辆3包括车辆终端310。车辆终端310可以以埋入或安装的方式安装在仪表板上。
车辆终端310可以接收用户输入,并将关于在车辆3中执行的各种功能的信息显示为图像。
各种功能可以包括音频功能、视频功能、导航功能、广播功能、无线电功能、内容再现功能以及因特网搜索功能中由用户安装的至少一个应用的功能。
车辆终端310可以包括作为显示设备的显示面板,并且可以进一步包括作为输入设备的触摸面板。车辆终端310可以仅包括显示面板或其中触摸面板与显示面板集成的触摸屏。
当仅用显示面板实施车辆终端310时,可以使用设置在中央面板上的输入设备来选择显示面板上显示的按钮。
车辆终端310可以包括输入设备和显示设备。车辆3的输入设备和显示设备与移动装置的输入设备和显示设备相同,并且因此省略其描述。
根据本发明的各种示例性实施例,车辆终端310可以执行由移动装置的控制器执行的各种控制功能。由车辆终端310执行的导航功能和增强现实功能的控制配置与由根据本发明的各种示例性实施例的移动装置的控制器执行的功能的控制配置相同,并且因此将省略其描述。
车辆终端310可以进一步包括被配置用于存储POI的地图信息和位置信息的存储设备。
声音输出设备320将与当前正在车辆3中执行的功能相对应的音频数据输出为声音。
当前正在执行的功能可以是无线电功能、与内容再现和音乐再现相对应的音频功能以及导航功能。
声音输出设备320可以包括扬声器。可以设置一个或多个扬声器。
扬声器可以设置在车辆终端310中。
位置接收器330包括全球定位系统(GPS)接收器和被配置用于处理从GPS接收器获得的GPS信号的信号处理设备。
车辆3可以进一步包括用于获得周围图像的图像获得设备340。图像获得设备340可以是设置在黑匣子中的图像获得设备,可以是被配置用于自动驾驶的自动驾驶控制设备的图像获得设备,或者可以是被配置用于障碍物检测的图像获得设备。
图像获得设备340可以设置在前窗玻璃上,但也可以设置在车辆3内部的窗玻璃上,可以设置在车辆3内部的后视镜上,或者可以设置在车顶面板上以暴露于外部。
图像获得设备340可以进一步包括用于获得车辆3的左侧和右侧的图像的左相机和右相机中的至少一个、用于获得车辆3的后部的图像的后相机以及用于获得车辆3的前部的图像的前相机。
图像获得设备340可以包括作为相机的CCD或CMOS图像传感器,并且可以包括诸如RGB-D传感器(KINECT)、结构光传感器(TOF)和立体相机的三维空间识别传感器。
车辆3可以进一步包括用于在各种内部电子设备之间进行通信、与用户终端进行通信以及与服务器进行通信的通信设备350。
通信设备350可以通过天线与外部设备通信。
外部设备可以包括服务器、用户终端、其他车辆和基础设施中的至少一个。
使用天线的通信方法可以包括:第二代(2G)通信方法,诸如时分多址(TDMA)和码分多址(CDMA);第三代(3G)通信方法,诸如宽带码分多址(WCDMA)、码分多址2000(CDMA2000)、无线宽带互联网(WiBro)和全球微波接入互操作性(WiMAX);第四代(4G)通信方法,诸如长期演进(LTE)和无线宽带演进(WBE);或者第五代(5G)通信方法。
控制器360控制车辆终端310与图像获得设备340、位置接收器330和声音输出设备320之间的通信。
控制器360可以将图像获得设备340的图像信息发送到车辆终端310,可以将位置接收器330的位置信息发送到车辆终端310,并且可以将车辆终端310的声音信息发送到声音输出设备320。
车辆3可以进一步包括用于检测行驶速度(即,车辆的移动速度)的速度检测器370。
速度检测器370可以是设置在多个车轮中的每一个上的车轮速度传感器,或者可以是加速度传感器。
控制器360可以基于由多个车轮速度传感器检测到的车轮速度来获得车辆3的行驶速度,可以基于由加速度传感器检测到的加速度来获得车辆3的行驶速度,或者可以基于由多个车轮速度传感器检测到的车轮速度和由加速度传感器检测到的加速度来获得车辆的行驶速度。
控制器360可以将所获得的行驶速度发送到车辆终端310,以获得目的地的预期到达时间或直到目的地的剩余时间。
根据本发明的各种示例性实施例,控制器360还可以执行由移动装置的控制器执行的所有控制操作。
根据图13所示的车辆3的组件的性能,可以添加或删除至少一个组件。本领域技术人员将容易理解,组件的相互位置可以根据系统的性能或结构而改变。
图13所示的每个组件表示诸如现场可编程门阵列(FPGA)和专用集成电路(ASIC)的软件和/或硬件组件。
这里,所公开的示例性实施例可以以存储可由计算机执行的指令的记录介质的形式来实施。指令可以以程序代码的形式存储,并且当由处理器执行时,可以创建程序模块以执行所公开的示例性实施例的操作。记录介质可以被实施为计算机可读记录介质。
计算机可读记录介质包括各种记录介质,在该记录介质中存储可以由计算机解密的指令。例如,可以存在只读存储器(ROM)、随机存取存储器(RAM)、磁带、磁盘、闪存和光学数据存储设备等。
如从以上显而易见的,本发明通过平面检测技术和云锚定技术使用对象图像显示目的地的位置,可以允许用户舒适和容易地行驶到目的地,保持商业服务的实用性。
此外,本发明可以允许用户通过使用增强现实功能的对象图像来强调或调整透明度地显示诸如目的地的受关注点(POI),从而准确地识别目的地的位置。
此外,本发明通过增强现实功能通过对象图像显示目的地的方向和拐点的位置,并显示拥堵路段和事故路段,并实时地建议替代路线,从而允许用户了解整个路线引导情况。
因此,本发明可以提高移动装置和车辆的质量和适销性,增加用户满意度,提高用户的便利性、可靠性和车辆安全性,并确保产品竞争力。
为了方便解释和准确地定义所附权利要求,术语“在…上部”、“在…下部”、“在…内”、“在…外”、“在…上”、“在…下”、“向上”、“向下”、“前面”、“后面”、“背面”、“在…里面”、“在…外面”、向内、“向外”、“在…内部”、“在…外部”、“内部”、“外部”、“向前”和“向后”用于参考如在附图中显示的这样的特征的位置来描述示例性实施例的特征。还将理解,术语“连接”或其派生词既指直接连接又指间接连接。
为了说明和描述的目的,已经呈现了对本发明的具体示例性实施例的前述描述。它们并不旨在穷举或将本发明限制于所公开的精确形式,并且显然,根据上述教导,可以进行许多修改和变化。选择和描述示例性实施例是为了解释本发明的某些原理及其实际应用,以使本领域的其他技术人员能够制造和利用本发明的各种示例性实施例,以及其各种替代方案和修改。本发明的范围旨在由所附权利要求及其等同物来限定。
Claims (21)
1.一种移动装置,包括:
输入设备,被配置为接收用户输入;
位置接收器,被配置为接收用于获得当前位置的位置信息;
图像获得设备,被配置为获得周围环境的图像;
显示设备,被配置为响应于增强现实模式的执行而显示从所述图像获得设备获得的周围图像;以及
控制器,被配置为当在所述增强现实模式的所述执行期间从所述用户输入接收目的地信息时,搜索从所述当前位置到目的地的路线,根据与所搜索的路线相对应的路线信息识别移动情况,根据关于所识别的移动情况的信息获得所述移动情况改变的拐点的位置信息,以及根据所述拐点的所述位置信息和当前位置信息控制所述显示设备在所述显示设备上显示的所述周围图像上显示所述拐点的对象图像。
2.根据权利要求1所述的移动装置,
其中,所述控制器被配置为根据所述当前位置信息和所述拐点的所述位置信息获得从所述当前位置到所述拐点的距离信息,以及根据所获得的距离信息改变所述拐点的所述对象图像的显示信息,并且
其中,所述拐点的所述对象图像的所述显示信息包括所述对象图像的形状信息和颜色信息中的至少一个。
3.根据权利要求2所述的移动装置,其中,当所述控制器断定到所述拐点的距离大于或等于第一参考距离时,所述控制器被配置为根据所述当前位置信息、所述目的地信息和地图信息识别所述目的地的方向,并且控制所述显示设备在所述显示设备上显示的所述周围图像上显示从所述当前位置定向到所述目的地的方向的对象图像。
4.根据权利要求2所述的移动装置,
其中,当所述控制器断定到所述拐点的距离小于第一参考距离并且大于或等于第二参考距离时,所述控制器被配置为基于所述拐点的位置和地图信息控制所述显示设备在所述周围图像上显示长距离拐点的对象图像,并且
其中,所述第一参考距离长于所述第二参考距离。
5.根据权利要求4所述的移动装置,其中,所述控制器被配置为当所述控制器根据所述路线信息断定在预设距离内存在多个所述拐点时,将所述第二参考距离改变为第三参考距离。
6.根据权利要求4所述的移动装置,
其中,根据关于所识别的移动情况的信息,所述控制器被配置为控制所述显示设备:
当所述控制器断定所述移动情况是平稳情况时,以第一颜色显示所述长距离拐点的所述对象图像,
当所述控制器断定所述移动情况是拥堵情况或事故情况时,以第二颜色显示所述长距离拐点的所述对象图像,以及
当所述控制器断定所述移动情况是路线改变情况时,以第三颜色显示所述长距离拐点的所述对象图像。
7.根据权利要求6所述的移动装置,
其中,当由所述控制器接收交通信息时,所述控制器被配置为根据所接收的交通信息、所述目的地信息、所述当前位置信息、所述路线信息和所述地图信息来确定路线改变是否是必要的。
8.根据权利要求5所述的移动装置,
其中,当所述控制器断定到所述拐点的距离小于所述第二参考距离时,所述控制器被配置为基于所述拐点的所述位置和所述地图信息控制所述显示设备在所述周围图像上显示短距离拐点的对象图像。
9.根据权利要求8所述的移动装置,其中,根据关于所识别的移动情况的信息,所述控制器被配置为控制所述显示设备:
当所述控制器断定所述移动情况是路线保持情况时,以第一颜色显示所述短距离拐点的所述对象图像,
当所述控制器断定所述移动情况是拥堵情况或事故情况时,以第二颜色显示所述短距离拐点的所述对象图像,以及
当所述控制器断定所述移动情况是路线改变情况时,以第三颜色显示所述短距离拐点的所述对象图像。
10.根据权利要求8所述的移动装置,
其中,所述控制器被配置为当所述控制器断定定向对象图像的显示位置与所述短距离拐点的所述对象图像的显示位置一致并且与所述长距离拐点的所述对象图像的显示位置不一致时,控制所述显示设备显示交通信息。
11.根据权利要求8所述的移动装置,
其中,所述控制器被配置为当所述控制器断定定向对象图像的显示位置与所述短距离拐点的所述对象图像的显示位置不一致并且与所述长距离拐点的所述对象图像的显示位置不一致时,控制所述显示设备显示交通信息和替代路线信息。
12.根据权利要求1所述的移动装置,
其中,所述控制器被配置为根据所述目的地信息、所述当前位置信息、所述路线信息和地图信息来确定到所述目的地的距离是否小于或等于预定距离,
其中,所述控制器被配置为当所述控制器断定到所述目的地的所述距离小于或等于所述预定距离时,从所述周围图像识别与所述目的地信息相对应的目的地图像,并且
其中,所述控制器被配置为控制所述显示设备在所识别的目的地图像上重叠和显示强调的对象图像。
13.根据权利要求12所述的移动装置,
其中,所述控制器被配置为根据所述目的地信息、所述当前位置信息、所述路线信息和所述地图信息来确定到所述目的地的所述距离是否小于或等于所述预定距离,
其中,所述控制器被配置为当所述控制器断定到所述目的地的所述距离小于或等于所述预定距离时,从所述周围图像识别与所述目的地信息相对应的所述目的地图像,并且
其中,所述控制器被配置为控制所识别的目的地图像和剩余图像的透明度彼此不同。
14.根据权利要求12所述的移动装置,其中,所述控制器被配置为:
从所述周围图像识别与所述目的地图像相邻的地面图像,
控制所述显示设备在所识别的地面图像上显示网格状对象图像,以及
控制所述显示设备在所述目的地图像上重叠和显示锚定标记图像。
15.一种车辆,包括:
输入设备,被配置为接收用户输入;
位置接收器,被配置为接收用于获得当前位置的位置信息;
速度检测器,被配置为检测行驶速度;
图像获得设备,被配置为获得周围环境的图像;
显示设备,被配置为响应于增强现实模式的执行而显示从所述图像获得设备获得的周围图像;以及
控制器,被配置为当在所述增强现实模式和导航模式的交互期间从所述用户输入接收目的地信息时,搜索从所述当前位置到目的地的路线,根据与所搜索的路线相对应的路线信息和由所述速度检测器检测的行驶速度信息识别移动情况,根据关于所识别的移动情况的信息获得所述移动情况改变的拐点的位置信息,以及根据所述拐点的所述位置信息和当前位置信息控制所述显示设备在所述显示设备上显示的所述周围图像上显示所述拐点的对象图像。
16.根据权利要求15所述的车辆,
其中,所述控制器被配置为根据所述当前位置信息和所述拐点的所述位置信息获得从所述当前位置到所述拐点的距离信息,以及根据所获得的距离信息改变所述拐点的所述对象图像的显示信息,并且
其中,所述拐点的所述对象图像的所述显示信息包括所述对象图像的形状信息和颜色信息中的至少一个。
17.根据权利要求16所述的车辆,其中,
当所述控制器断定到所述拐点的距离大于或等于第一参考距离时,所述控制器被配置为根据所述当前位置信息、所述目的地信息和地图信息识别所述目的地的方向,并且控制所述显示设备在所述显示设备上显示的所述周围图像上显示从所述当前位置定向到所述目的地的方向的对象图像,
当所述控制器断定到所述拐点的距离小于所述第一参考距离并且大于或等于第二参考距离时,所述控制器被配置为基于所述拐点的位置和所述地图信息控制所述显示设备在所述周围图像上显示长距离拐点的对象图像,以及
当所述控制器断定到所述拐点的距离小于所述第二参考距离时,所述控制器被配置为基于所述拐点的所述位置和所述地图信息控制所述显示设备在所述周围图像上显示短距离拐点的对象图像,并且
其中,所述第一参考距离长于所述第二参考距离。
18.根据权利要求17所述的车辆,
其中,所述控制器被配置为当所述控制器断定定向对象图像的显示位置与所述短距离拐点的所述对象图像的显示位置一致并且与所述长距离拐点的所述对象图像的显示位置不一致时,控制所述显示设备显示交通信息,并且
其中,所述控制器被配置为当所述控制器断定所述定向对象图像的显示位置与所述短距离拐点的所述对象图像的显示位置不一致并且与所述长距离拐点的所述对象图像的显示位置不一致时,控制所述显示设备显示所述交通信息和替代路线信息。
19.根据权利要求15所述的车辆,
其中,当由所述控制器接收交通信息时,所述控制器被配置为基于所接收的交通信息、所述目的地信息、所述当前位置信息、所述路线信息和地图信息来确定路线改变是否是必要的,并且当所述控制器断定所述路线改变是必要的时将改变所述路线的点识别为拐点。
20.根据权利要求15所述的车辆,其中,所述控制器被配置为:
根据所述目的地信息、所述当前位置信息、所述路线信息、所述行驶速度信息和地图信息来确定到所述目的地的距离是否小于或等于预定距离,
当所述控制器断定到所述目的地的所述距离小于或等于所述预定距离时,从所述周围图像识别与所述目的地信息相对应的目的地图像,并且
控制所述显示设备在所识别的目的地图像上重叠和显示强调的对象图像。
21.根据权利要求15所述的车辆,其中,
当搜索从所述当前位置到所述目的地的所述路线时,所述控制器被配置为根据由所述位置接收器获得的所述当前位置信息、所述目的地信息和地图信息搜索从所述当前位置到所述目的地的所述路线,并且
当控制所述显示设备在所述显示设备上显示的所述周围图像上显示所述拐点的所述对象图像时,所述控制器被配置为根据所述拐点的所述位置信息、所述地图信息和所述当前位置信息控制所述显示设备在所述显示设备上显示的所述周围图像上显示所述拐点的所述对象图像。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020210068280A KR20220160279A (ko) | 2021-05-27 | 2021-05-27 | 모바일 장치 및 차량 |
KR10-2021-0068280 | 2021-05-27 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN115408623A true CN115408623A (zh) | 2022-11-29 |
Family
ID=84157617
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210117038.1A Pending CN115408623A (zh) | 2021-05-27 | 2022-02-07 | 移动装置和车辆 |
Country Status (3)
Country | Link |
---|---|
US (1) | US20220381578A1 (zh) |
KR (1) | KR20220160279A (zh) |
CN (1) | CN115408623A (zh) |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20080027659A (ko) * | 2006-09-25 | 2008-03-28 | 엘지전자 주식회사 | 교통정보 표시장치 및 그 방법 |
DE102017207243A1 (de) * | 2017-04-28 | 2018-10-31 | Continental Automotive Gmbh | Verfahren und Einrichtung zum Erzeugen von dynamischen Hinweisen über eine Änderung einer Routenführung |
US11024059B2 (en) * | 2018-12-06 | 2021-06-01 | Lg Electronics Inc. | Method for providing XR contents and XR device for providing XR contents |
-
2021
- 2021-05-27 KR KR1020210068280A patent/KR20220160279A/ko active Search and Examination
-
2022
- 2022-02-07 CN CN202210117038.1A patent/CN115408623A/zh active Pending
- 2022-02-22 US US17/677,765 patent/US20220381578A1/en active Pending
Also Published As
Publication number | Publication date |
---|---|
US20220381578A1 (en) | 2022-12-01 |
KR20220160279A (ko) | 2022-12-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6659359B2 (ja) | ナビゲーション装置を使用して情報を提供する方法及び装置 | |
US9739632B2 (en) | Methods and systems of providing information using a navigation apparatus | |
WO2020060308A1 (ko) | 전자 장치 및 전자 장치의 차량 제어 방법, 서버 및 서버의 정밀 지도 데이터 제공 방법 | |
KR102300836B1 (ko) | 자율 주행 제어 장치, 그를 가지는 차량 및 그 제어 방법 | |
US9470543B2 (en) | Navigation apparatus | |
US20140063044A1 (en) | Navigation apparatus and display method thereof | |
EP3303998B1 (en) | Traffic notifications during navigation | |
US20220196427A1 (en) | Mobile Device and Vehicle | |
US20110319099A1 (en) | Navigation or mapping system and method | |
US10157187B2 (en) | Information terminal and program | |
JP2013019855A (ja) | 走行案内装置、走行案内方法及びコンピュータプログラム | |
KR20100072971A (ko) | 네비게이션 단말기 및 네비게이션 단말기의 경로 안내 방법 | |
JP4798549B2 (ja) | 車載用ナビゲーション装置 | |
KR101866732B1 (ko) | 탑승자 위치 인식 방법과 이를 위한 차량 | |
CN115408623A (zh) | 移动装置和车辆 | |
KR20180039892A (ko) | 내비게이션 장치, 이를 포함하는 차량 및 차량의 제어방법 | |
JP4723266B2 (ja) | ナビゲーション装置、ナビゲーション方法及びナビゲーションプログラム | |
JP2019132789A (ja) | 情報表示システムおよび情報表示プログラム | |
US20230315280A1 (en) | Information display device and program | |
US20120253666A1 (en) | Movement guidance display system, movement guidance display method, and computer program | |
KR102531869B1 (ko) | 데이터 처리 장치, 그를 가지는 차량 및 그 제어 방법 | |
CN114383623A (zh) | 导航装置 | |
KR20150125403A (ko) | 차량 내비게이션 장치 및 그 제어 방법 | |
JPWO2008146377A1 (ja) | 経路誘導装置、経路誘導方法、経路誘導プログラムおよび記録媒体 | |
JP2019132788A (ja) | 情報表示システムおよび情報表示プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |