KR20180082402A - 목적지에서 3d 헬리콥터 뷰를 갖는 인터렉티브 3d 네비게이션 시스템 - Google Patents
목적지에서 3d 헬리콥터 뷰를 갖는 인터렉티브 3d 네비게이션 시스템 Download PDFInfo
- Publication number
- KR20180082402A KR20180082402A KR1020180080191A KR20180080191A KR20180082402A KR 20180082402 A KR20180082402 A KR 20180082402A KR 1020180080191 A KR1020180080191 A KR 1020180080191A KR 20180080191 A KR20180080191 A KR 20180080191A KR 20180082402 A KR20180082402 A KR 20180082402A
- Authority
- KR
- South Korea
- Prior art keywords
- user
- vantage
- destination
- video preview
- timing
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3626—Details of the output of route guidance instructions
- G01C21/3635—Guidance using 3D or perspective road maps
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3626—Details of the output of route guidance instructions
- G01C21/3635—Guidance using 3D or perspective road maps
- G01C21/3638—Guidance using 3D or perspective road maps including 3D objects and buildings
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/10—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 by using measurements of speed or acceleration
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3602—Input other than that of destination using image analysis, e.g. detection of road signs, lanes, buildings, real preceding vehicles using a camera
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3605—Destination input or retrieval
- G01C21/3614—Destination input or retrieval through interaction with a road map, e.g. selecting a POI icon on a road map
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3626—Details of the output of route guidance instructions
- G01C21/3644—Landmark guidance, e.g. using POIs or conspicuous other objects
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3626—Details of the output of route guidance instructions
- G01C21/3647—Guidance involving output of stored or live camera images or video streams
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3667—Display of a road map
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/29—Geographical information databases
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
- G06T17/05—Geographic models
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/003—Navigation within 3D models or images
Landscapes
- Engineering & Computer Science (AREA)
- Remote Sensing (AREA)
- Radar, Positioning & Navigation (AREA)
- Physics & Mathematics (AREA)
- Automation & Control Theory (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Software Systems (AREA)
- Geometry (AREA)
- Databases & Information Systems (AREA)
- Computer Graphics (AREA)
- General Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Data Mining & Analysis (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Computer Hardware Design (AREA)
- Navigation (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
인터렉티브 차량 네비게이션 시스템은 목적지에 도착하기 위한 네비게이션 명령뿐만 아니라, 목적지에서 주변의 인식 가능한 랜드 마크의 3차원 화상을 포함하여, 특정한 목적지의 사실적인 뷰를 제공하는 3차원(3D) 동영상 프리뷰를 제공한다. 3D 동영상 프리뷰가 발생되는 뷰의 지점은 노상 보다 높은 뷰의 지점처럼, 사용자의 뷰에 대한 장애물을 피하는 현장의 밴티지를 제공하도록 선택된다.
Description
본 발명은 차량 네비게이션 시스템을 위한 시스템, 부품, 및 방법에 관한 것이다. 특히, 본 발명은 목적지에서 주변의 고도 뷰(elevated view)를 제공하는 능력뿐만 아니라 사용자에게 네비게이션 명령을 제공하는 시스템, 부품, 및 방법에 관한 것이다.
본 발명에 따라, 사용자에게 네비게이션 명령을 제공하기 위한 시스템, 부품, 및 방법이 제공된다.
예시적인 실시예에 있어서, 차량 네비게이션 시스템은 사용자가 경로를 따라 터언(turn)에서 따라야 할 명령을 포함하는 경로 안내를 사용자에게 제공한다. 3차원(3D) 동영상 프리뷰(animated preview)는 목적지에서 주변의 인식 가능한 랜드 마크의 3차원 화상(imagery)을 포함하여, 특정한 목적지의 사실적인 뷰(view)를 제공한다.
실시예에 따라, 3D 동영상 프리뷰가 발생되는 뷰의 지점은, 노상(street level) 보다 높은 뷰의 지점처럼, 사용자의 시야에 대한 장애물을 피하는 현장의 밴티지(vantage)를 제공하도록 선택된다. 사실적인 3D 동영상 프리뷰는 사용자가 차량 네비게이션 시스템에 의해 이송된 목적지에서 주변의 특성을 이해하는 것을 더욱 용이하게 한다.
예시적인 실시예에 있어서, 네비게이션 시스템은 조향휠 버튼, 터치스크린, 음성 제어 기능부와 같은, 사용자로 하여금 3D 동영상 프리뷰의 디스플레이를 트리거할 수 있게 하는 사용자 제어부, 또는 다른 형태의 사용자 제어부를 포함한다. 상기 사용자 제어부는 사용자로 하여금 3D 동영상 프리뷰를 보는 것이 편리하거나 또는 안전할 때와 같은 원하는 시간에 3D 동영상 프리뷰를 볼 수 있게 한다. 이는, 사용자가 운전에 집중하고 있을 때처럼, 사용자가 이에 대해 준비되지 않았을 때, 네비게이션 명령에 의해 사용자가 중단되는 것을 방지한다. 사용자 제어부는 사용자가 경로를 따라 3D 동영상 프리뷰를 통해 반복하거나 또는 프리뷰로의 특정한 터언을 선택할 수 있게 한다. 네비게이션 시스템은, 차량이 이동 중일 때 안전 고려사항으로 인해 3D 동영상 프리뷰의 디스플레이를 차단할 수 있으며, 또한 차량이 정지되었을 때 3D 동영상 프리뷰의 디스플레이를 허용할 수 있다.
본 발명의 추가적인 특징은 이제 인지되는 바와 같이 본 발명을 실시하는 최적의 모드를 예시화한 도시된 실시예를 고려하여 본 기술분야의 숙련자에게 명백해질 것이다.
상세한 설명은 특히 첨부한 도면을 언급하고 있다.
도 1은 인터렉티브 3D 네비게이션 시스템이 경로 안내를 수신하기 위해 네비게이션 서버와 통신하는 것을 도시한 본 발명에 따른 인터렉티브 3D 네비게이션 시스템의 개략적인 도면이며, 또한 출발지와 목적지 사이의 경로를 선택하기 위한 경로 선택기, 프리뷰를 위해 밴티지를 계산하기 위한 밴티지 제어기, 프리뷰의 동영상 속도를 지배하는 타이밍 정보를 계산하기 위한 타이밍 제어기, 3D 동영상 프리뷰를 탐색하고 그리고 동영상 프리뷰 상에 명령을 오버레이하기 위한 명령 오버레이 집적기(integrator), 3D 동영상 프리뷰를 렌더링하기 위한 디스플레이, 사용자로 하여금 인터렉티브 3D 네비게이션 시스템과 상호작용할 수 있게 하는 사용자 제어 시스템, 차량 속도를 결정하고 이를 인터렉티브 3D 네비게이션 시스템에 통신시키기 위한 차량 속도 검출기, 및 인터렉티브 3D 네비게이션 시스템이 이를 통해 3D 이미지 데이터를 탐색할 수 있는 3D 이미지 서비스를 포함할 수 있다.
도 2는 사용자로 하여금 터언을 선택하거나 또는 3D 동영상 프리뷰를 통해 프리뷰되는 터언용 밴티지를 선택할 수 있게 하는, 본 발명에 따른 사용자 제어 버튼을 구비한 조향휠의 정면 사시도이다.
도 3은 밴티지 선택 공정이 이미지 데이터 처리 단계, 장애물을 식별하는 단계, 밴티지를 조정하는 단계, 위치, 배향, 및 시야를 포함하는 단계, 및 상기 장애물이 제거되었는지의 여부를 결정하는 단계의 공정들을 포함하는 것을 도시한, 본 발명에 따른 인터렉티브 3D 네비게이션 시스템의 밴티지 선택 공정의 개략적인 도면이다.
도 4는 차량 속도 검출 공정이 차량 속도를 검출하는 단계, 차량이 정지되었는지의 여부를 결정하는 단계, 차량이 정지되었는지의 결정에 응답하여 3D 동영상 프리뷰를 디스플레이하는 단계, 및 차량이 이동 중이라는 결정에 응답하여 정지 화상을 디스플레이하는 단계의 공정들을 포함하는 것을 도시한, 본 발명에 따른 인터렉티브 3D 네비게이션 시스템의 차량 속도 검출 공정의 개략적인 도면이다.
도 5는 사용자가 네비게이션 시스템에 특정된 목적지의 헬리콥터 뷰의 디스플레이를 트리거할 수 있음을 도시하는, 본 발명에 따른 인터렉티브 3D 네비게이션 시스템의 예시적인 사용을 도시한 흐름도이다.
도 6은 헬리콥터 뷰의 기능성을 제공하는데 사용되는 도 1에 도시된 네비게이션 시스템(100)의 부품들을 도시하고 있다.
도 7 및 도 8은 타이밍 제어기의 작동 및 카메라 매개변수 계산을 가능하게 하는, 수행된 작동에 관한 추가적인 세부사항을 제공하고 있다.
도 9는 일부 통상적인 시스템에 유용한 목적지 뷰의 타입의 예를 도시하고 있다.
도 10은 헬리콥터 뷰, 음성 명령 등을 작동하기 위해 버튼을 누르는 사용자/운전자에 기인할 수 있는 고도형 사시도(elevated perspective)로부터 동영상의 디스플레이를 도시하고 있다.
도 11-14는 동영상(다수의 뷰)을 제공하도록 실시되었을 때, 특정한 목적지 둘레로 회전을 제공하기 위해 결과적인 화상이 디스플레이될 수 있는 방법을 도시하고 있다.
도 2는 사용자로 하여금 터언을 선택하거나 또는 3D 동영상 프리뷰를 통해 프리뷰되는 터언용 밴티지를 선택할 수 있게 하는, 본 발명에 따른 사용자 제어 버튼을 구비한 조향휠의 정면 사시도이다.
도 3은 밴티지 선택 공정이 이미지 데이터 처리 단계, 장애물을 식별하는 단계, 밴티지를 조정하는 단계, 위치, 배향, 및 시야를 포함하는 단계, 및 상기 장애물이 제거되었는지의 여부를 결정하는 단계의 공정들을 포함하는 것을 도시한, 본 발명에 따른 인터렉티브 3D 네비게이션 시스템의 밴티지 선택 공정의 개략적인 도면이다.
도 4는 차량 속도 검출 공정이 차량 속도를 검출하는 단계, 차량이 정지되었는지의 여부를 결정하는 단계, 차량이 정지되었는지의 결정에 응답하여 3D 동영상 프리뷰를 디스플레이하는 단계, 및 차량이 이동 중이라는 결정에 응답하여 정지 화상을 디스플레이하는 단계의 공정들을 포함하는 것을 도시한, 본 발명에 따른 인터렉티브 3D 네비게이션 시스템의 차량 속도 검출 공정의 개략적인 도면이다.
도 5는 사용자가 네비게이션 시스템에 특정된 목적지의 헬리콥터 뷰의 디스플레이를 트리거할 수 있음을 도시하는, 본 발명에 따른 인터렉티브 3D 네비게이션 시스템의 예시적인 사용을 도시한 흐름도이다.
도 6은 헬리콥터 뷰의 기능성을 제공하는데 사용되는 도 1에 도시된 네비게이션 시스템(100)의 부품들을 도시하고 있다.
도 7 및 도 8은 타이밍 제어기의 작동 및 카메라 매개변수 계산을 가능하게 하는, 수행된 작동에 관한 추가적인 세부사항을 제공하고 있다.
도 9는 일부 통상적인 시스템에 유용한 목적지 뷰의 타입의 예를 도시하고 있다.
도 10은 헬리콥터 뷰, 음성 명령 등을 작동하기 위해 버튼을 누르는 사용자/운전자에 기인할 수 있는 고도형 사시도(elevated perspective)로부터 동영상의 디스플레이를 도시하고 있다.
도 11-14는 동영상(다수의 뷰)을 제공하도록 실시되었을 때, 특정한 목적지 둘레로 회전을 제공하기 위해 결과적인 화상이 디스플레이될 수 있는 방법을 도시하고 있다.
여기에 제공된 도면 및 상세한 설명은, 명확함을 위해, 전형적인 장치, 시스템, 및 방법에서 발견될 수 있는 다른 양태를 제거하면서, 여기에 기재된 장치, 시스템, 및 방법의 명확한 이해와 관련된 양태를 도시하도록 간략화될 수 있다. 통상의 숙련자라면 여기에 기재된 장치, 시스템, 및 방법을 실시하기 위해 다른 요소 및/또는 작동이 바람직할 수 있고 및/또는 필요할 수 있음을 인식할 수 있다. 이런 요소 및 작동이 본 기술분야에 잘 알려져 있고, 또한 이들이 본 발명의 더 나은 이해를 촉진시키지는 않기 때문에, 이런 요소 및 작동의 논의가 여기에 제공되지 않을 수 있다. 그러나 본 발명은 본질적으로 본 기술분야의 숙련자에게 알려진 이런 모든 요소, 변형, 기재된 양태에 대한 수정을 포함하는 것으로 생각된다.
기재된 실시예는 사용자가 경로를 따라 터언에서 따라야 할 명령을 포함하는 경로 안내를 사용자에게 제공하는 네비게이션 시스템과 함께 실시될 수 있다. 상기 네비게이션 시스템은, 터언을 위한 명령을 따를 때, 터언의 현장이 어떻게 나타날지에 대한 3차원("3D") 동영상 렌더링을 제공함으로써, 다가오는 터언을 사용자를 위해 선택적으로 프리뷰할 수 있다. 3D 동영상 프리뷰는, 현장의 인식 가능한 랜드 마크의 3차원 화상을 포함하여, 사실적인 현장의 사실적인 뷰를 제공할 수 있다. 3D 동영상 프리뷰가 발생되는 뷰의 지점은, 노상 보다 더 높은 뷰의 지점과 같은, 사용자의 뷰에 대한 장애물을 피하는 현장의 밴티지를 제공하도록 선택될 수 있다. 이런 방식으로, 사실적인 3D 동영상 프리뷰를 제공하는 이런 네비게이션 시스템은 사용자로 하여금 차량 네비게이션 시스템에 의해 이송되는 명령의 특성을 더 용이하게 이해할 수 있게 한다. 따라서 인터렉티브 3D 네비게이션 시스템은 그 전체가 여기에 참조 인용된, 2015년 2월 6일자 출원되고 발명의 명칭이 "인터렉티브 3D 네비게이션 시스템"인 미국 특허출원 제14/616,133호에 기재된 바와 유사한 방식으로 실시될 수 있다.
상기 특허출원서에 설명되는 바와 같이, 인터렉티브 3D 네비게이션 시스템(10)은 사용자에게 경로 안내 명령을 제공할 수 있으며, 또한 터언을 위한 명령을 따를 때, 터언의 현장이 어떻게 나타날지에 대한 3차원("3D") 동영상 렌더링을 통해, 다가오는 터언을 사용자를 위해 선택적으로 프리뷰한다. 도 1은 예를 들어 네비게이션 서버(36) 및 3D 이미지 서비스(30)를 포함하는 비-차량용 부품뿐만 아니라 차량용 인터렉티브 3D 네비게이션 시스템 부품(10)을 포함하는, 인터렉티브 네비게이션 시스템(100)의 개략적인 도면이다.
차량용 인터렉티브 3D 네비게이션 시스템 부품(10)은, 사용자로 하여금 경로를 선택하여 출발지로부터 목적지를 따를 수 있게 하는 경로 선택기(12), 및 사용자로 하여금 사용자가 프리뷰하기를 원하는 선택된 경로를 따라 터언을 선택할 수 있게 하는 터언 선택기(14)를 포함하여, 프리뷰될 터언을 선택하기 위해 어떤 부품을 포함할 수 있다. 또한, 차량용 인터렉티브 3D 네비게이션 시스템 부품(10)은 프리뷰의 부분일 터언을 따라 위치(8a-8d)를 선택하는 위치 선택기(15)와 같은, 위치를 선택하기 위한 수단, 및 터언의 현장의 명확한 조망을 촉진시키는, 각각의 위치를 위한, 밴티지를 선택하는 밴티지 제어기(16)와 같은, 밴티지를 선택하기 위한 수단을 포함할 수 있다. 사용자는 프리뷰하기 위해 원하는 터언을 선택할 수 있으며, 또한 사용자 제어 시스템(18)을 통해 밴티지를 조정할 수 있다. 일단 경로, 터언, 및 밴티지가 선택되었다면, 차량용 인터렉티브 3D 네비게이션 시스템 부품(10)은 선택된 터언의 3D 동영상 프리뷰(24)를 수신할 수 있다.
네비게이션에 따라, 3D 동영상 프리뷰(24)는 네트워크 연결을 사용하여 클라우드-기반 3D 이미지 서비스(30)로부터 검색될 수 있다. 명령 오버레이 집적기(19)는 명령 화살표(80)와 같은 명령 오버레이를 3D 동영상 프리뷰(24)에 추가할 수 있다. 그 후, 디스플레이(24)가 3D 동영상 프리뷰(24)를 렌더링할 수 있다.
도 1은 3D 동영상 프리뷰(24)의 부분인 4개의 예시적인 이미지 프레임(24a-d)에 의한 3D 동영상 프리뷰(24)를 도시하고 있지만, 그러나 상기 3D 동영상 프리뷰(24)는 연속적인 라이브 모션을 시뮬레이트하는 것에 대해 충분한 개수의 프레임 및 프레임률(frame rate)로 렌더링될 수 있음을 인식해야 한다. 3D 동영상 프리뷰(24)는, 선택된 터언을 위한 명령을 따를 때, 선택된 터언의 현장이 어떻게 나타날지를 시뮬레이트한다.
3D 동영상 프리뷰(24)를 디스플레이하기 전에, 디스플레이(32)는 사용자의 차량이 정지되었는지 또는 이동 중인지의 여부를 결정하도록 차량 속도 검출기(34)와 통신할 수 있다. 차량이 이동 중이라면, 차량용 인터렉티브 3D 네비게이션 시스템 부품(10)은 3D 만화영하 프리뷰(24)를 디스플레이하는 것이 불안한지의 여부를 결정할 수 있으며, 또한 그 대신에 디스플레이(32)는 격리된 프레임(24a)과 같은, 선택된 터언의 정지 화상을 나타낼 수 있다.
도 1을 참조하여 더욱 상세히, 경로 선택기(12)는 사용자로 하여금 출발지(52) 및 사용자가 경로 안내를 추구할 목적지(54)를 선택할 수 있게 한다. 경로 선택기(12)는, 통상적인 네비게이션 시스템에 알려진 바와 같이, 출발지(52)와 목적지(54) 사이의 적절한 경로를 계산하는 네비게이션 서버(36)에 출발지(52) 및 목적지(54)를 통신시킨다. 네비게이션 서버(36)는 디스플레이(32)를 통해 적절한 경로를 사용자에게 통신시킨다. 맵 뷰(51)는, 이하에 기재되는 바와 같이, 차량용 인터렉티브 3D 네비게이션 시스템 부품(10)이 프리뷰를 발생시킬 수 있는 예시적인 경로(56)를 도시하고 있다.
경로(56)는 다수의 터언(56a-c), 및 사용자가 각각의 터언(56a-c)에서 따라야 할 명령을 포함할 수 있다. 예를 들어, 경로(56)는 사용자가 터언(56a)에서 우측으로 회전해야 하는 명령을 포함하고 있다. 터언 선택기(14)는 사용자를 위한 프리뷰를 위해 터언(56a-c)중 하나를 선택한다. 터언 선택기(14)는 터언(56a-c)중 하나를, 자동으로 또는 사용자 입력에 기초하여 선택할 수 있다. 터언(56a-c) 중 하나를 자동으로 선택하였을 때, 터언 선택기(14)는 경로(56)의 제1 터언(56a)으로 시작하며, 시간 순서대로 각각의 터언(56a-c)을 통해 반복한다. 대안적으로, 터언 선택기(14)는 사용자의 차량의 위치를 추적하여[예를 들어, GPS 모듈(도시되지 않음)을 사용하여], 사용자가 다음에 조우할 그 터언(56a-c)을 결정할 수 있다.
기재된 바와 같이, 터언 선택기(14)는 사용자 입력을 통해 터언(56a-c) 중 하나를 선택할 수도 있다. 사용자 제어 시스템(18)은, 사용자로 하여금 터언(56a-c) 중 하나를 선택하여 프리뷰할 수 있게 하는, 터언 선택 제어부(20)를 포함할 수 있다. 터언 선택 제어부(20)는 도 2에 도시된 바와 같이 조향휠(40) 상에 위치되는 조향휠 버튼(40a-c)을 포함할 수 있다. 조향휠 버튼(40a-c)의 사용은, 조향휠 버튼(40a-c)이 운전자로 하여금 운전자의 손을 조향휠(40)로부터 이동시킬 필요 없이 터언 선택을 할 수 있게 하기 때문에, 차량 안전 및 운전자 편리성을 촉진시킬 수 있다. 운전자는 관심 있는 터언의 3D 동영상 프리뷰를 조망하고 싶은 때를 결정하고, 또한 관심 있는 터언을 선택 및 프리뷰하기 위해 조향휠 버튼(40a-c)을 사용할 수 있다. 조향휠 버튼(40a)은 사용자로 하여금 경로(56)를 따라 터언(56a-c) 중 다음 하나를 반복할 수 있게 하며, 조향휠 버튼(40b)은 사용자로 하여금 경로(56)를 따라 터언(56a-c) 중 이전의 하나를 반복할 수 있게 하며, 또한 조향휠 버튼(40c)은 프리뷰를 위해 사용자가 터언(56a-c) 중 특별한 하나의 선택을 완결하는 것을 허용할 수 있다.
다른 타입의 터언 선택 제어부(20)가 음성 인식을 포함할 수 있으므로, 차량용 인터렉티브 3D 네비게이션 시스템 부품(10)은 사용자로부터의 음성 명령에 응답한다. 예를 들어, 음성 명령은 다음 또는 이전 터언을 반복하고, 관심 있는 특별한 터언으로 점프하고, 또는 선택된 터언의 3D 동영상 프리뷰를 디스플레이하도록, 인터렉티브 3D 네비게이션 시스템(10)에 명령을 내릴 수 있다. 다른 타입의 터언 선택 제어부(20)는 조향휠(40) 상에 또는 디스플레이(32) 상에 터치-감응형/햅틱 제어부를 포함할 수 있다.
도 1로 돌아가서, 터언(56a-c)을 선택하는 터언 선택기(14)에 응답하여, 위치 선택기(15)는 터언(56a-c)을 따라 차량이 횡단할 것 같은 위치를 선택하며, 이는 3D 동영상 프리뷰(24)에 포함되어야 한다. 예시적인 실시예에 있어서, 위치 선택기(15)는 터언(56a)을 따라 4개의 위치(8a-8d)를 선택한다. 예시적인 실시예에 있어서, 위치 선택기(15)는 통상적인 우측 또는 좌측 터언과 같은 일상적인 터언을 위해 더 적은 위치, 및 더욱 복잡한 기동을 위해 더 많은 위치를 선택한다. 복잡한 기동을 위해 더 많은 위치를 선택함으로써, 3D 동영상 프리뷰(24)는 차량이 터언(56a-c)을 횡단할 때 차량이 취하는 실제 경로와 정렬할 가능성이 더 높다.
이 예시적인 예에 있어서, 위치 선택기(15)는 차량이 기동하기 시작하는 위치(8a), 기동을 수행할 동안 차량이 점유할 수 있는 하나 또는 그 이상의 위치(8b-8c), 및 차량이 기동을 완료한 위치(8d)를 선택한다. 위치(8a-8d)는 이하에 설명되는 바와 같이 적절한 동영상의 제공 시 3D 이미지 서비스(30)를 안내한다.
위치 선택기(15)에 의해 선택된 각각의 위치를 위해, 밴티지 제어기(16)는 3D 동영상 프리뷰(24)를 위해 사용되는 밴티지를 선택할 수 있다. 밴티지 제어기는 선택된 터언(56a)을 위해 현장(60)의 명확한 조망을 촉진시키는, 3D 동영상 프리뷰(24)를 위한 뷰 지점을 선택한다. 밴티지는 위치, 배향, 및 시야를 포함할 수 있다. 위치는 뷰 지점의 위도, 경도, 및 고도를 포함할 수 있다. 배향은 뷰 지점의 각도 배향[예를 들어, 피치, 롤(roll), 및 요오(yaw)]을 포함할 수 있다. 시야는 디스플레이될 시야를 위한 횡방향 및 수직방향 각도 범위를 특정할 수 있다. 터언 선택기(14)와 마찬가지로, 밴티지 제어기(16)는 자동으로 또는 사용자 입력에 기초하여 수동으로 작동할 수 있다.
도 3은 자동 밴티지 선택 공정(70)을 도시하고 있으며, 여기에서 밴티지 제어기(16)는 터언(56a)의 현장(60)의 3D 이미지 데이터의 하나 또는 그 이상의 프레임(72)을 수신할 수 있다. 도 3에 도시된 바와 같이, 프레임(72)의 밴티지는, 나무(74) 및 건물(76)을 포함하는 장애물로 인해 터언(56a)의 현장(60)의 명확한 조망을 방해한다. 밴티지 선택 공정(70)은, 이미지 특성(예를 들어, 휘도, 콘트라스트, 에지 강화, 노이즈 억제, 등)을 조정 및 강화하는 것과 같은, 프레임(72) 상에서의 이미지 처리를 수행하는 처리 동작(78)을 포함할 수 있다. 밴티지 선택 공정(70)은 프레임(72) 내의 장애물을 식별하는 식별 동작(81)으로 진행할 수 있다. 식별 동작(81)은, 도로(126)를 가리는 나무(74) 및 건물(76)과 같은 장애물을 식별하기 위해, 임의의 적절한 물체 검출, 인식, 및 분류 방법을 실시할 수 있다.
그 후 밴티지 선택 공정(70)은 장애물(74, 76)을 피하기 위해 밴티지를 조정하는 조정 동작(82)으로 진행할 수 있다. 조정 동작(82)은 위치를 조정하는 조정 동작(82a), 배향을 조정하는 조정 동작(82b), 및 시야를 조정하는 조정 동작(82c)을 포함할 수 있다. 그 후, 밴티지 선택 공정(70)은 장애물(74, 76)이 도로(126)의 뷰로부터 제거되었는지의 여부를 결정하는 결정 동작(84)으로 진행할 수 있다. 만일 그렇지 않다면, 밴티지 선택 공정(70)은 조정 동작(82)으로 되돌아가서, 장애물(74, 76)이 제거될 때까지 밴티지를 반복적으로 조정한다. 장애물이 제거되었다는 결정에 응답하여, 밴티지 선택 공정(70)이 종결된다.
프레임(24a-d)은 밴티지 선택 공정(70)의 예시적인 결과를 도시하고 있다. 이 예에 있어서, 위치는 고도를 증가시키도록 조정되었고, 배향은 도로(126)를 향해 하향하는 지점으로 조정되었으며, 시야는 조망을 위해 더 큰 영역을 제공하도록 증가되었다. 이는 장애물(74, 76)을 피하는 뷰의 지점을 제공한다. 다른 예에 있어서, 다른 양태에서는 위치, 배향, 또는 시야를 바꾸는 것이 유리할 수 있다. 예를 들어, 도로 상에 육교가 있다면, 사용자가 육교 아래를 볼 수 있도록 위치를 낮추는 것이 유리할 수 있다.
추가적으로 또는 대안적으로, 밴티지 제어기(16)는 사용자로 하여금 사용자 입력에 기초하여 밴티지를 수동으로 조정하게 할 수 있다. 사용자 제어 시스템(18)은 도 2에 도시된 바와 같이 조향휠 버튼(40a-g)과 같은 밴티지 제어부(22)를 포함할 수 있다. 예를 들어, 조향휠 버튼(40a-40b)은 위치의 위도를 조정하는데 사용될 수 있고, 조향휠 버튼(40d-40e)은 위치의 경도를 조정하는데 사용될 수 있다. 또한, 조향휠 버튼(40d-40e)은 위치의 고도를 높게 또는 낮게 조정하는데 사용될 수 있다. 조향휠 버튼(40a-40b)은 배향의 요오를 조정하는데 사용될 수 있고, 조향휠 버튼(40d-40e)은 배향의 피치를 조정하는데 사용될 수 있으며, 또한 다른 조향휠 버튼(도시되지 않음)은 배향의 롤을 조정하는데 사용될 수 있다. 조향휠 버튼(40a-40b)은 수평 각도뷰(angular view)를 증가시키는데 사용될 수 있고, 조향휠 버튼(40d-e)은 수직 각도뷰를 증가시키는데 사용될 수 있다. 조향휠 버튼(40f)은 선택을 종료시키는데 사용될 수 있다. 스핀휠(40g)은 밴티지 각도 제어부(22)의 다른 형태이며, 밴티지를 수정하도록 회전될 수 있다. 터언 선택 제어부(20)와 마찬가지로, 밴티지 제어부(22)는 음성 제어 또는 터치/햅틱 제어를 포함하여, 다른 형태의 사용자 입력을 통해 실시될 수 있다.
도 1로 돌아가서, 밴티지를 계산하는 밴티지 제어기(16)와 함께, 차량용 인터렉티브 3D 네비게이션 시스템 부품(10)은 동영상의 생성 시 3D 이미지 서비스(30)를 안내하기 위해 타이밍 데이터를 계산하는 타이밍 제어기(17)와 같은, 타이밍 정보를 계산하기 위한 수단을 포함한다. 차량이 터언(56a)을 탐색하는데 얼마나 오래 걸렸는지를 나타내는 사실적인 속도로 3D 동영상 프리뷰(24)가 렌더링될 수 있도록, 타이밍 제어기(17)는 3D 동영상 프리뷰(24)의 상이한 부분의 상대 속도를 결정하는데 사용되는 타이밍 데이터를 계산한다. 함께 밀착되어 이격된 위치(8a-8d)에 대해, 3D 동영상 프리뷰(24)는 차량이 밀착-이격된 위치를 횡단하는데 걸리는 비교적 짧은 시간 주기를 시뮬레이트하는, 이미지 프레임(24a-24d)을 통해 신속히 진행할 수 있다. 멀리 이격된 위치(8a-8d)에 대해, 3D 동영상 프리뷰(24)는 차량이 더 멀리-이격된 위치를 횡단하는데 걸리는 비교적 긴 시간 주기를 시뮬레이트하는, 이미지 프레임(24a-24d)을 통해 느리게 진행할 수 있다. 타이밍 제어기(17)는 차량이 위치(8a-d) 사이의 거리에 기초하여 위치(8a-8d)를 통해 탐색하는데 걸리는 시간의 양을 계산한다.
차량용 인터렉티브 3D 네비게이션 시스템 부품(10)은 그 후 3D 동영상 프리뷰(24)를 위한 3D 이미지 서비스(30)를 질의(query)한다. 상기 질의는 밴티지 제어기(16)에 의해 계산된 위치, 배향, 및 시야 정보, 및 타이밍 제어기(17)에 의해 계산된 타이밍 데이터를 포함할 수 있다. 차량용 인터렉티브 3D 네비게이션 시스템 부품(10)은 API(30a)를 통해 3D 이미지 서비스(30)를 질의하며, 이는 다시 3D 이미지 데이터베이스(30b)로부터의 이미지 데이터의 적절한 프레임을 질의 및 검색한다. 3D 이미지 데이터베이스(30b)에 저장된 이미지는 예를 들어 사진 이미지, 위성 이미지, 또는 다른 형태의 화상을 포함할 수 있다. 상기 질의는, 터언(56a)의 지리적 위치, 위치 선택기(15)에 의해 선택된 위치(8a-c), 및 밴티지 제어기(16)에 의해 계산된 밴티지를 포함하여, 이미지 데이터의 원하는 프레임을 위한 기준을 포함할 수 있다. 3D 이미지 서비스(30)는 타이밍 제어기(17)에 의해 계산된 타이밍 데이터에 기초하여 이미지 데이터의 적절한 프레임을 검색하여, 이미지 데이터의 프레임을 3D 동영상 프리뷰(24)로 배치할 수 있다. 예시적인 실시에 있어서, 3D 이미지 서비스(30)는 예를 들어 캘리포니아, 마운틴 뷰 소재의 구글 인코레이티드로부터의 GOOGLE®EARTH®에 의해 제공될 수 있으며, API(30a)는 GOOGLE®EARTH®API 이다.
차량용 인터렉티브 3D 네비게이션 시스템 부품(10)은 3D 이미지 서비스(30)로부터 3D 동영상 프리뷰(24)를 검색한다. 명령 오버레이 집적기(19)는 명령 화살표(80)와 같은 명령 오버레이를 3D 동영상 프리뷰(24) 상에 집적한다. 명령 오버레이는 명령 텍스트, 또는 운전자의 주의를 3D 동영상 프리뷰(24)의 어떤 부분으로 지향시키는 라인 또는 형상과 같은 다른 타입의 명령 심볼을 포함할 수도 있다. 3D 동영상 프리뷰(24)는, 사용자가 실제로 현장(60)에 도착하였을 때 사용자가 현장(60)을 인식하는 것을 도울 수 있는 건물(76, 128), 나무(74), 라이트포스트(lightpost)(75), 및 다른 랜드 마크를 포함하여, 터언(56a)의 현장(60)의 사실적인 3D 화상을 포함한다. 명령 화살표(80)와 함께 3D 동영상 프리뷰(24)의 사용은, 플랩 맵 묘사, 또는 다른 더욱 간략화된 맵 표시물[예를 들어, 와이어프레임(wireframe)]에 비해, 사용자가 현장(60)을 인식하고 또한 사용자가 현장(60)에서 어떤 명령을 따라야 할지를 이해하는 것을 더욱 용이하게 한다.
디스플레이(32)는 안전 또는 편의 사항을 위해 차량 속도 정보를 얻고 그리고 이를 디스플레이(32)에 통신할 수 있는, 차량 속도 검출기(34)와 통신할 수 있다. 차량이 이동하는 경우, 3D 동영상 프리뷰(24)를 디스플레이하는 것은 불안전하거나 산만할 수 있는데, 그 이유는 차량 운전자가 운전에 초점을 맞추고, 3D 동영상 프리뷰(24)에 의해 방해되는 것을 원하지 않을 수 있기 때문이다. 이런 상황에서는, 현장(60)의 격리된 프레임(24a)과 같은 정지 화상을 디스플레이하는 것이 바람직할 수 있다.
도 4는 차량용 인터렉티브 3D 네비게이션 시스템 부품(10)이, 격리된 프레임(24a)과 같은, 3D 동영상 프리뷰(24) 또는 정지 화상을 디스플레이할지의 여부를 결정하는 차량 속도 검출 공정(90)을 도시한 개략적인 도면이다. 차량 속도 검출 공정(90)은 차량 속도 검출기(34)가 차량 속도를 결정하는 검출 동작(92)으로 시작한다. 차량 속도 검출기(34)는 예를 들어 차량의 전기 시스템과 네트워크 통신되는 차량의 CAN 버스 또는 다른 형태의 네트워킹 통신부를 통해 차량 속도를 검출할 수 있다. 차량 속도 검출기(34)는 차량 속도를 디스플레이(32)에 통신할 수 있다. 그 후, 차량 속도 검출 공정(90)은 디스플레이(32)가 차량이 정지되었는지의 여부를 결정하는 결정 동작(94)으로 진행된다. 만일 차량이 정지되었다면, 차량 속도 검출 공정(90)은 3D 동영상 프리뷰(24)가 디스플레이되는 디스플레이 동작(96)으로 진행된다.
만일 차량이 이동 중이라면, 차량 속도 검출 공정(90)은 정지 프레임(24a)이 디스플레이되는 디스플레이 동작(98)으로 진행된다. 정지 프레임(24a)은 사실적인 3D 화상 및 명령 화살표(80)를 도시하고 있지만, 그러나 동영상 보다는 정지 이미지로 존재한다. 예시적인 실시예에 있어서, 정지 프레임(24a)은 차량이 기동에 들어가는 위치(8a)(도 1에 도시)를 프리뷰한다.
차량용 인터렉티브 3D 네비게이션 시스템 부품(10)은 차량이 2 내지 3 초처럼 미리 결정된 시간의 양 동안 정지되었을 경우에만 3D 동영상 프리뷰(24)를 나타낼 수 있다. 대안적으로, 디스플레이는 미리 결정된 속도 임계값을 사용할 수 있으며, 또한 차량이 미리 결정된 속도 임계값 이하로 이동 중인 한 3D 동영상 프리뷰(24)를 디스플레이할 수 있다. 또한 대안적으로, 일부 실시에서 안전 고려사항으로 인해 상기 무시 메커니즘이 제공될 수 없더라도, 디스플레이(32)가 차량 속도와는 관계 없이 항상 3D 동영상 프리뷰(24)를 나타내도록, 사용자가 차량 속도 검출 공정(90)을 무시하는 것이 허용될 수 있다.
터언 동영상 프리뷰 기능성을 구비한 인터렉티브 3D 네비게이션 시스템의 일 예를 마음 속에 이해함으로써, 이 기능성은 이어지는 특정한 목적지에서 또는 그 목적지에 대한 탐색의 부분으로서 주변을 조망할 능력도 제공함으로써 여기에 기재된 혁신에 따라 증가된다는 것을 인식해야 한다. 특정한 목적지를 둘러싸는 영역과의 익숙함 없이, 특정한 목적지를 둘러싸는 근접지를 탐색하는 것이 통상적으로 어렵다는 인식해야 한다.
통상적인 네비게이션 시스템은 뷰어(viewer)로 하여금 목적지에 도착하기에 앞서 특정한 목적지를 시각화할 수 있게 한다. 그러나 통상적인 네비게이션 시스템은 특정한 목적지를 둘러싸는 주변 또는 근방에 관한 세부사항을 제공할 수 없다. 따라서 특정한 목적지에 위치되거나 또는 이에 가깝게 위치되는 주변에 관한 세부사항을 뷰에 제공하기 위해, 목적지 뷰가 고도형 사시도로부터 제공될 수 있다.
통상적인 맵이 평탄한 2차원 구성이거나 또는 3차원 구성일 수 있더라도, 통상적인 맵의 그 어떤 타입이라도 특정한 목적지에서 사용자가 실제로 본 것을 효과적으로 매칭할 수는 없다. 예를 들어, 운전자가 영역의 이해를 돕는 목적지의 사실적인 화상을 갖도록, GOOGLE EARTH(TM)가 통상적으로 일부 차에서 집적되었다. 그 결과로서, 통상적으로 뷰어가 특정한 목적지 둘레로 이동하는 것이 가능하지만, 그러나 차량이 이동 중일 동안, 즉 운전자가 운전할 동안, 이런 이동(panning)은 운전자에게는 성가시고 안전하지 않다. 더욱이, 위성 화상은 현재 오직 평탄한 차원 이미지로만 구성되어 있다. 이들 결함의 결과로서, 뷰어는 특정한 목적지를 둘러싸는 영역의 세부사항을 용이하게 이해할 수 없다.
기재된 실시예는 네비게이션 시스템에 특정된 목적지를 둘러싸는 영역의 데이터, 정보, 및 다수의 사시도를 제공함으로써 이들 결함을 치유한다. 이러한 다수의 사시도는 사용자로 하여금 도착 시 이들이 실제로 이를 보았을 때 목적지 근방을 더 잘 이해하기 위해 이들이 운전할 둘레의 영역을 내다볼 수 있게 한다.
특정한 목적지의 "헬리콥터 뷰"로 지칭될 수 있는 이런 다수의 사시도들은 함께 제시될 수 있으며, 이런 헬리콥터 뷰는 3차원 포맷으로, 즉 특정한 목적지를 둘러싸는 3차원 공간의 외관을 제공하는, 제시될 수 있다.
헬리콥터 뷰의 발생은 도 5에 도시된 바와 같이 수행될 수 있다. 도 5에 도시된 바와 같이, 방법은 단계(500)에서 시작되며, 제어는 헬리콥터 뷰를 뷰어에게 출력하기 위해 시스템이 트리거를 수용할 수 있는 단계(505)로 진행할 수 있다. 이 트리거는 도 2의 설명과 함께 전술한 바와 같이, 음성 명령의 형태로, 또는 네비게이션 시스템을 위해 사용자 인터페이스에 포함되거나 사용되는 다양한 하드웨어 디바이스, 예를 들어, 노브/버튼, 터치스크린(들), 및/또는 제스처 인식 하드웨어/소프트웨어를 통한 사용자 입력의 수신의 형태일 수 있다.
트리거에 응답하여, 제어는 특정한 목적지의 인식이 수행되는 단계(510)로 진행된다. 그 후 제어는 탐색 서버, 예를 들어 도 1에 도시된 서버(36)를 통해, 특정한 목적지에 속하는 데이터가 얻어지는 단계(515)로 진행된다.
그 후, 제어(520)는 360°동영상을 위한 카메라 매개변수가 얻어지는 단계(520)로 진행된다. 이들 카메라 매개변수는 예를 들어 위치, 배향, 및 시야를 포함할 수 있다.
그 후, 제어는 하나 또는 그 이상의 3차원 이미지 데이터 라이브러리로부터 3D 위성 화상이 얻어지는 단계(525)로 진행된다. 예시적인 실시에 있어서, 3D 위성 화상 데이터는 예를 들어 캘리포니아, 마운틴 뷰 소재의 구글 인코레이티드로부터의 GOOGLE®EARTH®에 의해 제공될 수 있으며, API(30a)는 GOOGLE®EARTH®API 이다. 그 후, 제어는 뷰어에게 매끄러운 동영상을 제공하기 위해 각각의 카메라 이동 사이의 타이밍이 계산되는 단계(530)로 진행된다. 그 후, 제어는 발생된 동영상이 종료되는 단계(535)로 진행된다.
그 후, 제어는 단계(540)로 진행하여, 상기 발생된 동영상이 뷰어(들)에게 출력되며, 예를 들어 네비게이션 스크린 상에 디스플레이된다. 그 후, 제어는 단계(545)로 진행하여, 시스템이 사용자로부터의 추가적인 입력 및 명령을 모니터링한다.
그 결과로서, 기재된 실시예는 운전자/승객을 안내하고 또한 운전자/승객에게 차량을 둘러싸는 세부사항을 알려주는데 사용하기 위해 3차원으로 렌더링된 사실적인 화상을 발생시킬 능력을 갖는다.
도 6은 헬리콥터 뷰의 기능성을 제공하는데 사용되는, 도 1에 도시된 네비게이션 시스템(100)의 이들 부품을 도시하고 있다. 특히, 도 5와 함께 논의되는 목적지 탐색, 카메라 매개변수 계산, 및 타이밍 제어는 차량용 인터렉티브 3D 네비게이션 시스템 부품(10)에 의해 수행된다. 그 결과로서, 네비게이션 서버(36)는 사용자 제어 시스템(18)에 의해 제공된 사용자 제어와 함께 목적지 탐색을 위한 데이터를 제공한다. 또한, 제공된 카메라 매개변수 계산 및 타이밍 제어는 여기에 논의되는 바와 같이 3D 이미지 서비스로부터 데이터베이스 API(들)를 통해 3D 이미지 서비스로부터 수신된 데이터를 사용한다. 그 데이터는 [여기에 설명되는 바와 같이, 차량 속도 검출기(34)의 모니터링에 의해 억제될 수 있는] 차량용 인터렉티브 3D 네비게이션 시스템 부품(10)의 디스플레이(32)로 출력되는 동영상을 형성하는데도 사용된다.
기재된 실시예에 따라, 헬리콥터 뷰는 네비게이션 시스템에 입력된 특정한 목적지뿐만 아니라 오히려 적어도 일부 실시예에 따라 상기 헬리콥터 뷰는 네비게이션 시스템에 의해 네비게이션을 위해 라우팅된 사용자의 경로를 따라 임의의 특정한 위치에 대해 발생되고 그리고 트리거되는 것을 인식해야 한다. 따라서 제어는 음성 제어 또는 터치/햅틱 제어, 네비게이션 시스템에 포함되어 있는 터치스크린 노브, 버튼, 또는 아이콘과의 상호작용을 포함하여, 다양한 형태의 사용자 입력을 통해 실시될 수 있다.
도 7 및 8은 타이밍 제어기(17) 및 카메라 매개변수 계산의 동작을 가능하게 하는 수행된 동작에 관한 추가적인 세부사항을 제공하고 있다. 도 8에 도시된 바와 같이, 동작은 단계(800)에서 시작되며, 제어는 타이밍 제어기가 헬리콥터 뷰 동영상에 요구되는 상이한 카메라 배향의 개수를 계산 하는 단계(805)로 진행된다. 디스플레이된 이미지가 목적지 둘레로 360 도 회전을 달성하기 위해서는, numCamera = 360/각도증분(DegreeIncrement) 이며, 상기 각도증분은 각각의 카메라 이동 사이의 각도/초 의 수자에 대응한다. 이 수자가 클수록, 가장 빠른 동영상이 될 것이며, 예를 들어 각각의 카메라 이동이 1 초로 달성될 수 있다.
그 후, 제어는 단계(810)로 진행하여, 제어 매개변수를 계산하기 위한 동작이 시작된다. 보다 구체적으로, 단계(810)에서, 헬리콥터 뷰가 최적화되도록(예를 들어, 너무 가깝지도 않고, 너무 멀지도 않으며, 또한 목적지로부터 충분히 멀리 볼 수 있도록), 틸트(tilt) 및 범위(range) 각도가 설정된다. 그 후, 제어는 단계(815)로 진행하여, 네비게이션 서버로부터 경로의 마지막 정점(세그먼트) 및 목적지 위치가 탐색된다(예를 들어, 도 7 참조). 그 후, 제어는 단계(820)로 진행하여, 경로 상의 추정 위치 및 마지막 정점에 기초하여 목적지로의 초기 지향(heading)이 계산된다. 이는, 위치 2에 대한 경도(도 7의 lon2)와 위치 1에 대한 경도(도 7의 lon1) 사이의 차이[델타론(Deltalon)]의 계산 및 위치 2에 대한 위도(도 9의 lat2) 및 위치 1에 대한 위도(도 7의 lat1)를 포함하는 계산에 이어, 두 지점 사이의 지향 계산을 수행하는 잘 알려진 작동을 사용하여 수행될 수 있다. 이어서, 지향=atan2(Y, X)를 적용함으로써, 상기 지향이 결정될 수 있으며, 여기서 상기 Y=sin(DeltaLon)*cos(lat2) 이고, X=cos(lat1)*sin(lat2)-sin(lat1)*cos(lat2)*cos(deltaLon) 이다. 이들 동작은 카메라 매개변수 계산에 필요한 것을 완성한다.
그 후, 제어는 단계(825)로 진행하여, 단계(805)에서 선택된 각도증분에 의해 초기 지향을 증가시킴으로써, 각각의 카메라 배향을 위해 카메라 지향이 계산된다. 그 후, 제어는 단계(830)로 진행하여, 계산된 카메라 매개변수(주기, 목적지 위도, 목적지 경도, 지향, 틸트, 및 범위) 및 주기에 기초하여 목적지를 위한 동영상을 발생시키도록, 3D 이미지 라이브러리에 요청이 발생된다.
그 후, 제어는 단계(835)로 진행하여, 발생된 동영상은 디스플레이 스크린을 통해 사용자에게 출력이 가능하다.
그 결과로서, 뷰어(들)(예를 들어, 운전자 및/또는 승객)가 특정한 목적지에 도착하였을 때, 사용자는 뷰어로 하여금 네비게이션이 사용되는 차량을 위한 주차지를 찾을 수 있도록, 또는 승객이 차량으로부터 떠나는 것을 허용하기에 안정한/편리한 위치를 식별할 수 있도록 하기 위해 이런 세부사항을 가질 수 있다.
이런 세부사항은 일부 통상적인 시스템에 유용한 목적지 뷰의 타입을 넘어 추가적인 정보를 제공하며, 그 예가 도 9에 도시되어 있다. 이런 통상적인 시스템에 있어서, 운전자는 목적지의 사실적인 화상을 가지며, 이는 주변 영역의 이해를 돕는다. 그러나 그 화상을 정주시키는데 사용되는 데이터는 필연적으로 주변 영역을 이해할 수 없게 하는 평탄한 2차원(2D) 이미지인 위성 화상으로 제한된다.
이와는 달리, 기재된 실시예는 목적지의 헬리콥터 뷰를 3D 로 제공하는 능력을 제공한다. 따라서 버튼 누름 또는 음성 명령에 의해, 사용자/운전자는 특정한 목적지 둘레로 360 도 뷰를 나타내는 동영상을 시작할 수 있다. 뷰는 목적지에 대한 주변 영역의 개선된 이해를 제공하기 위해, 주변의 고도 보다 높이 상승된다.
따라서 도 10a에 도시된 바와 같이, 사용자는 특정한 목적지가 위치된 영역의 주변의 개선된 이해를 제공하는, 높아진 동영상/뷰(들)를 가질 수 있다. 이런 실시에 있어서, 뷰(들)는 목적지에 도착하여 운전자를 주변에 더욱 순응시키거나 또는 이에 배향시킴으로써 특정한 경로의 표시를 포함할 수 있다. 또한, 컴퍼스 방향, 크기, 특정한 위치에 대해 추정되는 시간과 거리, 및 특정한 위치에 대한 등급을 포함하는 정보가, 디스플레이된 동영상/뷰(들)에 포함될 수 있다.
헬리콥터 뷰의 디스플레이의 트리거 동작은 사용자의 명령의 수신에 응답하여 수행될 수 있으며, 예를 들어 사용자에 의한 버튼 누름 또는 음성명령을 통해 수행될 수 있다. 그 디스플레이의 부분으로서, 목적지 둘레의 360 도 뷰를 나타내는 동영상이 사용자에게 출력될 수 있다. 영역의 개선된 이해를 제공하기 위해 그 뷰는 지상으로부터 특정한 거리로(높은 고도로) 높아질 수 있다. 이 특정한 거리는 표준 거리, 예를 들어 25 미터일 수 있으며, 대안적으로 상기 거리는 많은 선택 중에서, 예를 들어 지상으로부터 상승한 25 미터, 40 미터, 65 미터로부터 선택될 수 있음을 인식해야 한다. 따라서 도 10에 도시된 디스플레이의 트리거 동작은 헬리콥터 뷰, 음성 명령 등을 동작시키기 위해 버튼을 누르는 사용자/운전자의 결과물일 수 있다.
동영상(다수의 뷰)을 제공하도록 실시되었을 때, 결과적인 화상은 도 11-14에 도시된 바와 같이 특정한 목적지 둘레로 회전될 수 있다.
복수의 그리고 상승한 뷰로 인한 추가적인 세부사항 또한 뷰어로 하여금 예를 들어, "웨스트 사이트의 콜롬세움으로의 1번 출구에서 만나자"라고 뷰어와 새로운 승객 사이에 이미 통신되었던 만남 지점을 식별하게 할 수 있다.
대안적으로, 상기 세부 사항은 운전자가 예를 들어, 블록 둘레로, 짧은 거리를 운전할 수 있도록 하기 위해, 승객이 특정한 목적지에서 신속한 과업을 완료할 때까지, 뷰어로 하여금 운전 방향을 결정하게 할 수도 있다. 이는, 만일 특정한 목적지가 양방향 차량 통행이 모든 또는 거의 모든 거리에서 허용 가능한 것 보다, 특정한 목적지로 복귀하기 위한 탐색을 더욱 복잡하게 할 수 있는 영역에 위치된다면, 특히 가치가 있다.
또한, 상기 세부사항은 뷰어로 하여금, 승객이 특정한 목적지에서 그 과업을 완료할 때까지, 뷰어가 차에서 기다릴 수 있는 특정한 목적지에 가까운 위치를 식별하게 할 수 있다.
운전자 혼란을 피하기 위해, 동영상은 차가 정지되어 있을 동안에만 선택적으로 작동될 수 있다. 도 4 및 6과 관련하여 전술한 바와 같이, 차량 속도 검출기는 차량의 속도에 기초하여 헬리콥터 뷰의 출력을 가능하게 하거나 또는 불가능하게 하는데 사용될 수 있다. 따라서 도 4와 관련하여 설명된 바와 같이, 3D 동영상 데이터를 디스플레이할지의 여부에 대한 결정(이 시간은 특정한 목적지의 주변과 관련되어 있다)은 차량 속도 검출 공정에 기초할 수 있다. 따라서 인터렉티브 3D 네비게이션 시스템(10)은 목적지 주변을 묘사하는 격리된 프레임과 같은, 3D 동영상 데이터 또는 정지 화상을 디스플레이할지의 여부를 결정한다. 예를 들어, 인터렉티브 3D 네비게이션 시스템(10)은 차량이 2초 또는 3초와 같은 미리 결정된 시간 동안 정지되어 있을 때만 3D 동영상 고도 뷰를 나타낼 수 있다.
대안적으로, 디스플레이는 미리 결정된 속도 임계값을 사용할 수 있으며, 또한 차량이 미리 결정된 속도 임계값 아래로 이동하는 한 3D 동영상 고도 뷰를 디스플레이할 수 있다. 또한 대안적으로, 사용자는 일부 실시에 있어서 안전 고려사항으로 인해 이런 무시 메카니즘이 제공되지 않을 수 있더라도, 차량 속도에 관계 없이 트리거되었을 때, 디스플레이가 목적지 주변의 3D 동영상 고도 뷰를 항상 나타내도록, 차량 속도 검출 공정을 무시하는 것이 허용될 수 있다.
동영상 뷰의 렌더링은 사용자로 하여금 렌더링된 이미지를 선택적으로 줌인 및 줌아웃하게 할 수 있고 또한 터치스크린, 음성, 버튼, 노브, 또는 제스처 인식을 통해 사용자 명령의 입력에 의해 동영상을 정지/일시정지를 통해 이동하게 할 수 있음을 인식해야 한다.
경로 선택기(12), 터언 선택기(14), 위치 선택기(15), 밴티지 제어기(16), 타이밍 제어기(17), 명령 오버레이 집적기(19), 차량 속도 검출기(34), 및 사용자 제어 시스템(18)을 포함하여, 인터렉티브 3D 네비게이션 시스템 부품(10)은 소프트웨어로 실시되어, 메모리에 목적 코드로서 편집 및 저장될 수 있으며, 또한 차량의 작동 중에는 실행을 위해 프로세서에 의해 소환될 수 있다. 일 실시에 있어서, 전술한 부품들은 칩 상에 단일 시스템으로서 실시된다. 전술한 부품들 중에서도 상호연결부는 통신 버스와 같은 임의의 적절한 전자 통신 메커니즘을 통해 제공될 수 있다. 하나의 칩 모듈로서 실시되거나 또는 다중 칩 모듈로서 실시되거나, 인터렉티브 3D 네비게이션 시스템 부품(10)은 다른 전자 회로 근처의 대시보드 후방과 같은, 차량의 임의의 편리한 위치에 제공될 수 있다. 이런 위치는 전원으로의, 그리고 차량의 운전을 제어하는 전자 시스템으로의, 편리한 접근을 제공하는데 유리할 수 있다.
디스플레이(32)는 사용자에게 정보 또는 엔터테인먼트 특징부를 디스플레이할 때 사용하기 적합한 임의의 디스플레이일 수 있으며, 또한 "정보" 유닛의 부분일 수 있다. 디스플레이(32)는 사용자가 이를 통해 제스처를 사용하여 디스플레이(32) 상에 렌더링된 그래픽 아이콘과 상호작용할 수 있는 터치스크린 인터페이스를 포함한다. 3D 이미지 서비스(30) 및 네비게이션 서버(36)는 임의의 적절한 서버 환경에서 실시될 수 있으며, 또한 프로세서, 메모리, 및 프로세서 상에서 실행하기 위해 메모리에 저장된 컴퓨터-판독 가능한 코드를 포함할 수 있다. 3D 이미지 데이터베이스(30b)는 오라클, DB2, 또는 SQL 서버와 같은 임의의 알려진 데이터베이스 환경을 사용하여 실시될 수 있다.
어떤 실시예가 어느 정도의 특별함을 갖는 예시적인 형태로 기재되고 도시되었지만, 상기 기재 및 도시는 단지 예로만 이루어지는 것을 인식해야 한다. 부품과 작동의 구성, 조합, 및 배치의 세부사항에 많은 변화가 이루어질 수 있다. 따라서 이런 변화는 본 발명의 범주 내에 포함되는 것을 의도되며, 그 보호되는 범위는 청구범위에 의해 한정된다.
10: 인터렉티브 3D 네비게이션 시스템
12: 경로 선택기 14: 터언 선택기
15: 위치 선택기 16: 밴티지 제어기
17: 타이밍 제어기 19: 명령 오버레이 집적기
20: 터언 선택 제어부 22: 밴티지 제어부
30b: 3D 이미지 데이터베이스 32: 디스플레이
34: 차량 속도 검출기
12: 경로 선택기 14: 터언 선택기
15: 위치 선택기 16: 밴티지 제어기
17: 타이밍 제어기 19: 명령 오버레이 집적기
20: 터언 선택 제어부 22: 밴티지 제어부
30b: 3D 이미지 데이터베이스 32: 디스플레이
34: 차량 속도 검출기
Claims (14)
- 사용자를 위해 목적지 및/또는 경로를 따르는 터언의 지점에서 주변의 고도 뷰를 제공하는 능력뿐만 아니라 탐색 명령을 제공하는 차량 네비게이션 시스템으로서:
프로세서, 및 상기 프로세서 상에서 실행될 때 차량 네비게이션 시스템으로 하여금 출발지와 목적지 사이의 경로를 얻게 하고 상기 경로가 목적지로의 탐색을 위한 명령을 포함하는, 컴퓨터 코드가 저장되는 비-일시적 데이터 스토리지;
3차원 동영상 프리뷰를 위한 밴티지와 타이밍을 선택하고, 상기 3차원 동영상 프리뷰를 탐색하는 수단으로서, 상기 3차원 동영상 프리뷰는 목적지에서 주변 및/또는 상기 경로를 따르는 터언의 지점의 고도 뷰를 나타내고, 상기 밴티지와 타이밍을 선택하는 수단은 사용자의 뷰에 대한 장애물을 피하도록 밴티지를 선택하는 것을 특징으로 하는 수단; 및
사용자에게 상기 3차원 동영상 프리뷰를 디스플레이하기 위한 디스플레이 수단을 포함하는, 차량 네비게이션 시스템. - 청구항 1에 있어서,
사용자로 하여금 3차원 동영상 프리뷰를 상기 디스플레이 수단에 디스플레이하도록 트리거하는 적어도 하나의 사용자 제어부를 더 포함하는, 차량 네비게이션 시스템. - 청구항 1 또는 청구항 2에 있어서,
상기 밴티지와 타이밍을 선택하는 수단은 3차원 이미지 데이터를 이용하여 3차원 동영상의 생성을 가이드하는 타이밍 데이터를 계산하고, 상기 타이밍 데이터를 계산하여 상기 3차원 동영상 프리뷰의 다른 부분의 상대적인 속도를 결정하는 타이밍 컨트롤러를 포함하는, 차량 네비게이션 시스템. - 청구항 3에 있어서,
상기 밴티지와 타이밍을 선택하는 수단은 밴티지 컨트롤러 및 3차원 이미지 서비스를 질의(query)하기 위한 시스템을 포함하고,
질의는 위치, 배향, 및 상기 밴티지 컨트롤러로부터 연산된 시야 정보, 및 타이밍 컨트롤러에 의해 계산된 타이밍 데이터를 포함하는, 차량 네비게이션 시스템. - 청구항 1 내지 청구항 4 중 어느 한 항에 있어서,
사용자로 하여금 밴티지를 조정할 수 있게 하는 사용자 제어부를 더 포함하는, 차량 네비게이션 시스템. - 사용자를 위해 목적지에서 목적지 및/또는 경로를 따르는 터언의 지점에서 주변의 고도 뷰를 제공하는 능력뿐만 아니라 탐색 명령을 제공하기 위한 방법으로서:
목적지로의 탐색을 위한 명령을 포함하는, 출발지와 목적지 사이의 경로를 얻는 단계;
3차원 동영상 프리뷰를 위한 밴티지와 타이밍을 선택하고, 상기 3차원 동영상 프리뷰를 탐색하는 단계로서, 상기 3차원 동영상 프리뷰는 목적지에서 주변 및/또는 상기 경로를 따르는 터언의 지점의 고도 뷰를 나타내고, 상기 밴티지와 타이밍의 선택은 사용자의 뷰에 대한 장애물을 피하도록 밴티지를 선택하는 것을 특징으로 하는 단계;
상기 3차원 동영상 프리뷰에 액세스하는 단계; 및
디스플레이 수단 상에서 사용자에게 상기 3차원 동영상 프리뷰를 디스플레이하는 단계를 포함하는, 탐색 명령 제공 방법. - 청구항 6에 있어서,
사용자로 하여금 3차원 동영상 프리뷰를 상기 디스플레이 수단에 디스플레이하도록 트리거하는 적어도 하나의 사용자 제어부를 통해 사용자 입력을 수신하는 단계를 더 포함하는, 탐색 명령 제공 방법. - 청구항 6에 또는 청구항 7에 있어서,
3차원 이미지 데이터를 이용하여 3차원 동영상의 생성을 가이드하는 타이밍 데이터를 계산하고, 상기 타이밍 데이터를 계산하여 상기 3차원 동영상 프리뷰의 다른 부분의 상대적인 속도를 결정하는 타이밍 컨트롤러에 의해 상기 타이밍이 결정되는, 탐색 명령 제공 방법. - 청구항 6 내지 청구항 8 중 어느 한 항에 있어서,
상기 밴티지는 밴티지 컨트롤러에 의해 선택되고,
상기 방법은 3차원 이미지 서비스를 질의(query)하는 단계를 더 포함하고,
상기 질의는 위치, 배향, 및 상기 밴티지 컨트롤러로부터 연산된 시야 정보, 및 타이밍 컨트롤러에 의해 계산된 타이밍 데이터를 포함하는, 탐색 명령 제공 방법. - 청구항 6 내지 청구항 9 중 어느 한 항에 있어서,
사용자로 하여금 밴티지를 조정할 수 있게 하는 사용자 제어부를 통해 사용자 입력을 수신하는 단계를 더 포함하는, 탐색 명령 제공 방법. - 청구항 6 내지 청구항 9 중 어느 한 항에 있어서,
사용자에 의해 조작된 차량이 정지되어 있는지 여부를 결정하는 단계; 및
상기 차량이 정지되어 있다는 결정에 응답하여 오직 사용자에게만 3차원 동영상 프리뷰를 디스플레이하는 단계를 더 포함하는, 시스템 또는 탐색 명령 제공 방법. - 청구항 1 내지 청구항 5 중 어느 한 항에 따른 시스템 또는 청구항 6 내지 청구항 11 중 어느 한 항에 따른 방법에 있어서,
상기 3차원 동영상 프리뷰는 주변의 인식 가능한 랜드마크들의 3차원 이미지를 포함하는 목적지에서의 주변의 뷰를 생성하고, 3차원 동영상 프리뷰가 생성되는 지점은 사용자의 시점에서 장애물을 피하는 목적지의 밴티지를 제공하도록 선택되는, 시스템 또는 탐색 명령 제공 방법. - 청구항 2 내지 청구항 5 중 어느 한 항에 따른 시스템 또는 청구항 7 내지 청구항 11 중 어느 한 항에 따른 방법에 있어서,
적어도 하나의 상기 사용자 제어기는 조향 휠 버튼, 터치 스크린 또는 음성 제어 또는 햅틱 제어 기능 중 하나를 사용하여 구현되는 시스템 또는 탐색 명령 제공 방법. - 청구항 4 또는 청구항 5에 따른 시스템 또는 청구항 9 내지 청구항 11 중 어느 한 항에 따른 방법에 있어서,
상기 질의는 차례로 3차원 이미지 데이터베이스로부터 이미지 데이터 프레임을 질의하고 검색하는 응용 프로토콜 인터페이스를 통해 이루어지는 시스템 또는 탐색 명령 제공 방법.
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US14/866,854 | 2015-09-26 | ||
US14/866,854 US9702722B2 (en) | 2015-09-26 | 2015-09-26 | Interactive 3D navigation system with 3D helicopter view at destination |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020160114072A Division KR20170037816A (ko) | 2015-09-26 | 2016-09-05 | 목적지에서 3d 헬리콥터 뷰를 갖는 인터렉티브 3d 네비게이션 시스템 |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20180082402A true KR20180082402A (ko) | 2018-07-18 |
KR102046719B1 KR102046719B1 (ko) | 2019-11-19 |
Family
ID=56618095
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020160114072A KR20170037816A (ko) | 2015-09-26 | 2016-09-05 | 목적지에서 3d 헬리콥터 뷰를 갖는 인터렉티브 3d 네비게이션 시스템 |
KR1020180080191A KR102046719B1 (ko) | 2015-09-26 | 2018-07-10 | 목적지에서 3d 헬리콥터 뷰를 갖는 인터렉티브 3d 네비게이션 시스템 및 이의 탐색 명령 제공방법 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020160114072A KR20170037816A (ko) | 2015-09-26 | 2016-09-05 | 목적지에서 3d 헬리콥터 뷰를 갖는 인터렉티브 3d 네비게이션 시스템 |
Country Status (4)
Country | Link |
---|---|
US (1) | US9702722B2 (ko) |
EP (1) | EP3147630B1 (ko) |
KR (2) | KR20170037816A (ko) |
CN (1) | CN106918347B (ko) |
Families Citing this family (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10506049B2 (en) * | 2015-11-05 | 2019-12-10 | Pandora Media, Llc | Selecting media using vehicle information |
US10839593B2 (en) | 2016-04-08 | 2020-11-17 | Maxx Media Group, LLC | System, method and software for adding three-dimensional images to an intelligent virtual assistant that appear to project forward of or vertically above an electronic display |
DE102016110850A1 (de) * | 2016-06-14 | 2017-12-14 | Dr. Ing. H.C. F. Porsche Aktiengesellschaft | Bedieneinheit für ein Kraftfahrzeug und Verfahren zum Bedienen einer Bedieneinheit eines Kraftfahrzeugs |
JP6956376B2 (ja) * | 2017-06-29 | 2021-11-02 | パナソニックIpマネジメント株式会社 | 表示制御システム、表示システム、表示制御方法、プログラム、及び移動体 |
US11193784B2 (en) | 2017-10-13 | 2021-12-07 | Waymo Llc | End of trip sequence |
US11099025B2 (en) * | 2017-12-15 | 2021-08-24 | Google Llc | Providing street-level imagery related to a ride service in a navigation application |
KR102031332B1 (ko) * | 2018-01-22 | 2019-10-14 | 네이버 주식회사 | 내비게이션 서비스 제공 방법 및 그 장치 |
CN108592939A (zh) * | 2018-07-11 | 2018-09-28 | 维沃移动通信有限公司 | 一种导航方法及终端 |
CN112985432B (zh) * | 2019-12-16 | 2022-02-15 | 湖北亿咖通科技有限公司 | 车辆导航方法、装置、电子设备及存储介质 |
US20220327939A1 (en) * | 2021-04-08 | 2022-10-13 | Honeywell International Inc. | Systems and methods for providing contextual three dimensional imagery to aircraft operators |
CN113516780A (zh) * | 2021-07-05 | 2021-10-19 | 南斗六星系统集成有限公司 | 一种模拟车辆行驶交互方法及系统 |
WO2023086497A1 (en) * | 2021-11-11 | 2023-05-19 | Tesla, Inc. | Intrusion protected user interface and functionality for vehicle using embedded controller |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004150918A (ja) * | 2002-10-30 | 2004-05-27 | Shinichi Yamanaka | 地図表示方法 |
JP2004362549A (ja) * | 2003-05-09 | 2004-12-24 | Matsushita Electric Ind Co Ltd | 車載用映像再生システムおよびカーナビゲーション装置 |
US20130325341A1 (en) * | 2012-06-05 | 2013-12-05 | Apple Inc. | Route display and review |
US20140267282A1 (en) * | 2013-03-14 | 2014-09-18 | Robert Bosch Gmbh | System And Method For Context Dependent Level Of Detail Adjustment For Navigation Maps And Systems |
Family Cites Families (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001290820A (ja) * | 2000-01-31 | 2001-10-19 | Mitsubishi Electric Corp | 映像収集装置、映像検索装置および映像収集検索システム |
US20040218910A1 (en) * | 2003-04-30 | 2004-11-04 | Chang Nelson L. | Enabling a three-dimensional simulation of a trip through a region |
DE602004014674D1 (de) * | 2003-05-09 | 2008-08-14 | Matsushita Electric Ind Co Ltd | Videowiedergabesystem und Fahrzeugnavigationsvorrichtung in einem Fahrzeug |
US8359157B2 (en) | 2008-04-07 | 2013-01-22 | Microsoft Corporation | Computing navigation device with enhanced route directions view |
US20100250120A1 (en) | 2009-03-31 | 2010-09-30 | Microsoft Corporation | Managing storage and delivery of navigation images |
DE102009034373A1 (de) * | 2009-07-23 | 2010-03-25 | Daimler Ag | Verfahren zur Anzeige von Informationen zu einer Fahrstrecke in einem Fahrzeug |
WO2011154050A1 (en) | 2010-06-11 | 2011-12-15 | Tomtom International B.V. | Navigation device and method having enhanced instruction including a panoramic image of a scene |
US8319772B2 (en) * | 2010-07-23 | 2012-11-27 | Microsoft Corporation | 3D layering of map metadata |
US8825392B2 (en) | 2011-06-30 | 2014-09-02 | Navteq B.V. | Map view |
DE102011084993A1 (de) * | 2011-10-21 | 2013-04-25 | Robert Bosch Gmbh | Übernahme von Daten aus bilddatenbasierenden Kartendiensten in ein Assistenzsystem |
US9135751B2 (en) * | 2012-06-05 | 2015-09-15 | Apple Inc. | Displaying location preview |
US9367959B2 (en) * | 2012-06-05 | 2016-06-14 | Apple Inc. | Mapping application with 3D presentation |
US9886795B2 (en) * | 2012-09-05 | 2018-02-06 | Here Global B.V. | Method and apparatus for transitioning from a partial map view to an augmented reality view |
US9470776B2 (en) * | 2012-09-06 | 2016-10-18 | Cascube Ltd | Position and behavioral tracking system and uses thereof |
CN103839040B (zh) * | 2012-11-27 | 2017-08-25 | 株式会社理光 | 基于深度图像的手势识别方法和装置 |
CN103402106B (zh) * | 2013-07-25 | 2016-01-06 | 青岛海信电器股份有限公司 | 三维图像显示方法及装置 |
US9874456B2 (en) * | 2014-11-28 | 2018-01-23 | Here Global B.V. | Method, apparatus and computer program product for providing a destination preview |
US9417087B1 (en) * | 2015-02-06 | 2016-08-16 | Volkswagen Ag | Interactive 3D navigation system |
-
2015
- 2015-09-26 US US14/866,854 patent/US9702722B2/en active Active
-
2016
- 2016-08-10 EP EP16183648.1A patent/EP3147630B1/en active Active
- 2016-09-05 KR KR1020160114072A patent/KR20170037816A/ko active Application Filing
- 2016-09-26 CN CN201610849281.7A patent/CN106918347B/zh active Active
-
2018
- 2018-07-10 KR KR1020180080191A patent/KR102046719B1/ko active IP Right Grant
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004150918A (ja) * | 2002-10-30 | 2004-05-27 | Shinichi Yamanaka | 地図表示方法 |
JP2004362549A (ja) * | 2003-05-09 | 2004-12-24 | Matsushita Electric Ind Co Ltd | 車載用映像再生システムおよびカーナビゲーション装置 |
US20130325341A1 (en) * | 2012-06-05 | 2013-12-05 | Apple Inc. | Route display and review |
US20140267282A1 (en) * | 2013-03-14 | 2014-09-18 | Robert Bosch Gmbh | System And Method For Context Dependent Level Of Detail Adjustment For Navigation Maps And Systems |
Also Published As
Publication number | Publication date |
---|---|
CN106918347B (zh) | 2020-11-06 |
KR102046719B1 (ko) | 2019-11-19 |
KR20170037816A (ko) | 2017-04-05 |
US20170089716A1 (en) | 2017-03-30 |
EP3147630A1 (en) | 2017-03-29 |
CN106918347A (zh) | 2017-07-04 |
EP3147630B1 (en) | 2022-09-28 |
US9702722B2 (en) | 2017-07-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR102046719B1 (ko) | 목적지에서 3d 헬리콥터 뷰를 갖는 인터렉티브 3d 네비게이션 시스템 및 이의 탐색 명령 제공방법 | |
US9803993B2 (en) | Interactive 3D navigation system | |
JP6606494B2 (ja) | ナビゲーション命令を表示する装置及び方法 | |
US10546560B2 (en) | Systems and methods for presenting virtual content in a vehicle | |
JP4138574B2 (ja) | カーナビゲーション装置 | |
JP5798392B2 (ja) | 駐車支援装置 | |
JP2007127437A (ja) | 情報表示装置 | |
US12033244B2 (en) | Map driven augmented reality | |
US11656089B2 (en) | Map driven augmented reality | |
JP4529080B2 (ja) | ナビゲーション装置 | |
JP2006244217A (ja) | 三次元地図表示方法、三次元地図表示プログラムおよび三次元地図表示装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A107 | Divisional application of patent | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant |