KR20150125774A - Apparatus and method for voice guidance of the navigation system - Google Patents
Apparatus and method for voice guidance of the navigation system Download PDFInfo
- Publication number
- KR20150125774A KR20150125774A KR1020140052259A KR20140052259A KR20150125774A KR 20150125774 A KR20150125774 A KR 20150125774A KR 1020140052259 A KR1020140052259 A KR 1020140052259A KR 20140052259 A KR20140052259 A KR 20140052259A KR 20150125774 A KR20150125774 A KR 20150125774A
- Authority
- KR
- South Korea
- Prior art keywords
- unit
- information
- camera
- voice
- voice guidance
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/09—Arrangements for giving variable traffic instructions
- G08G1/0962—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
- G08G1/0968—Systems involving transmission of navigation instructions to the vehicle
- G08G1/096855—Systems involving transmission of navigation instructions to the vehicle where the output is provided in a suitable form to the driver
- G08G1/096872—Systems involving transmission of navigation instructions to the vehicle where the output is provided in a suitable form to the driver where instructions are given per voice
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/09—Arrangements for giving variable traffic instructions
- G08G1/0962—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
- G08G1/0968—Systems involving transmission of navigation instructions to the vehicle
- G08G1/0969—Systems involving transmission of navigation instructions to the vehicle having a display in the form of a map
Landscapes
- Engineering & Computer Science (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Automation & Control Theory (AREA)
- Navigation (AREA)
- Traffic Control Systems (AREA)
Abstract
Description
본 발명은 내비게이션의 음성안내 장치 및 방법에 관한 것으로, 주행경로중 TBT 지점의 소정거리 이전에 차량에 부착된 촬상장치를 이용하여 정보표지판을 촬영하고, 정보표지판의 글자를 인식하여 음성으로 변환한 후 음성안내를 하는 내비게이션의 음성안내 장치 및 방법에 관한 것이다.
The present invention relates to a voice guidance apparatus and method for navigation, and it is an object of the present invention to provide a voice guidance apparatus and method for a navigation system which photographs an information signboard using an imaging device attached to a vehicle a predetermined distance before a TBT point in a traveling route, And more particularly, to a voice guidance apparatus and method for navigating voice guidance.
최근 내비게이션은 차량을 운행하는 운전자에게는 필수품으로 자리를 잡아가고 있으며, 과거 2D 내비게이션이 주로 사용되었지만 최근에는 3D 내비게이션이 많이 사용되고 있다. Recently, navigation has become a necessity for the driver who drives the vehicle. In the past 2D navigation was mainly used, but recently, 3D navigation is widely used.
그리고, 내비게이션의 기능도 다양해져 단순히 목적지를 지정하고 그 목적지까지의 경로를 안내하는데 그치지 않고, 테마검색 또는 스마트폰과 연동된 경로탐색 등 다양한 기능의 내비게이션이 개발되고 있다. In addition, the function of the navigation is various, and not only the destination is specified and the route to the destination is guided, but navigation of various functions such as the theme search or the navigation with the smart phone is developed.
종래 특허로서 한국공개특허공보 제2012-0017184호는 차량용 길안내 장치 및 방법에 관한 것으로 길안내 정보를 간이형 방향표시(TBT:Turn-By-Turn) 방식으로 표시하는 내비게이션 장치이다. 종래의 내비게이션 장치의 경우 TBT 지점에서 주행 경로에 해당하는 방향에 대해서 '우회전' 또는 '좌회전'으로 안내를 하게 되는데, 교차로가 많은 경우 운전자는 어느 지점에서 차량을 회전해야 하는지 내비게이션의 안내 만으로는 어려움이 있었다.
As a conventional patent, Korean Patent Laid-Open Publication No. 2012-0017184 relates to a vehicle navigation apparatus and method, and is a navigation apparatus for displaying navigation information in a simple turn-by-turn (TBT) manner. In the case of a conventional navigation device, the user is guided to a 'right turn' or a 'left turn' with respect to the direction corresponding to the traveling path at the TBT point. If there are many intersections, there was.
상기와 같은 종래 기술의 문제점을 해결하기 위하여 안출된 본 발명은 TBT 지점에서 차량의 주행 경로를 운전자에게 안내하기 위한 목적이 있다.SUMMARY OF THE INVENTION The present invention has been made in order to solve the above problems of the prior art, and it is an object of the present invention to guide a driving route of a vehicle from a TBT point to a driver.
또한, 차량에 장착된 카메라를 이용하여 TBT 지점에서 회전할 방향에 위치한 정보표지판을 촬영하기 위한 목적이 있다.It is also an object of the present invention to photograph an information sign positioned in the direction of rotation at the TBT point by using a camera mounted on the vehicle.
또한, 카메라에 의해 촬영된 정보표지판의 글자를 인식하여 음성으로 변환하여 음성안내 하기 위한 목적이 있다.
It is another object of the present invention to recognize characters of an information signpost photographed by a camera and convert the recognized characters into a voice to provide voice guidance.
본 발명의 상기 목적은 차량의 현재위치정보를 수신하기 위한 GPS 수신부, 사용자로부터 목적지 정보를 입력받기 위한 사용자 입력부, 상기 목적지에 해당하는 경로정보를 표시하기 위한 디스플레이부, 상기 경로정보를 음성으로 출력하는 사운드부, 상기 TBT 지점에서 주행경로에 해당하는 방향을 촬영하기 위한 하나 이상의 촬상장치로 이루어진 카메라부 및 상기 주행경로 상에 위치한 TBT 지점의 소정거리 이전에 상기 카메라부를 이용하여 주행방향에 해당하는 위치의 정보표지판을 촬영하고, 상기 정보표지판의 글자를 음성으로 변환하여 안내하는 제어부에 의해 달성된다.
The above object of the present invention can be also achieved by a GPS receiver for receiving current position information of a vehicle, a user input unit for receiving destination information from a user, a display unit for displaying route information corresponding to the destination, A camera unit including a sound unit for photographing a direction corresponding to the traveling path at the TBT point and at least one imaging device for photographing a direction corresponding to the traveling path at the TBT point, Capturing an information sign of a location, and converting the character of the information sign to an audio and guiding it.
따라서, 본 발명은 목적지 경로상에 있는 TBT 지점에서 회전할 위치를 차량에 장착된 카메라에 의해 촬영된 정보표지판을 인식하여 음성으로 안내함으로써 운전자가 잘못된 경로로 빠지는 것을 막는 효과가 있다.
Therefore, the present invention has the effect of preventing the driver from falling into the wrong path by guiding the position to turn at the TBT point on the destination path by recognizing the information sign photographed by the camera mounted on the vehicle and voicing it.
도 1은 본 발명에 따른 내비게이션 장치의 구성도,
도 2는 본 발명에 따른 통신형 내비게이션 시스템 구성도,
도 3은 본 발명에 따른 통신형 내비게이션 장치의 구성도,
도 4는 본 발명에 따른 클라우드 서버의 구성도,
도 5는 본 발명에 따른 카메라에 의해 촬영된 영상을 이용하여 음성안내하는 방법의 순서도,
도 6은 본 발명에 따른 실시예 1의 카메라부에 의해 촬영된 영상 이미지,
도 7은 본 발명에 따른 실시예 1의 내비게이션 디스플레이 화면,
도 8은 본 발명에 따른 실시예 2의 카메라부에 의해 촬영된 영상 이미지,
도 9는 본 발명에 따른 실시예 2의 내비게이션 디스플레이 화면이다.1 is a configuration diagram of a navigation device according to the present invention,
2 is a configuration diagram of a communication type navigation system according to the present invention,
3 is a configuration diagram of a communication-type navigation device according to the present invention;
4 is a configuration diagram of a cloud server according to the present invention;
FIG. 5 is a flowchart of a method of voice guidance using an image photographed by a camera according to the present invention,
FIG. 6 is a diagram illustrating a video image captured by the camera unit according to the first embodiment of the present invention,
FIG. 7 is a diagram showing a navigation display screen according to the first embodiment of the present invention,
8 is a diagram showing a video image taken by the camera unit according to the second embodiment of the present invention,
9 is a navigation display screen according to the second embodiment of the present invention.
본 명세서 및 청구범위에 사용된 용어나 단어는 통상적이거나 사전적인 의미로 한정해서 해석되어서는 아니되며, 발명자는 그 자신의 발명을 가장 최선의 방법으로 설명하기 위해 용어의 개념을 적절하게 정의할 수 있다는 원칙에 입각하여 본 발명의 기술적 사상에 부합하는 의미와 개념으로 해석되어야만 한다.The terms and words used in the present specification and claims should not be construed as limited to ordinary or dictionary terms and the inventor may appropriately define the concept of the term in order to best describe its invention It should be construed as meaning and concept consistent with the technical idea of the present invention.
따라서, 본 명세서에 기재된 실시예와 도면에 도시된 구성은 본 발명의 가장 바람직한 일 실시예에 불과할 뿐이고 본 발명의 기술적 사상을 모두 대변하는 것은 아니므로, 본 출원시점에 있어서 이들을 대체할 수 있는 다양한 균등물과 변형예들이 있을 수 있음을 이해하여야 한다.Therefore, the embodiments described in this specification and the configurations shown in the drawings are merely the most preferred embodiments of the present invention and do not represent all the technical ideas of the present invention. Therefore, It is to be understood that equivalents and modifications are possible.
이하 첨부된 도면을 참조하여 본 발명의 바람직한 실시예를 상세히 설명하기로 한다. Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings.
도 1은 본 발명에 따른 내비게이션 장치의 구성도이다. 도 1에 도시된 바와 같이, TBT(Turn by Turn) 지점에서 카메라에 의해 촬영된 영상을 이용하여 음성안내를 하는 내비게이션 장치(10)의 구성은 차량의 현재 위치정보를 수신하기 위한 GPS 수신부(100), 사용자로부터 목적지 정보를 입력받기 위한 사용자 입력부(500), 목적지에 해당하는 경로정보를 표시하기 위한 디스플레이부(300), 경로정보를 음성으로 출력하는 사운드부(600), TBT 지점에서 주행경로에 해당하는 방향을 촬영하기 위한 하나 이상의 촬상장치로 이루어진 카메라부(800), 카메라부(800)에서 촬영한 영상을 저장하는 이미지 저장부(930)종별 명칭이 저장된 명칭 저장부(920), 이정표(40)의 명칭이 저장된 이정표 저장부(940) 및 주행경로에 해당하는 TBT 정보와 지도 정보를 저장하는 지도 저장부(910)를 포함하여 이루어지는 저장부(900), 카메라부에서 촬영된 영상에서 글자를 인식하여 음성으로 변환하는 TTS(Text to speech)부 및 카메라부(800)에서 촬영된 영상에서 글자를 인식하여 음성으로 변환하여 안내하는 제어부(700)를 포함하여 이루어진다.1 is a configuration diagram of a navigation device according to the present invention. As shown in FIG. 1, the
그리고, 정보표지판은 간판, 이정표, 교통전광판, 표지판 등 주행하는 도로 주변에서 위치를 표시할 수 있는 구조물이 포함된다. The information sign includes a structure that can display a position around the road on which the vehicle is traveling, such as a signboard, a milestone, a traffic signboard, and a sign.
또한, 카메라부(800)는 주행하는 차량의 경로가 TBT 지점에서 후회전인 경우, 차량의 정면 또는 우측편에 위치한 정보표지판을 촬영하게 되고, 주행하는 차량의 경로가 TBT 지점에서 좌회전인 경우, 차량의 정면 또는 좌측편에 위치한 정보표지판을 촬영하게 된다.When the path of the traveling vehicle is before the traverse at the TBT point, the
그리고, 제어부(700)는 카메라부(800)에서 촬영된 영상 중에서 글자 크기가 큰 정보표지판에 가중치를 부가하여 인식하게 되고, TTS부(200)를 통해 음성으로 변환하여 음성안내를 하게 된다.The
그리고, 제어부(700)는 카메라부(800)에서 촬영된 영상에서 인식한 명칭과 명칭 저장부(920)에 저장된 종별 명칭이 일치할 경우, 카메라부(800)에서 촬영된 영상에서 인식한 명칭에 가중치를 부가하여 인식하게 되고, TTS부(200)를 통해 음성으로 변환하여 음성안내를 하게 된다.If the name recognized in the image captured by the
그리고, 제어부(700)는 카메라부(800)에서 촬영한 정보표지판의 크기, 위치, 색상 및 글자의 크기 등에 따라서 가중치를 부가하여 정보표지판의 글자를 추출하게 된다. 정보표지판의 크기가 크면 가중치 값이 크고, 정보표지판의 위치가 1층 또는 2층에 위치하면 가중치 값이 크고, 정보표지판의 글자의 색상이 붉은색이나 눈에 잘 뛰는 색상인 경우 가중치 값이 크고, 정보표지판에 적힌 글자의 크기가 크면 가중치 값이 커지는 것이 바람직하다.The
또한, 제어부(700)는 카메라부(800)에서 촬영한 정보표지판이 이정표(40)인 경우, TBT 지점에서 회전방향에 해당하는 화살표를 인식하고, 화살표 방향에 해당하는 글자를 인식하고 TTS부(200)를 통해 음성으로 변환하여 음성안내를 하게 된다.When the information sign taken by the
그리고, 제어부(700)가 인식한 이정표(40)의 명칭과 명칭 저장부(920)에 자장된 종별 명칭이 다른 경우, 카메라부(800)에서 촬영한 이정표(40)의 명칭을 TTS부(200)에서 음성으로 변환하여 음성안내를 하게 된다.If the name of the
그리고, 카메라부(800)는 날씨, 계절 등 주위 환경의 변화에 따라 정보표지판을 촬영하게 되는 거리가 달라지게 된다. 예를 들어, 동일한 지점이더라도 여름에는 50M 전에서 촬영을 하게 되고, 겨울에는 20M전에서 촬영하는 등 가시거리에 따라서 촬영하게 되는 거리는 가변되게 된다.In addition, the
도 2는 본 발명에 따른 통신형 내비게이션 시스템 구성도, 도 3은 본 발명에 따른 통신형 내비게이션 장치의 구성도, 도 4는 본 발명에 따른 클라우드 서버의 구성도이다. 도 2 내지 도 4에 도시된 바와 같이, 내비게이션 장치(10)가 클라우드 서버(20)와 통신하는 통신형 내비게이션인 경우, 내비게이션 장치(10)의 구성은 도 3과 같이 GPS 수신부, 디스플레이부(300), 통신부(400), 제어부(700), 카메라부(800), 사용자 입력부(500), 사운드부(600)로 구성되며, 통신부(400)를 통해 클라우드 서버(20)와 통신을 하게 된다. FIG. 2 is a diagram illustrating a configuration of a communication type navigation system according to the present invention, FIG. 3 is a configuration diagram of a communication type navigation apparatus according to the present invention, and FIG. 4 is a configuration diagram of a cloud server according to the present invention. 2 to 4, when the
내비게이션 장치(10)의 제어부(700)는 카메라부(800)에서 촬영한 정보표지판의 영상을 클라우드 서버(20)로 전송하게 되고, 클라우드 서버(20)로부터 정보표지판의 글자가 음성으로 변환된 음성정보를 수신하고, 사운드부(600)를 통해 음성안내 하게 된다.The
그리고, 도 4에서와 같이 클라우드 서버(20)는 지도 저장부(910), 명칭 저장부(920), 이미지 저장부(930), 이정표 저장부(940)를 포함한 저장부(900)부와 내비게이션 장치(10)로부터 수신한 영상 정보의 글자를 인식하기 위한 서버 제어부(710), 내비게이션 장치(10)와 통신하기 위한 서버 통신부(410), 서버 제어부(710)가 인식한 글자를 음성으로 변환하기 위한 TTS부(200)로 구성된다.4, the
도 5는 본 발명에 따른 카메라에 의해 촬영된 영상을 이용하여 음성안내하는 방법의 순서도이다. 도 5에 도시된 바와 같이, TBT(Turn-By-Turn) 지점에서 카메라에 의해 촬영된 영상을 이용하여 내비게이션에서 음성안내를 하는 방법은, 출발지 또는 현재위치로부터 사용자가 입력한 목적지까지의 경로를 추출하고(S100), 추출한 경로에 해당하는 TBT 지점을 추출하게 된다(S200). 그리고, 카메라부(800)를 이용하여 TBT 지점의 소정거리 이전에서 차량 전방에 위치한 정보표지판을 촬영하게 된다(S300). 5 is a flowchart of a method of voice guidance using an image photographed by a camera according to the present invention. As shown in FIG. 5, a method of providing voice guidance in a navigation using an image photographed by a camera at a turn-by-turn (TBT) point includes a route from a place of departure or a present location to a destination (S100), and a TBT point corresponding to the extracted path is extracted (S200). Then, an information sign located in front of the vehicle is photographed at a predetermined distance before the TBT point by using the camera unit 800 (S300).
그리고, 카메라부(800)에서 촬영한 정보표지판의 글자를 제어부를 통해 추출하고(S400), 제어부(700)에서는 추출한 정보표지판의 글자를 TTS(Text to speech)부(200)를 통해 음성으로 변환하고(S500), 변환된 음성을 사운드부(600)를 통해 출력하게 된다(S600). The
그리고, 정보표지판은 간판, 이정표, 교통전광판, 표지판 등 주행하는 도로 주변에서 위치를 표시할 수 있는 구조물이 포함된다. The information sign includes a structure that can display a position around the road on which the vehicle is traveling, such as a signboard, a milestone, a traffic signboard, and a sign.
또한, 카메라부(800)는 주행하는 차량의 경로가 TBT 지점에서 후회전인 경우, 차량의 정면 또는 우측편에 위치한 정보표지판을 촬영하게 되고, 주행하는 차량의 경로가 TBT 지점에서 좌회전인 경우, 차량의 정면 또는 좌측편에 위치한 정보표지판을 촬영하게 된다.When the path of the traveling vehicle is before the traverse at the TBT point, the
그리고, 제어부(700)는 카메라부(800)에서 촬영된 영상 중에서 글자 크기가 큰 정보표지판에 가중치를 부가하여 인식하게 되고, TTS부(200)를 통해 음성으로 변환하여 음성안내를 하게 된다.The
그리고, 제어부(700)는 카메라부(800)에서 촬영된 영상에서 인식한 명칭과 명칭 저장부(920)에 저장된 종별 명칭이 일치할 경우, 카메라부(800)에서 촬영된 영상에서 인식한 명칭에 가중치를 부가하여 인식하게 되고, TTS부(200)를 통해 음성으로 변환하여 음성안내를 하게 된다.If the name recognized in the image captured by the
또한, 제어부(700)는 카메라부(800)에서 촬영한 정보표지판이 이정표(40)인 경우, TBT 지점에서 회전방향에 해당하는 화살표를 인식하고, 화살표 방향에 해당하는 글자를 인식하고 TTS부(200)를 통해 음성으로 변환하여 음성안내를 하게 된다.When the information sign taken by the
그리고, 제어부(700)는 카메라부(800)에서 촬영한 정보표지판의 크기, 위치, 색상 및 글자의 크기 등에 따라서 가중치를 부가하여 정보표지판의 글자를 추출하게 된다. 정보표지판의 크기가 크면 가중치 값이 크고, 정보표지판의 위치가 1층 또는 2층에 위치하면 가중치 값이 크고, 정보표지판의 글자의 색상이 붉은색이나 눈에 잘 뛰는 색상인 경우 가중치 값이 크고, 정보표지판에 적힌 글자의 크기가 크면 가중치 값이 커지는 것이 바람직하다.The
그리고, 제어부(700)가 인식한 이정표(40)의 명칭과 명칭 저장부(920)에 자장된 종별 명칭이 다른 경우, 카메라부(800)에서 촬영한 이정표(40)의 명칭을 TTS부(200)에서 음성으로 변환하여 음성안내를 하게 된다.If the name of the
그리고, 카메라부(800)는 날씨, 계절 등 주위 환경의 변화에 따라 정보표지판을 촬영하게 되는 거리가 달라지게 된다. 예를 들어, 동일한 지점이더라도 여름에는 50M 전에서 촬영을 하게 되고, 겨울에는 20M전에서 촬영하는 등 가시거리에 따라서 촬영하게 되는 거리는 가변되게 된다.In addition, the
그리고, 내비게이션 장치(10)가 클라우드 서버(20)와 통신하는 통신형 내비게이션인 경우, 내비게이션 장치(10)의 구성은 도 3과 같이 GPS 수신부, 디스플레이부(300), 통신부(400), 제어부(700), 카메라부(800), 사용자 입력부(500), 사운드부(600)로 구성되며, 통신부(400)를 통해 클라우드 서버(20)와 통신을 하게 된다. When the
내비게이션 장치(10)의 제어부(700)는 카메라부(800)에서 촬영한 정보표지판의 영상을 클라우드 서버(20)로 전송하게 되고, 클라우드 서버(20)로부터 정보표지판의 글자가 음성으로 변환된 음성정보를 수신하고, 사운드부(600)를 통해 음성안내 하게 된다.The
클라우드 서버(20)는 지도 저장부(910), 명칭 저장부(920), 이미지 저장부(930), 이정표 저장부(940)를 포함한 저장부(900)부와 내비게이션 장치(10)로부터 수신한 영상 정보의 글자를 인식하기 위한 서버 제어부(710), 내비게이션 장치(10)와 통신하기 위한 서버 통신부(410), 서버 제어부(710)가 인식한 글자를 음성으로 변환하기 위한 TTS부(200)로 구성된다.The
도 6은 본 발명에 따른 실시예 1의 카메라부에 의해 촬영된 영상 이미지, 도 7은 본 발명에 따른 실시예 1의 내비게이션 디스플레이 화면이다. 도 6 내지 도 7에서와 같이 차량에 장착된 카메라에 의해 촬영된 영상을 이용하여 글자를 인식하고 인식한 글자를 음성으로 변환하여 음성안내를 하게 된다. FIG. 6 is a video image taken by the camera unit according to the first embodiment of the present invention, and FIG. 7 is a navigation display screen according to the first embodiment of the present invention. As shown in FIGS. 6 to 7, characters are recognized using a video image captured by a camera mounted on a vehicle, and the recognized characters are converted into voice to provide voice guidance.
실시예 1)Example 1)
운전자가 도 7과 같은 경로를 주행하기 위해 목적지를 입력하고 주행하다가, TBT 지점의 30M이전에서 차량에 장창된 카메라를 이용하여 TBT 지점에서 회전하는 우측편의 정보표지판을 촬영하게 된다. 도 6에서와 같이 내비게이션 장치(10)의 제어부(700)에서는 카메라를 통해 촬영된 영상 중에서 주행방향(50)에 해당하는 정보표지판 중에서 글자가 큰 간판인 광명모터스를 인식하게 된다. 그리고, TTS(Text to speech)부를 통해 광명모터스 글자를 음성으로 변환하고 내비게이션 장치(10)의 사운드부(600)를 통해 음성안내를 하게 된다. 음성안내 예시로는 "잠시 후 우측으로 광명모터스 방향입니다." 라는 음성안내를 하게 된다.The driver enters the destination to travel on the same route as shown in FIG. 7, drives the vehicle, and shoots the information sign on the right side turning at the TBT point using the camera installed in the vehicle before 30M of the TBT point. As shown in FIG. 6, the
도 8은 본 발명에 따른 실시예 2의 카메라부에 의해 촬영된 영상 이미지, 도 9는 본 발명에 따른 실시예 2의 내비게이션 디스플레이 화면이다. 도 8 내지 도 9에서와 같이 차량에 장착된 카메라에 의해 촬영된 영상을 이용하여 글자를 인식하고 인식한 글자를 음성으로 변환하여 음성안내를 하게 된다. FIG. 8 is a video image taken by the camera unit according to the second embodiment of the present invention, and FIG. 9 is a navigation display screen according to the second embodiment of the present invention. As shown in FIGS. 8 to 9, characters are recognized using a video image captured by a camera mounted on a vehicle, and the recognized characters are converted into voice to provide voice guidance.
실시예 2)Example 2)
운전자가 도 9와 같은 경로로 주행하기 위해 목적지를 입력하고 주행하다가, TBT 지점의 30M이전에서 차량에 장창된 카메라를 이용하여 도 8과 같이 TBT 지점에서 회전하는 우측편의 이정표(40)를 촬영하게 된다. TBT 지점에서 주행방향(50)이 우측이기 때문에 제어부(700)에서는 카메라를 통해 촬영된 이정표의 영상에서 우측화살표의 옆에 있는 글자(주엽동, 일산3동)를 인식하게 된다. 그리고, 인식한 "주엽동, 일산3동" 글자를 TTS부(200)에서 음성으로 변환하고, 내비게이션 장치(10)의 사운드부(600)를 통해 음성안내 하게 된다. 음성안내 예시로는 "잠시 후 우측으로 주엽동, 일산3동 방향입니다." 라는 음성안내를 하게 된다.The driver enters the destination to travel on the same route as shown in FIG. 9, and takes a
본 발명은 이상에서 살펴본 바와 같이 바람직한 실시예를 들어 도시하고 설명하였으나, 상기한 실시예에 한정되지 아니하며 본 발명의 정신을 벗어나지 않는 범위 내에서 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 다양한 변경과 수정이 가능할 것이다.
While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is clearly understood that the same is by way of illustration and example only and is not to be taken by way of limitation, Various changes and modifications will be possible.
100 : 내비게이션 장치 110 : GPS 수신부
120 : 디스플레이부 130 : 통신부
140 : 제어부 150 : 저장부
151 : 목적지 카테고리 저장부 152 : 아바타 저장부
153 : 지도 저장부 200 : 컴퓨터
300 : 휴대통신기기 400 : 노트북/랩탑
500 : 아바타 600 : 자차
700 : 예상주행경로 800 : 교통상황표시바
900 : 도로
100: navigation device 110: GPS receiver
120: display unit 130:
140: control unit 150:
151: Destination category storage unit 152: Avatar storage unit
153: map storage unit 200: computer
300: portable communication device 400: notebook / laptop
500: Avatar 600:
700: Estimated route 800: Traffic situation list Civa
900: Road
Claims (15)
차량의 현재위치정보를 수신하기 위한 GPS 수신부;
사용자로부터 목적지 정보를 입력받기 위한 사용자 입력부;
상기 목적지에 해당하는 경로정보를 표시하기 위한 디스플레이부;
상기 경로정보를 음성으로 출력하는 사운드부;
상기 TBT 지점에서 주행경로에 해당하는 방향을 촬영하기 위한 하나 이상의 촬상장치로 이루어진 카메라부; 및
상기 주행경로 상에 위치한 TBT 지점의 소정거리 이전에 상기 카메라부를 이용하여 주행방향에 해당하는 위치의 정보표지판을 촬영하고, 상기 정보표지판의 글자를 음성으로 변환하여 안내하는 제어부
를 포함하여 이루어지는 것을 특징으로 하는 TBT 지점에서 카메라에 의해 촬영된 영상을 이용하여 음성안내를 하는 내비게이션 장치.
A navigation device for performing voice guidance using an image photographed by a camera at a TBT (Turn by Turn)
A GPS receiver for receiving current position information of the vehicle;
A user input unit for receiving destination information from a user;
A display unit for displaying route information corresponding to the destination;
A sound unit for outputting the path information by voice;
A camera unit including at least one imaging device for photographing a direction corresponding to a traveling path at the TBT point; And
A controller for photographing an information sign at a location corresponding to the driving direction using the camera unit a predetermined distance before the TBT point located on the traveling path,
The navigation device according to claim 1, wherein the navigation device is a navigation device.
상기 내비게이션 장치는
상기 카메라부에서 촬영한 영상을 저장하는 이미지 저장부, 종별 명칭이 저장된 명칭 저장부, 이정표의 명칭이 저장된 이정표 저장부 및 상기 주행경로에 해당하는 TBT 정보와 지도 정보를 저장하는 지도 저장부를 포함하여 이루어지는 저장부; 및
상기 카메라부에서 촬영된 영상에서 글자를 인식하여 음성으로 변환하는 TTS(Text to speech)부
를 더 포함하여 이루어지는 것을 특징으로 하는 TBT 지점에서 카메라에 의해 촬영된 영상을 이용하여 음성안내를 하는 내비게이션 장치.
The method according to claim 1,
The navigation device
An image storage unit for storing images photographed by the camera unit, a name storage unit storing a category name, a milestone storage unit storing a name of the milestone, and a map storage unit storing TBT information and map information corresponding to the travel route, ; And
A text to speech (TTS) unit for recognizing a character in an image photographed by the camera unit and converting the recognized character into a voice
The navigation apparatus according to claim 1, wherein the navigation apparatus further comprises:
상기 카메라부는 상기 차량이 상기 TBT 지점에서 우회전하는 경로인 경우, 정면 또는 우측편에 위치한 정보표지판을 촬영하고, 상기 TBT 지점에서 좌회전하는 경로인 경우, 정면 또는 좌측편에 위치한 정보표지판을 촬영하는 것을 특징으로 하는 TBT 지점에서 카메라에 의해 촬영된 영상을 이용하여 음성안내를 하는 내비게이션 장치.
The method according to claim 1,
The camera unit photographs the information signboard located on the front or right side when the vehicle is a right turn at the TBT point and photographs the information signboard located on the front or left side if the path is the left turn at the TBT point Wherein the voice guidance is performed using the image captured by the camera at the characteristic TBT point.
상기 제어부는 상기 카메라부에서 촬영한 상기 정보표지판이 이정표인 경우, 상기 TBT 지점에서 회전방향에 해당하는 화살표를 인식하고 상기 화살표 방향에 해당하는 글자를 인식하여 음성안내에 사용하는 것을 특징으로 하는 TBT 지점에서 카메라에 의해 촬영된 영상을 이용하여 음성안내를 하는 내비게이션 장치.
3. The method of claim 2,
Wherein the control unit recognizes an arrow corresponding to a rotation direction at the TBT point and recognizes a character corresponding to the arrow direction when the information sign photographed by the camera unit is a milestone. Wherein the voice guidance is performed using an image photographed by a camera at a point.
상기 제어부가 인식한 상기 이정표의 명칭과 상기 명칭 저장부에 저장된 종별 명칭이 다른 경우, 상기 카메라부에서 촬영한 상기 이정표의 명칭을 음성으로 변환하여 안내하는 것을 특징으로 하는 TBT 지점에서 카메라에 의해 촬영된 영상을 이용하여 음성안내를 하는 내비게이션 장치.
5. The method of claim 4,
When the name of the milestone recognized by the control unit is different from the name of the category stored in the name storage unit, the name of the milestone taken by the camera unit is converted into a voice and guided by the camera. The navigation apparatus comprising:
상기 제어부는 상기 카메라부에서 촬영된 영상 중에서 글자 크기가 큰 상기 정보표지판에 가중치를 부가하여 인식하고, 음성안내에 사용하는 것을 특징으로 하는 TBT 지점에서 카메라에 의해 촬영된 영상을 이용하여 음성안내를 하는 내비게이션 장치.
The method according to claim 1,
Wherein the control unit recognizes the information signboard having a large character size among the images photographed by the camera unit and adds the weight to the information signboard and uses the weighted information for voice guidance. .
상기 제어부는 상기 카메라부에서 촬영된 영상에서 인식한 명칭과 상기 명칭 저장부에 저장된 상기 종별 명칭이 일치할 경우, 상기 명칭에 가중치를 부가하여 음성안내에 사용하는 것을 특징으로 하는 TBT 지점에서 카메라에 의해 촬영된 영상을 이용하여 음성안내를 하는 내비게이션 장치.
The method according to claim 1,
Wherein the control unit adds a weight to the name when the name recognized in the image captured by the camera unit coincides with the category name stored in the name storage unit, And a voice guidance is performed using the video shot by the user.
상기 제어부는 상기 카메라부에서 촬영된 영상에서 인식한 정보표지판의 크기, 위치 및 색상 중 어느 하나 이상을 이용하여 가중치를 부가하고, 음성안내에 사용하는 것을 특징으로 하는 TBT 지점에서 카메라에 의해 촬영된 영상을 이용하여 음성안내를 하는 내비게이션 장치.
The method according to claim 1,
Wherein the control unit adds a weight value using at least one of a size, a position, and a color of the information signage recognized from the image photographed by the camera unit, and uses the weighted value for voice guidance. A navigation device that performs voice guidance using video.
상기 카메라부는 날씨 또는 계절 중 어느 하나에 따라서 상기 정보표지판의 촬영 거리가 가변되는 것을 특징으로 하는 TBT 지점에서 카메라에 의해 촬영된 영상을 이용하여 음성안내를 하는 내비게이션 장치.
The method according to claim 1,
Wherein the camera unit varies the photographing distance of the information sign depending on either the weather or the seasons.
상기 내비게이션 장치가 클라우드 서버와 통신하는 통신형 내비게이션인 경우, 상기 저장부와 상기 TTS부는 상기 클라우드 서버에 위치하는 것을 특징으로 하는 TBT 지점에서 카메라에 의해 촬영된 영상을 이용하여 음성안내를 하는 내비게이션 장치.
3. The method of claim 2,
Wherein the storage unit and the TTS unit are located in the cloud server when the navigation apparatus communicates with the cloud server, wherein the storage unit and the TTS unit are located in the cloud server. .
상기 내비게이션 장치가 클라우드 서버와 통신하는 통신형 내비게이션인 경우, 상기 제어부는 상기 카메라부에서 촬영한 상기 정보표지판의 영상을 상기 클라우드 서버로 전송하고, 상기 클라우드 서버에서 상기 정보표지판의 글자를 음성으로 변환한 음성정보를 수신하여 상기 사운드부를 통해 음성안내 하는 것을 특징으로 하는 TBT 지점에서 카메라에 의해 촬영된 영상을 이용하여 음성안내를 하는 내비게이션 장치.
The method according to claim 1,
Wherein the control unit transmits the image of the information signage photographed by the camera unit to the cloud server when the navigation device communicates with the cloud server and converts the characters of the information signage into voice by the cloud server Wherein the voice guidance is performed through the sound unit by receiving one voice information.
출발지 또는 현재위치로부터 목적지까지의 경로를 추출하는 제 1단계;
상기 경로에 해당하는 TBT 지점을 추출하는 제 2단계;
상기 TBT 지점의 소정거리 이전에서, 카메라부를 이용하여 차량 전방에 위치한 정보표지판을 촬영하는 제 3단계;
제어부에서 상기 카메라부에서 촬영한 상기 정보표지판의 글자를 인식하는 제 4단계;
상기 정보표지판의 글자를 TTS(Text to speech)부를 통해 음성으로 변환하는 제 5단계; 및
상기 TTS부에서 변환된 음성을 사운드부를 통해 출력하는 제 6단계
를 포함하여 이루어지는 것을 특징으로 하는 TBT 지점에서 카메라에 의해 촬영된 영상을 이용하여 내비게이션에서 음성안내를 하는 방법.
In the method of performing voice guidance in navigation using an image photographed by a camera at a TBT point,
A first step of extracting a route from a starting point or a current position to a destination;
A second step of extracting a TBT point corresponding to the path;
A third step of photographing an information sign located at the front of the vehicle using a camera unit at a predetermined distance before the TBT point;
A fourth step of recognizing a character of the information signpost photographed by the camera unit in a control unit;
A fifth step of converting the characters of the information sign to voice through a text to speech (TTS) unit; And
And a sixth step of outputting the voice converted by the TTS unit through the sound unit
The method of claim 1, further comprising the steps of: (a) providing a voice guidance in a navigation mode using an image captured by a camera at a TBT point.
상기 제어부는 상기 카메라부에서 촬영된 영상에서 인식한 정보표지판의 크기, 위치, 색상 및 글자의 크기 중 어느 하나 이상에 가중치를 부가하여, 음성안내에 사용하는 것을 특징으로 하는 TBT 지점에서 카메라에 의해 촬영된 영상을 이용하여 내비게이션에서 음성안내를 하는 방법.
13. The method of claim 12,
Wherein the control unit adds a weight to at least one of a size, a position, a color, and a size of an information signboard recognized from the image photographed by the camera unit to use it for voice guidance. A method of performing voice guidance in navigation using photographed images.
상기 내비게이션 장치가 클라우드 서버와 통신하는 통신형 내비게이션인 경우, 저장부와 상기 TTS부는 상기 클라우드 서버에 위치하는 것을 특징으로 하는 TBT 지점에서 카메라에 의해 촬영된 영상을 이용하여 내비게이션에서 음성안내를 하는 방법.
13. The method of claim 12,
Wherein the storage unit and the TTS unit are located in the cloud server when the navigation device communicates with the cloud server. The method according to claim 1, .
상기 내비게이션 장치가 클라우드 서버와 통신하는 통신형 내비게이션인 경우, 상기 제어부는 상기 카메라부에서 촬영한 상기 정보표지판의 영상을 상기 클라우드 서버로 전송하고, 상기 클라우드 서버에서 상기 정보표지판의 글자를 음성으로 변환한 음성정보를 수신하여 상기 사운드부를 통해 음성안내 하는 것을 특징으로 하는 TBT 지점에서 카메라에 의해 촬영된 영상을 이용하여 내비게이션에서 음성안내를 하는 방법.
13. The method of claim 12,
Wherein the control unit transmits the image of the information signage photographed by the camera unit to the cloud server when the navigation device communicates with the cloud server and converts the characters of the information signage into voice by the cloud server Wherein the voice guidance is performed through the sound unit by receiving one voice information, and the voice guidance is performed in the navigation using the image photographed by the camera at the TBT point.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020140052259A KR102156017B1 (en) | 2014-04-30 | 2014-04-30 | Apparatus and method for voice guidance of the navigation system |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020140052259A KR102156017B1 (en) | 2014-04-30 | 2014-04-30 | Apparatus and method for voice guidance of the navigation system |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20150125774A true KR20150125774A (en) | 2015-11-10 |
KR102156017B1 KR102156017B1 (en) | 2020-09-16 |
Family
ID=54605224
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020140052259A KR102156017B1 (en) | 2014-04-30 | 2014-04-30 | Apparatus and method for voice guidance of the navigation system |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR102156017B1 (en) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20210084912A (en) * | 2019-12-30 | 2021-07-08 | 한국과학기술원 | Apparatus and method for determinating driving information of vehicle using position and pattern of road sign |
CN113494909A (en) * | 2020-03-19 | 2021-10-12 | 阿里巴巴集团控股有限公司 | Method, device and system for searching target object |
CN114467299A (en) * | 2019-10-07 | 2022-05-10 | 金泰克斯公司 | 3D display system for camera monitoring system |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2023073935A1 (en) * | 2021-10-29 | 2023-05-04 | パイオニア株式会社 | Audio output device, audio output method, program, and storage medium |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20100004022A (en) * | 2008-07-02 | 2010-01-12 | 엠텍비젼 주식회사 | Apparatus, system for navigating using road signs and method using the same |
KR20140000488A (en) * | 2012-06-22 | 2014-01-03 | 현대모비스 주식회사 | Method for guiding turn point of crossroad and navigation system |
-
2014
- 2014-04-30 KR KR1020140052259A patent/KR102156017B1/en active IP Right Grant
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20100004022A (en) * | 2008-07-02 | 2010-01-12 | 엠텍비젼 주식회사 | Apparatus, system for navigating using road signs and method using the same |
KR20140000488A (en) * | 2012-06-22 | 2014-01-03 | 현대모비스 주식회사 | Method for guiding turn point of crossroad and navigation system |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114467299A (en) * | 2019-10-07 | 2022-05-10 | 金泰克斯公司 | 3D display system for camera monitoring system |
CN114467299B (en) * | 2019-10-07 | 2024-01-23 | 金泰克斯公司 | 3D display system for camera monitoring system |
KR20210084912A (en) * | 2019-12-30 | 2021-07-08 | 한국과학기술원 | Apparatus and method for determinating driving information of vehicle using position and pattern of road sign |
CN113494909A (en) * | 2020-03-19 | 2021-10-12 | 阿里巴巴集团控股有限公司 | Method, device and system for searching target object |
Also Published As
Publication number | Publication date |
---|---|
KR102156017B1 (en) | 2020-09-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10126141B2 (en) | Systems and methods for using real-time imagery in navigation | |
US11698268B2 (en) | Street-level guidance via route path | |
US20220221295A1 (en) | Generating navigation instructions | |
JP4935145B2 (en) | Car navigation system | |
US9064155B2 (en) | Guidance device, guidance method, and guidance program | |
JP5962594B2 (en) | In-vehicle display device and program | |
JP2008039596A (en) | System, method, program for providing information and memory medium | |
JP6016732B2 (en) | Display control device | |
CN105043397B (en) | Electronic device | |
JPWO2015059812A1 (en) | Movement support apparatus and movement support method | |
JP6627214B2 (en) | Information display device, control method, program, and storage medium | |
KR102156017B1 (en) | Apparatus and method for voice guidance of the navigation system | |
US11181386B2 (en) | Navigation device, destination guiding system, and non-transitory recording medium | |
JP2017032436A (en) | Movement guide system, movement guide method and computer program | |
JP5680481B2 (en) | In-vehicle system | |
WO2007088915A1 (en) | Route guidance device, route guidance method, route guidance program, and recording medium | |
US20230175854A1 (en) | Explicit Signage Visibility Cues in Driving Navigation | |
JP2009133657A (en) | Guidance device, guidance method, guidance program, and recording medium thereof | |
TWI420077B (en) | Navigation system and method thereof | |
JP7321642B2 (en) | navigation device | |
Grewei et al. | blindBike: an assistive bike navigation system for low-vision persons | |
CN114067590A (en) | Ground information display method, device and equipment and vehicle | |
JP2019105581A (en) | Navigation device | |
CN115077536A (en) | Navigation prompting method and device, storage medium and electronic equipment | |
CN107624184A (en) | Method and apparatus for sharing picture from vehicle |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant |