KR20130077623A - Apparatus for driving guidance and method using the same - Google Patents
Apparatus for driving guidance and method using the same Download PDFInfo
- Publication number
- KR20130077623A KR20130077623A KR1020110146434A KR20110146434A KR20130077623A KR 20130077623 A KR20130077623 A KR 20130077623A KR 1020110146434 A KR1020110146434 A KR 1020110146434A KR 20110146434 A KR20110146434 A KR 20110146434A KR 20130077623 A KR20130077623 A KR 20130077623A
- Authority
- KR
- South Korea
- Prior art keywords
- information
- vehicle
- visible light
- light communication
- image
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 47
- 238000004891 communication Methods 0.000 claims abstract description 92
- 230000008859 change Effects 0.000 claims abstract description 21
- 230000003213 activating effect Effects 0.000 claims abstract description 5
- 230000001133 acceleration Effects 0.000 claims description 2
- 230000004913 activation Effects 0.000 abstract 1
- 230000009189 diving Effects 0.000 abstract 1
- 238000010586 diagram Methods 0.000 description 8
- 238000005516 engineering process Methods 0.000 description 7
- 230000008569 process Effects 0.000 description 6
- 230000000007 visual effect Effects 0.000 description 5
- 238000006243 chemical reaction Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 239000004065 semiconductor Substances 0.000 description 3
- 230000008901 benefit Effects 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 238000007781 pre-processing Methods 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 230000001066 destructive effect Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 239000010408 film Substances 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 239000010409 thin film Substances 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
- B60W40/02—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
- B60W40/04—Traffic conditions
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3605—Destination input or retrieval
- G01C21/362—Destination input or retrieval received from an external device or application, e.g. PDA, mobile phone or calendar application
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04B—TRANSMISSION
- H04B10/00—Transmission systems employing electromagnetic waves other than radio-waves, e.g. infrared, visible or ultraviolet light, or employing corpuscular radiation, e.g. quantum communication
- H04B10/11—Arrangements specific to free-space transmission, i.e. transmission through air or vacuum
- H04B10/114—Indoor or close-range type systems
- H04B10/116—Visible light communication
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2420/00—Indexing codes relating to the type of sensors based on the principle of their operation
- B60W2420/40—Photo, light or radio wave sensitive means, e.g. infrared sensors
- B60W2420/403—Image sensing, e.g. optical camera
Landscapes
- Engineering & Computer Science (AREA)
- Remote Sensing (AREA)
- Physics & Mathematics (AREA)
- Radar, Positioning & Navigation (AREA)
- Automation & Control Theory (AREA)
- Computer Networks & Wireless Communication (AREA)
- Mathematical Physics (AREA)
- Transportation (AREA)
- Mechanical Engineering (AREA)
- Signal Processing (AREA)
- Electromagnetism (AREA)
- General Physics & Mathematics (AREA)
- Traffic Control Systems (AREA)
Abstract
Description
본 발명은 차량의 주행 안내 및 운행 제어 방법과 그 장치에 관한 것으로, 보다 상세하게는 가시광 통신 및 영상 처리를 이용하여 수집한 정보에 기초하여 차량 주행에 관련된 안내 정보를 제공하고 차량의 운행을 자동으로 제어하는 방법 및 장치에 관한 것이다.The present invention relates to a driving guide and a driving control method of a vehicle and a device thereof, and more particularly, to provide guide information related to driving of a vehicle based on information collected using visible light communication and image processing, and to automatically operate the vehicle. It relates to a method and apparatus for controlling.
가시광 통신은 사람의 눈에 보이는 빛인 가시광(visible light)을 이용하여 통신하는 것으로, LED 등의 전등을 눈이 느낄 수 없을 정도의 매우 빠른 속도로 켜고 끄는 것을 반복하고, 광수신부가 이를 감지함으로써 통신하는 방식이다. 예를 들면, 켜진 상태를 1, 꺼진 상태를 0으로 하여 디지털 신호를 주고받음으로써 통신이 가능한 방식이다.Visible light communication uses visible light, which is the visible light of the human eye, and repeats turning on and off the lights such as LEDs at a very high speed so that the eye cannot feel it, and the light receiving unit detects the communication. That's the way it is. For example, it is possible to communicate by exchanging digital signals by setting the ON state to 1 and the OFF state to 0.
가시광 무선 통신 기술은, 반도체가 메모리 및 프로세서에 이어 조명으로도 활용되기 시작하면서 반도체에 의해 빛을 발광하는 LED(Light Emitting Diode)와 같은 조명의 빛을 통신 광원으로 사용할 수 있는 기술로 등장하게 되었다. 즉 이러한 LED 조명 통신 융합은 LED를 통해 조명을 함과 동시에 통신을 할 수 있는 융합 기술로서, 조명은 눈으로 볼 수 있는 가시광이므로 가시광 무선 통신 또는 가시광 통신이라고도 하는 것이다. 가시광 통신 기술은 디지털 조명과 통신을 융합한 통신 기술로, 통신 여부가 눈으로 확인될 수 있다는 편리함이 있다. 가시광 통신 기술에서는 상술한 바와 같이 반도체에 의해 빛을 발광하는 LED 조명을 사용하게 되는데, 이러한 LED 조명은 디지털로 제어할 수 있기 때문에, 기존의 아날로그 조명에 비하여 기술 발전 속도가 높고, 다양한 멀티미디어 조명 및 통신 서비스를 제공할 수 있다.Visible light communication technology has emerged as a technology that can be used as a communication light source, such as light emitting diodes (LEDs) that emit light by semiconductors, as semiconductors are also being used as lightings after memory and processors. . In other words, the LED lighting communication convergence is a fusion technology capable of communicating at the same time while lighting through the LED, the lighting is also visible light wireless communication or visible light communication because visible light visible. Visible light communication technology is a communication technology that combines digital lighting and communication, there is a convenience that communication can be visually confirmed. In the visible light communication technology, as described above, LED lights emitting light by semiconductors are used. Since the LED lights can be digitally controlled, the technology development speed is higher than that of conventional analog lights, and various multimedia lights and It can provide a communication service.
가시광 통신에서 사용되는 빛은 780nm에서 380nm의 파장(wavelength)을 갖는다. 이 파장을 주파수로 바꾸면, 385 THz에서 789 THz(주파수 대역 = 빛의 속도(300,000,000m)/파장(380×1000))에 해당하는데, 가청(오디오) 주파수 대역은 20 Hz에서 20,000 Hz에 해당되고, 적외선 파장을 사용하는 IrDA, 2.4 Hz의 IEEE 802.11n, UWB, 802.15.4 Zigbee, Bluetooth, 60 GHz의 IEEE802.15-3c 등이 있는 바, 가시광 통신은 종래의 통신 방법들 중 800-900nm를 사용하는 IrDA와 가장 유사한 파장을 사용하지만, 조명과 동시에 통신을 할 수 있다는 것이 특징이Light used in visible light communication has a wavelength of 780nm to 380nm. Converting this wavelength to frequency corresponds to 385 THz to 789 THz (frequency band = speed of light (300,000,000 m) / wavelength (380 × 1000)), with the audible (audio) frequency band corresponding to 20 Hz to 20,000 Hz. , IrDA using infrared wavelengths, IEEE 802.11n at 2.4 Hz, UWB, 802.15.4 Zigbee, Bluetooth, IEEE802.15-3c at 60 GHz, and visible light communication is 800-900 nm among conventional communication methods. It uses the most similar wavelength to IrDA, but it can communicate simultaneously with lighting.
며 장점이 된다.It is an advantage.
가시광 통신을 이용할 경우 조명으로 사용되는 빛을 사용하기 때문에, 종래의 각종 전자파를 이용하는 통신 방법과는 달리 인체에 무해하며, 주파수 허가를 받을 필요가 없고, ISM과의 간섭도 없으며, 물리적으로 보안기능을 제공하고, 초정밀 측위에 사용할 수 있는 등의 여러 가지 장점이 있다. 특히, 종래에 사용되는 대표적인 아날로그 조명인 형광등은 생산 시나 폐기 시에 환경 파괴 물질의 배출이 발생된다는 문제점이 있는 반면, LED 조명은 보다 친환경적이며, 90% 이상 전력을 절감할 수 있을 뿐만 아니라 보다 긴 수명을 가지는 장점으로 인하여 미국, 유럽, 일본 등에서는 기존 조명 기구를 LED 조명으로 변경하도록 권장하는 법률 제정을 추진 중에 있다.When using visible light communication, it uses light that is used as lighting, so it is harmless to human body, unlike the conventional communication method using various kinds of electromagnetic waves, it does not need to be licensed, does not interfere with ISM, and has a physical security function. There are a number of advantages, including the ability to provide high precision positioning and use for ultra-precision positioning. In particular, fluorescent lamps, which are typical analog lights used in the related art, have a problem that emissions of environmentally destructive materials are generated during production or disposal, whereas LED lighting is more environmentally friendly, and saves more than 90% of power, Because of its longevity, the US, Europe, and Japan are enacting legislation that recommends changing existing lighting fixtures to LED lighting.
차량에 있어서도, 차량의 조명등 예컨대, 전조등, 후미등 등을 통해 상기의 가시광 통신을 수행하는 기술들이 제안되었다.Also in a vehicle, techniques for performing the above-mentioned visible light communication through a lighting lamp of a vehicle, for example, a headlight and a taillight, have been proposed.
그러나, 도로에서 차량이 가시광 통신 장치를 이용하여 차량 대 차량의 통신만을 수행할 경우, 현재 운전중인 차량과 직접적인 연관이 있는 상대 차량, 예를 들어 바로 앞에서 운행 중인 차량으로부터 수신되는 정보만을 이용하기 위한 기술은 제안되지 않았다. 또한 현재 운전중인 차량과 주변 차량의 상대적 위치 정보를 이용한 주행 안내 및/또는 차량 제어 방법도 제안되지 않았다.However, when the vehicle performs only the vehicle-to-vehicle communication using the visible light communication device on the road, it is necessary to use only information received from the other vehicle directly related to the vehicle currently being driven, for example, the vehicle in front of the vehicle. No technique has been proposed. In addition, a driving guidance and / or vehicle control method using relative position information of a vehicle currently being driven and a surrounding vehicle has not been proposed.
따라서, 본 명세서는 주변 차량과의 가시광 통신뿐만 아니라 카메라 등을 통해 수집한 영상 정보를 더 이용하여, 차량 운행과 관련된 상황 판단의 정확성을 높인 주행 안내 및/또는 차량 제어 방법과 장치를 제안하는데 그 목적이 있다.Accordingly, the present specification proposes a driving guide and / or a vehicle control method and apparatus for improving accuracy of situation determination related to vehicle driving by further using image information collected through a camera or the like as well as visible light communication with surrounding vehicles. There is a purpose.
상기와 같은 목적을 달성하기 위하여 본 명세서에서의 일 개시에 따르면, 차량의 주행 안내 정보를 단말에 출력하도록 제어하기 위한 방법이 제공된다. 상기 방법은 카메라 모듈을 통해 외부 영상을 수신하는 단계와; 상기 수신한 영상으로부터 제 1 정보를 획득하는 단계와; 상기 수신한 영상에 가시광 통신이 수행되는 영역이 있는 경우, 가시광 통신 모듈을 활성화하는 단계와; 상기 가시광 통신 모듈을 통해 제 2 정보를 수신하는 단계와; 상기 제 1 정보와 상기 제 2 정보에 기초하여 결정한 주행 안내 정보를 출력하는 단계를 포함한다. 상기 제 1 정보는 상기 차량 주변의 다른 차량 또는 신호등의 존재 여부를 나타내는 정보이고, 상기 제 2 정보는 차량 주변의 다른 차량 또는 신호등의 상태 변경을 나타내는 정보이다.According to one disclosure in the present specification to achieve the above object, there is provided a method for controlling to output the driving guide information of the vehicle to the terminal. The method includes receiving an external image via a camera module; Acquiring first information from the received image; Activating a visible light communication module when there is an area where visible light communication is performed in the received image; Receiving second information via the visible light communication module; Outputting driving guide information determined based on the first information and the second information. The first information is information indicating the presence or absence of another vehicle or traffic light around the vehicle, and the second information is information indicating a state change of another vehicle or traffic light around the vehicle.
상기 방법에서 상기 제 1 정보는 선행 차량의 방향 및 거리를 나타내는 정보이고, 상기 제 2 정보는 선행 차량의 급제동 정보이고, 상기 주행 안내 정보는 감속을 지시하는 정보일 수 있다.In the method, the first information may be information indicating a direction and a distance of the preceding vehicle, the second information may be rapid braking information of the preceding vehicle, and the driving guide information may be information indicating deceleration.
상기 방법에서 상기 제 1 정보는 선행 차량의 방향 및 거리를 나타내는 정보이고, 상기 제 2 정보는 선행 차량의 차선 변경 정보이고, 상기 주행 안내 정보는 감속을 지시하는 정보일 수 있다.In the method, the first information may be information indicating a direction and a distance of the preceding vehicle, the second information may be lane change information of the preceding vehicle, and the driving guide information may be information indicating deceleration.
상기 방법에서 상기 제 1 정보는 신호등과의 거리를 나타내는 정보이고, 상기 제 2 정보는 상기 신호등으로부터 수신한 신호 변경 관련 정보이고, 상기 주행 안내 정보는 속도의 가속 또는 감속을 지시하는 정보일 수 있다.In the method, the first information may be information indicating a distance from the traffic light, the second information may be signal change related information received from the traffic light, and the driving guide information may be information indicating acceleration or deceleration of speed. .
상기 방법은 상기 제 1 정보와 상기 제 2 정보에 기초하여 상기 차량의 주행을 제어하는 단계를 더 포함할 수 있다.The method may further include controlling driving of the vehicle based on the first information and the second information.
본 명세서에서의 다른 개시에 따르면, 차량의 위치 정보를 단말에 출력하도록 제어하기 위한 방법이 제공된다. 상기 방법은 카메라 모듈을 통해 외부 영상을 수신하는 단계와; 상기 수신된 영상에 가시광 통신 수행 가능 영역이 존재하는지를 확인하는 단계와; 상기 확인 결과, 가시광 통신 수행 가능 영역이 존재하는 경우,가시광 통신 모듈을 활성화하는 단계와; 상기 활성화된 가시광 통신 모듈을 통해 상기 가시광 통신 수행 가능 영역의 지리적 좌표를 수신하는 단계와; 상기 수신된 영상 및 지리적 좌표에 기초하여 상기 차량의 위치 정보를 출력하는 단계를 포함할 수 있다.According to another disclosure herein, a method for controlling to output the position information of the vehicle to the terminal is provided. The method includes receiving an external image via a camera module; Confirming whether a visible light communication region exists in the received image; Activating a visible light communication module when the visible light communication capable region exists as a result of the checking; Receiving geographic coordinates of the visible light communication enabled area through the activated visible light communication module; And outputting location information of the vehicle based on the received image and geographical coordinates.
본 명세서에서의 또 다른 개시에 따르면 단말이 제공된다. 상기 단말은 출력부와; 영상을 촬영하기 위한 카메라 모듈과; 외부와 가시광 통신을 하기 위한 가시광 통신 모듈과; 상기 출력부, 카메라 모듈 및 상기 통신부와 기능적으로 연결되는 제어부를 포함한다. 상기 제어부는, 상기 카메라 모듈로부터 촬영되는 영상에서 제 1 정보를 검출하고, 상기 영상에서 가시광 통신이 수행되는 영역이 있는 경우, 가시광 통신 모듈을 활성화하도록 제어하고, 제 2 정보를 수신하도록 상기 가시광 통신 모듈을 제어하고, 상기 제 1 정보와 상기 제 2 정보에 기초하여 결정한 주행 안내 정보를 상기 출력부를 통해 출력하도록 제어할 수 있다. 상기 제 1 정보는 상기 차량 주변의 다른 차량 또는 신호등의 존재 여부를 나타내는 정보이고, 상기 제 2 정보는 차량 주변의 다른 차량 또는 신호등의 상태 변경을 나타내는 정보이다.According to yet another disclosure herein, a terminal is provided. The terminal and the output unit; A camera module for capturing an image; A visible light communication module for communicating visible light with the outside; And a controller that is functionally connected to the output unit, the camera module, and the communication unit. The controller detects first information from an image captured by the camera module, controls to activate a visible light communication module when there is an area where visible light communication is performed in the image, and receives the second information. The module may be controlled, and the driving guide information determined based on the first information and the second information may be output through the output unit. The first information is information indicating the presence or absence of another vehicle or traffic light around the vehicle, and the second information is information indicating a state change of another vehicle or traffic light around the vehicle.
본 명세서에 따른 주행 안내 및/또는 차량 제어 방법과 장치는, 운행 중인 차량의 주변 상황에 대한 정보를 더 정확히 판단하여 그에 알맞은 운행 안내 정보를 제공하고 차량 운행을 효과적으로 제어할 수 있는 효과가 있다.The driving guide and / or vehicle control method and apparatus according to the present disclosure have an effect of more accurately determining information about a surrounding situation of a driving vehicle, providing driving guide information corresponding thereto, and effectively controlling vehicle driving.
도 1은 본 발명의 실시예에 따른 단말 장치의 블록도이다.
도 2는 본 발명의 일 실시예에 따른 단말 장치의 장착도이다.
도 3은 본 발명의 일 실시예에 따른 주행 안내 정보 출력 및 운행 제어 방법을 나타낸 흐름도이다.
도 4 (a) 내지 (c)는 본 명세서에 따른 주행 안내 정보 출력 및 운행 제어 방법의 제 1 실시예이다.
도 5 (a) 및 (b)는 본 명세서에 따른 주행 안내 정보 출력 및 운행 제어 방법의 제 2 실시예이다.
도 6 (a) 및 (b)는 본 명세서에 따른 주행 안내 정보 출력 및 운행 제어 방법의 제 3 실시예이다.
도 7(a) 및 (b)는 본 명세서에 따른 차량의 위치 측정 방법의 실시예이다.1 is a block diagram of a terminal device according to an embodiment of the present invention.
2 is a mounting diagram of a terminal device according to an embodiment of the present invention.
3 is a flowchart illustrating a driving guide information output and a driving control method according to an exemplary embodiment of the present invention.
4 (a) to (c) is a first embodiment of the driving guidance information output and driving control method according to the present specification.
5 (a) and (b) are a second embodiment of a driving guide information output and driving control method according to the present specification.
6 (a) and (b) illustrate a third embodiment of a method for outputting driving guidance information and driving control according to the present specification.
7 (a) and 7 (b) are embodiments of a method for measuring a position of a vehicle according to the present specification.
본 명세서에서 사용되는 기술적 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아님을 유의해야 한다. 또한, 본 명세서에서 사용되는 기술적 용어는 본 명세서에서 특별히 다른 의미로 정의되지 않는 한, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 의미로 해석되어야 하며, 과도하게 포괄적인 의미로 해석되거나, 과도하게 축소된 의미로 해석되지 않아야 한다. 또한, 본 명세서에서 사용되는 기술적인 용어가 본 발명의 사상을 정확하게 표현하지 못하는 잘못된 기술적 용어일 때에는, 당업자가 올바르게 이해할 수 있는 기술적 용어로 대체되어 이해되어야 할 것이다. 또한, 본 발명에서 사용되는 일반적인 용어는 사전에 정의되어 있는 바에 따라, 또는 전후 문맥상에 따라 해석되어야 하며, 과도하게 축소된 의미로 해석되지 않아야 한다.It is to be noted that the technical terms used herein are merely used to describe particular embodiments, and are not intended to limit the present invention. It is also to be understood that the technical terms used herein are to be interpreted in a sense generally understood by a person skilled in the art to which the present invention belongs, Should not be construed to mean, or be interpreted in an excessively reduced sense. In addition, when the technical terms used herein are incorrect technical terms that do not accurately express the spirit of the present invention, they should be replaced with technical terms that can be understood correctly by those skilled in the art. In addition, the general terms used in the present invention should be interpreted according to a predefined or prior context, and should not be construed as being excessively reduced.
또한, 본 명세서에서 사용되는 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "구성된다" 또는 "포함한다" 등의 용어는 명세서 상에 기재된 여러 구성 요소들, 또는 여러 단계들을 반드시 모두 포함하는 것으로 해석되지 않아야 하며, 그 중 일부 구성 요소들 또는 일부 단계들은 포함되지 않을 수도 있고, 또는 추가적인 구성 요소 또는 단계들을 더 포함할 수 있는 것으로 해석되어야 한다.Also, the singular forms "as used herein include plural referents unless the context clearly dictates otherwise. In the present application, the term "comprising" or "comprising" or the like should not be construed as necessarily including the various elements or steps described in the specification, Or may be further comprised of additional components or steps.
또한, 또한, 본 명세서에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 명세서 작성의 용이함만이 고려되어 부여되거나 혼용되는 것으로서, 그 자체로 서로 구별되는 의미 또는 역할을 갖는 것은 아니다In addition, the suffixes "module" and "unit" for the components used herein are given or mixed in consideration of ease of specification, and do not have distinct meanings or roles from each other.
이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 실시예를 상세히 설명하되, 도면 부호에 관계없이 동일하거나 유사한 구성 요소는 동일한 참조 번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다. Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings, wherein like reference numerals refer to like or similar elements throughout the several views, and redundant description thereof will be omitted.
또한, 본 발명을 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다. 또한, 첨부된 도면은 본 발명의 사상을 쉽게 이해할 수 있도록 하기 위한 것일 뿐, 첨부된 도면에 의해 본 발명의 사상이 제한되는 것으로 해석되어서는 아니 됨을 유의해야 한다. 본 발명의 사상은 첨부된 도면 외에 모든 변경, 균등물 내지 대체물에까지도 확장되는 것으로 해석되어야 한다.In the following description, well-known functions or constructions are not described in detail since they would obscure the invention in unnecessary detail. It is to be noted that the accompanying drawings are only for the purpose of facilitating understanding of the present invention, and should not be construed as limiting the scope of the present invention with reference to the accompanying drawings. The spirit of the invention should be construed to extend to all changes, equivalents, and substitutes in addition to the accompanying drawings.
도 1은 본 발명의 실시예에 따른 단말 장치의 블록도이다.1 is a block diagram of a terminal device according to an embodiment of the present invention.
도 1에 도시한 바와 같이, 상기 단말 장치(100)는, 카메라 모듈(110), 통신부(120), 제어부(130), 표시부(140) 및 저장부(150)를 포함할 수 있다. 도 1에 도시된 단말 장치(100)의 구성 요소는 모두 필수 구성 요소인 것은 아니며, 상기 단말 장치는 도 1에 도시된 구성 요소보다 많은 구성 요소에 의해 구현될 수도 있고, 그보다 적은 구성 요소에 의해서도 구현될 수 있다.As illustrated in FIG. 1, the
상기 카메라 모듈(110)은, 상기 단말 장치(100)의 임의의 동일면의 동일 중심축 상에 수평 간격으로 이격되어 설치되는 적어도 한 쌍의 카메라(일 예로, 스테레오 카메라(stereo camera) 또는 스테레오코스픽 카메라(stereoscopic camera)) 또는 단일 카메라를 포함한다. 이때, 상기 고정된 수평 간격은, 일반적인 사람의 두 눈 간의 거리를 고려하여 설정할 수 있으며, 상기 단말 장치(100)를 구성할 때 설정한다. 또한, 상기 카메라 모듈(110)은, 영상 촬상이 가능한 임의의 모든 카메라 모듈일 수도 있다.The
또한, 상기 카메라 모듈(110)은, 상기 한 쌍의 카메라에 의해 동시에 촬영된 제1 영상(일 예로, 상기 한 쌍의 카메라에 포함된 좌측 카메라에 의해 촬영된 좌측 영상)과 제2 영상(일 예로, 상기 한 쌍의 카메라에 포함된 우측 카메라에 의해 촬영된 우측 영상)을 수신한다.In addition, the
또한, 상기 카메라 모듈(110)은, CCD 소자, CMOS 소자 등과 같은 이미지 센서일 수 있다.In addition, the
또한, 상기 카메라 모듈(110)은, 차량에 설치되는 경우, 상기 차량의 소정 위치에 고정되어, 주행 방향의 전방, 측방, 후방 등을 촬영하고, 상기 촬영된 영상을 수신하도록 구성될 수도 있다.In addition, when installed in the vehicle, the
상기 통신부(120)는 주변 차량, 가로등, 신호등 등 차량 주변의 가시광 통신 가능 장치와의 가시광 통신을 통하여 차량의 주변 상황과 관련된 정보를 수신할 수 있다. 예를 들어 전방 차량의 급제동, 차선 변경 등의 정보, 신호등의 신호 변경과 관련된 정보, 가로등의 위치 정보 등을 수신할 수 있다. 또는 상기 통신부는 전광판에 디스플레이되는 광고에서 상품 관련 정보를 수신할 수도 있다.The
상기 제어부(130)는, 상기 단말 장치(100)의 전반적인 동작을 제어하며 특히 본명세서에서 제안된 방법 및 기능을 수행한다.The controller 130 controls the overall operation of the
또한, 상기 제어부(130)는 카메라 모듈(110)로부터 수신한 영상에서 상기 카메라 모듈이 장착된 차량과 전방 물체와의 거리에 근거하여 설정된 하나 이상의 검색 영역을 선택할 수 있다. 여기에서 상기 하나 이상의 검색 영역은 현재 차량의 위치와 상기 전방 물체와의 거리에 따라 상기 물체의 전체 부분 중에 영상에 나타나는 일 부분만으로 이루어질 수 있다.In addition, the controller 130 may select one or more search areas set based on the distance between the vehicle equipped with the camera module and the front object in the image received from the
또한, 상기 제어부(130)는 카메라 모듈(110)로부터 수신한 영상에서 가시광 통신이 가능한 영역을 판별하여 해당 부분만을 영상 처리할 수 있다. 예를 들어, 상기 영상 중 전방 차량의 후미등 부분만을 선별하여 그 부분만을 추적할 수 있고, 상기 추적을 통해 전방 차량의 위치, 속도 등을 판단할 수 있다.In addition, the controller 130 may determine a region in which visible light communication is possible in the image received from the
또한, 상기 제어부(130)는 상기 통신부(120)를 통해 차량 주변 상황과 관련된 정보를 수신할 수 있다. 상기 제어부(130)는 상기 수신한 정보와 상기 카메라 모듈(110)로부터 검출한 영상 정보를 기초로 차량 주변의 상황을 판단할 수 있다. 이때, 상기 제어부(130)는 상기 판단에 근거하여 차량의 운행을 직접 제어할 수도 있다. 즉, 차량의 방향 전환 장치, 속도 변환 장치 등을 제어하여 현재 상황에 적절한 운행을 할 수 있도록 제어할 수 있다. 예컨대, 운행 속도를 감속하도록 차량의 브레이크 장치를 직접 제어할 수 있으며, 전방의 위험 물체를 피하도록 차량의 방향 전환 장치를 직접 제어할 수도 있다.In addition, the controller 130 may receive information related to a vehicle surrounding situation through the
상기 표시부(140)는, 상기 제어부(130)의 제어에 따라 차량의 운행을 안내하는 정보를 표시할 수 있다. 즉, 상기 제어부(130)가 판단한 차량 주변의 상황에 근거하여 주의 운전, 감속 등을 안내하는 정보를 표시할 수 있다. The
또한, 상기 표시부(140)는, 상기 제어부(130)의 제어에 따라 상기 저장부(150)에 포함된 사용자 인터페이스 및/또는 그래픽 사용자 인터페이스를 이용하여 다양한 메뉴 화면 등과 같은 다양한 콘텐츠를 표시한다. 여기서, 상기 표시부(140)에 표시되는 콘텐츠는, 다양한 텍스트 또는 이미지 데이터(각종 정보 데이터 포함)와 아이콘, 리스트 메뉴, 콤보 박스 등의 데이터를 포함하는 메뉴 화면 등을 포함한다.In addition, the
또한, 상기 표시부(140)는, 3차원 디스플레이(3D Display) 또는 2차원 디스플레이(2D Display)를 포함한다. 또한, 상기 표시부(140)는, 액정 디스플레이(Liquid Crystal Display : LCD), 박막 트랜지스터 액정 디스플레이(Thin Film Transistor-Liquid Crystal Display : TFT LCD), 유기 발광 다이오드(Organic Light-Emitting Diode : OLED), 플렉시블 디스플레이(Flexible Display), LED(Light Emitting Diode) 중에서 적어도 하나를 포함할 수도 있다.In addition, the
또한, 상기 표시부(140)는, 상기 제어부(130)의 제어에 의해 상기 3차원 영상(또는, 2차원 영상)을 표시한다.In addition, the
또한, 상기 단말 장치(100)의 구현 형태에 따라 상기 표시부(140)가 2개 이상 존재할 수 있다. 예를 들면, 상기 단말 장치(100)에 복수의 표시부들이 하나의 면(동일면)에 이격되거나 일체로 배치될 수 있고, 또한 서로 다른 면에 각각 배치될 수도 있다.In addition, two or
한편, 상기 표시부(140)와 터치 동작을 감지하는 센서(이하, '터치 센서'라 함)가 상호 레이어 구조를 이루는 경우(이하, '터치 스크린'이라 함)에, 상기 표시부(140)는 출력 장치 이외에 입력 장치로도 사용될 수 있다. 상기 터치 센서는, 예를 들어, 터치 필름, 터치 시트, 터치 패드, 터치 패널 등의 형태를 가질 수 있다.On the other hand, when the
또한, 상기 터치 센서는, 상기 표시부(140)의 특정 부위에 가해진 압력 또는 상기 표시부(140)의 특정 부위에 발생하는 정전 용량 등의 변화를 전기적인 입력 신호로 변환하도록 구성될 수 있다. 또한, 상기 터치 센서는, 터치되는 위치 및 면적뿐만 아니라, 터치 시의 압력까지도 검출할 수 있도록 구성될 수 있다. 상기 터치 센서에 대한 터치 입력이 있는 경우, 그에 대응하는 신호(들)는 터치 제어기(미도시)로 보내진다. 터치 제어기는 그 신호(들)를 처리한 다음 대응하는 데이터를 상기 제어부(130)로 전송한다. 이로써, 상기 제어부(130)는, 상기 표시부(140)의 어느 영역이 터치되었는지 여부 등을 알 수 있게 된다.In addition, the touch sensor may be configured to convert a change in pressure applied to a specific portion of the
또한, 상기 표시부(140)는, 근접 센서를 포함할 수 있다. 또한, 상기 근접 센서는, 터치 스크린에 의해 감싸지는 단말 장치(100)의 내부 영역 또는 상기 터치 스크린의 근처에 배치될 수 있다.In addition, the
이와 같이, 상기 표시부(140)가 입력 장치로 사용되는 경우, 사용자에 의한 버튼 조작을 입력받거나, 디스플레이되는 화면을 터치/스크롤하는 등의 조작에 의해 명령 또는 제어 신호를 입력받을 수 있다.As such, when the
상기 저장부(150)는, 본 명세서에서 제안된 방법들을 저장한다. 또한, 상기 저장부(150)는, 상기 단말 장치(100)가 동작하는데 필요한 데이터와 프로그램 등을 저장한다.The
여기서, 도 1의 단말 장치는, 스탠드 얼론(stand alone)으로 구성될 수 있을 뿐만 아니라, 이동 단말기(Mobile Terminal), 텔레매틱스 단말기(Telematics Terminal), 스마트 폰(Smart Phone), 휴대 단말기(Portable Terminal), 개인 정보 단말기(Personal Digital Assistant: PDA), 휴대용 멀티미디어 플레이어(Portable Multimedia Player : PMP), 노트북 컴퓨터, 태블릿 PC(Tablet PC), 와이브로(Wibro) 단말기, IPTV(Internet Protocol Television) 단말기, 텔레비전(Television), 3D 텔레비전, 영상 기기, 텔레매틱스(Telematics) 단말기, 내비게이션(Navigation) 단말기, AVN(Audio Video Navigation) 단말기 등과 같이 다양한 단말기에 적용될 수 있다.Here, the terminal device of FIG. 1 may not only be configured as stand alone, but also a mobile terminal, a telematics terminal, a smart phone, and a portable terminal. , Personal Digital Assistant (PDA), Portable Multimedia Player (PMP), Notebook Computer, Tablet PC (Tablet PC), Wibro Terminal, Internet Protocol Television (IPTV) Terminal, Television ), 3D televisions, video devices, telematics terminals, navigation terminals, AVN terminals, and the like.
도 2는 본 발명의 일 실시예에 따른 단말 장치의 장착도이다.2 is a mounting diagram of a terminal device according to an embodiment of the present invention.
상기 단말 장치(100)는 차량 내부에 장착될 수 있다.The
카메라 모듈(110)은 차량(200)의 전방을 주시할 수 있는 위치에 장착될 수 있다. 도 2에서는 상기 카메라 모듈(110)이 차량 운전자의 눈 높이와 유사한 위치에 장착된 것으로 도시하였으나, 차량 또는 운전자에 의한 요인에 의해 상기 장착 위치는 변경될 수 있다. 또한, 카메라 모듈(110)은 상기 단말 장치(100)의 모든 구성요소와 한 위치에 장착될 수도 있고, 기타 구성 요소가 분리되어 장착될 수도 있다. 본 명세서에 개시되는 카메라 모듈(110)은 측방 또는 후방을 촬영하는 데에도 이용될 수 있으며, 이 때 상기 카메라 모듈(110)의 위치는 변경될 수도 있다.The
도 3는 본 발명의 일 실시예에 따른 주행 안내 정보 출력 및 운행 제어 방법을 나타낸 흐름도이다.3 is a flowchart illustrating a driving guide information output and a driving control method according to an exemplary embodiment of the present invention.
단말 장치는 카메라 모듈을 통해 외부로부터 영상을 수신한다(S310). 상기 단말 장치는 상기 수신한 영상으로부터 제 1 정보를 검출한다(S320). 여기서 상기 제 1 정보는 주변 차량의 위치, 주변 차량과의 거리, 신호등의 위치. 신호등과의 거리 등 차량 주변의 다른 차량 또는 신호등의 존재을 나타내는 정보일 수 있다. The terminal device receives an image from the outside through the camera module (S310). The terminal device detects first information from the received image (S320). The first information may include a location of a surrounding vehicle, a distance from a surrounding vehicle, and a location of a traffic light. It may be information indicating the presence of other vehicles or traffic lights around the vehicle, such as a distance from the traffic lights.
이때 단말 장치는 상기 수신한 영상에 가시광 통신이 수행되는 영역이 있는 경우, 가시광 통신 모듈을 활성화하도록 제어한다(S340).In this case, when there is an area where visible light communication is performed in the received image, the terminal device controls to activate the visible light communication module (S340).
상기 활성화된 가시광 통신 모듈을 통해 단말 장치는 제 2 정보를 수신한다(S350). 여기서 상기 제 2 정보는 주변 차량의 운행 정보, 예컨대 급제동, 차선변경 등과 관련된 정보 또는 신호등의 신호상태, 신호 변경까지 남은 시간 등 차량 주변의 다른 차량 또는 신호등의 상태 변경을 나타내는 정보일 수 있다.The terminal device receives second information through the activated visible light communication module in operation S350. Here, the second information may be driving information of surrounding vehicles, for example, information related to sudden braking, lane change, or the like, or information indicating a state change of another vehicle or traffic light around the vehicle, such as a signal state of a traffic light or a time remaining until a signal change.
단말 장치는 상기 수신한 제 1 정보와 제 2 정보를 기초로 차량의 주변 상황을 판단할 수 있다(S360). 예를 들어, 주의 운전이 필요한 상황인지 또는 감속 운전해야 할 상황인지 등을 판단할 수 있다.The terminal device may determine the surrounding situation of the vehicle based on the received first information and the second information (S360). For example, it may be determined whether the situation requires attention or deceleration.
상기 판단 결과, 운전자에게 주의를 알려야 할 상황인 경우, 단말 장치는 주행 안내 정보를 출력할 수 있다(S370). 상기 출력은 시각적, 청각적 알림을 포함할 수 있으며, 디스플레이 화면 및/또는 스피커를 통해 이루어질 수 있다.As a result of the determination, when it is the situation to notify the driver of the caution, the terminal device can output the driving guide information (S370). The output may include visual and audio notifications and may be through a display screen and / or a speaker.
이때, 상기 단말 장치는 차량의 운행을 직접 제어할 수도 있다. 즉, 차량의 방향 전환 장치, 속도 변환 장치 등을 제어하여 현재 상황에 적절한 운행을 할 수 있도록 제어할 수 있다. 예컨대, 운행 속도를 감속하도록 차량의 브레이크 장치를 직접 제어할 수 있다. 또는 전방의 위험 물체를 피하도록 차량의 방향 전환 장치를 직접 제어할 수도 있다.In this case, the terminal device may directly control the driving of the vehicle. That is, the vehicle may be controlled so as to drive appropriately for the current situation by controlling the vehicle's direction switching device and speed conversion device. For example, it is possible to directly control the brake device of the vehicle to slow down the running speed. Alternatively, the vehicle's turning device may be directly controlled to avoid dangerous objects in front of the vehicle.
여기서, 상기 단말 장치의 차량 직접 제어는 상기 단말 장치가 탑재되는 차량의 차량 자동 제어 모드가 ‘온(on)’일 경우, 수행될 수 있다.The direct vehicle control of the terminal device may be performed when the vehicle automatic control mode of the vehicle on which the terminal device is mounted is 'on'.
도 4 (a) 내지 (c)는 본 명세서에 따른 주행 안내 정보 출력 및 운행 제어 방법의 제 1 실시예이다.4 (a) to (c) is a first embodiment of the driving guidance information output and driving control method according to the present specification.
도 4 (a) 는 상기 단말 장치가 카메라 모듈을 통해 촬영된 영상 및 전방 차량과의 가시광 통신을 통하여 주행 관련 정보를 수신하는 것을 나타낸 도면이다.4A is a diagram illustrating that the terminal device receives driving related information through an image captured by a camera module and visible light communication with a front vehicle.
본 명세서에 따른 단말 장치(100, 이하 단말 장치)는 상기 단말 장치의 카메라 모듈을 통해 외부 영상을 수신한다. 상기 단말장치(100)는 상기 영상에서 차량영역을 검출할 수 있다. 차량영역 검출을 위한 영상처리과정의 예로서 전처리기법과 분류기법을 들 수 있다. 상기 전처리기법은 에지분석, 역투영변환등이 있으며, 차량후보영역을 설정하는 영상처리 과정이다. 상기 분류기법은 SVM, Ada-boost등을 통해 차량후보영역 중에서 차량판별을 수행하는 영상처리 과정이다. 이때 차량검출영역에서 통신 가능 영역인 LED후미등 영역만을 추출할 수 있으며, 대칭성판별법, 문턱치 설정 혹은 특정색화소 추출법등을 이용될 수 있다. The terminal device 100 (hereinafter, referred to as a terminal device) according to the present specification receives an external image through a camera module of the terminal device. The
상기 단말장치(100)는 카메라 모듈을 통해 촬영된 영상을 카메라모델을 통해 전역좌표계(World Coordinates System)로 변환하여 영상 내 모든 차량의 기준좌표를 얻을 수 있다. 또한, 상기 단말장치가 설치된 차량이 진행하고 있는 차선의 중심을 기준으로 대상차량의 기준좌표를 이용하여 촬영차량과의 방향각을 얻을 수 있다. The
상기 단말 장치(100)는 상기 영상 처리 과정을 통하여 제 1 정보를 획득할 수 있다. 상기 제 1 정보는 주변 차량들(400a, 400b)의 거리 또는 위치 정보를 포함할 수 있다.The
또한, 상기 단말 장치(100)는 가시광 통신 모듈을 통해 제 2 정보를 수신할 수 있다. 상기 제 2 정보는 주변 차량(400a, 400b)의 운행 상태, 특히 급제동 정보를 포함할 수 있다. 이때 상기 단말 장치(100)는 상기 카메라 모듈을 통해 수신한 영상에서 가시광 통신 영역이 검출되는 경우에만 상기 가시광 통신 모듈을 활성화시킬 수도 있다.In addition, the
단말 장치(100)는 상기 수신한 제 1 정보와 제 2 정보를 기초로 차량의 주변 상황을 판단한다. 상기 단말 장치(100)는 상기 상황 판단을 근거로 주행 안내 정보 출력 및/또는 차량 운행 제어를 수행할 수 있다. 즉, 차량의 방향 전환 장치, 속도 변환 장치 등을 제어하여 현재 상황에 적절한 운행을 할 수 있도록 제어할 수 있다.The
도 4 (b) 는 단말 장치가 주행 상황을 판단하고 주행 안내 정보를 출력하는 일 예이다.4B illustrates an example in which the terminal device determines driving conditions and outputs driving guide information.
단말 장치(100)는 영상(410)에서 차량 특징 데이터, 가시광 통신이 가능한 영역 등을 검출한다. 도 4 (b) 에서는 전방 정면 차량 및 가시광 통신 가능 영역으로 후미등 부분(415)을 검출한 것을 나타내었다. 또한 상기 단말 장치(100)는 전방 차량이 급제동한 경우, 전방 차량과의 가시광 통신을 통해 급제동 정보를 수신한다.The
단말 장치(100)는 위 정보들을 통해 주변 상황을 감지한다. 즉. 전방 차량의 급제동 상황과 전방 차량과의 거리 등을 종합하여 위험 여부를 판단할 수 있다. 상기 판단 결과, 위험 가능성이 높다면, 단말 장치는 주의 운전 또는 감속을 지시하는 정보(418)를 출력한다. 상기 출력은 시각적, 청각적 알림을 포함할 수 있으며, 디스플레이 화면 및/또는 스피커를 통해 이루어질 수 있다.The
도 4 (c) 는 단말 장치가 주행 상황을 판단하는 다른 예이다.4C is another example in which the terminal device determines a driving situation.
단말 장치(100)는 영상(420)에서 차량 특징 데이터, 가시광 통신 가능 영역 등을 획득한다. 도 4 (c) 에서는 전방 측면 차량 및 가시광 통신 가능 영역으로 후미등 부분(425)을 검출한 것을 나타내었다. 또한 상기 단말 장치(100)는 전방 차량이 급제동한 경우, 전방 차량과의 가시광 통신을 통해 급제동 정보를 수신한다.The
이때 (b)와는 달리, 급제동 정보를 수신하더라도 전방 차량은 정면에 있지 않으므로, 위험한 상황이라 판단하지 않을 수 있다. 따라서 이러한 경우에는 별도의 지시를 출력하지 않을 수 있다.In this case, unlike (b), even if the braking information is received, since the front vehicle is not in the front, it may not be determined as a dangerous situation. Therefore, in this case, a separate instruction may not be output.
도 5 (a) 및 (b)는 본 명세서에 따른 주행 안내 정보 출력 및 운행 제어 방법의 제 2 실시예이다.5 (a) and (b) are a second embodiment of a driving guide information output and driving control method according to the present specification.
도 5 (a) 는 단말 장치(100)가 카메라 모듈을 통해 촬영된 영상 및 전방 차량과의 가시광 통신을 통하여 주행 관련 정보를 수신하는 것을 나타낸 도면이다.FIG. 5A is a diagram illustrating that the
도 4 (a)에서 설명한 바와 같이, 단말 장치(100)는 상기 카메라 모듈과 가시광 통신 모듈을 통해 정보를 수신할 수 있다. 단말 장치(100)는 상기 수신한 정보를 기초로 차량의 주변 상황을 판단한다. 상기 단말 장치(100)는 상기 상황 판단을 근거로 주행 안내 정보 출력 및/또는 차량 운행 제어를 수행할 수 있다.As described with reference to FIG. 4A, the
도 5 (b) 는 단말 장치(100)가 주행 상황을 판단하고 주행 안내 정보를 출력하는 일 예이다.5B illustrates an example in which the
단말 장치(100)는 영상(510)에서 차량 특징 데이터, 가시광 통신 가능 영역 등을 획득한다. 또한 단말 장치(100)는 영상(510)에서 주위 차량의 위치, 거리 정보를 획득한다. 도 5 (b) 에서는 우측 전방 차량(500b) 및 가시광 통신 가능 영역으로 방향 표시등 부분(515)을 검출한 것을 나타내었다. 또한 상기 단말 장치(100)는 전방 차량이 차선 변경을 위해 방향 표시등을 점멸하는 경우, 전방 차량(500b)과의 가시광 통신을 통해 차선 변경 정보를 수신한다.The
단말 장치(100)는 위 정보들을 통해 주변 상황을 감지한다. 즉. 전방 차량(100)의 차선 변경 상황과 전방 차량과의 거리 등을 종합하여 위험 여부를 판단할 수 있다. 상기 판단 결과, 위험 가능성이 높다면, 단말 장치는 주의 운전 또는 감속을 지시하는 정보(518)를 출력한다. 상기 출력은 시각적, 청각적 알림을 포함할 수 있으며, 디스플레이 화면 및/또는 스피커를 통해 이루어질 수 있다.The
도 6 (a) 및 (b)는 본 명세서에 따른 주행 안내 정보 출력 및 운행 제어 방법의 제 3 실시예이다.6 (a) and (b) illustrate a third embodiment of a method for outputting driving guidance information and driving control according to the present specification.
도 6 (a)는 상기 단말 장치가 카메라 모듈을 통해 촬영된 영상 및 전방 차량과의 가시광 통신을 통하여 주행 관련 정보를 수신하는 것을 나타낸 도면이다.FIG. 6A is a diagram illustrating that the terminal device receives driving related information through an image captured by a camera module and visible light communication with a front vehicle.
도 4 (a)에서 설명한 바와 같이, 단말 장치(100)는 상기 카메라 모듈과 가시광 통신 모듈을 통해 정보를 수신할 수 있다. 단말 장치(100)는 상기 수신한 정보를 기초로 차량의 주변 상황을 판단한다. 상기 단말 장치(100)는 상기 상황 판단을 근거로 주행 안내 정보 출력 및/또는 차량 운행 제어를 수행할 수 있다.As described with reference to FIG. 4A, the
도 6 (b)는 단말 장치가 주행 상황을 판단하고 주행 안내 정보를 출력하는 일 예이다.6B illustrates an example in which the terminal device determines driving conditions and outputs driving guide information.
단말 장치(100)는 영상(610)에서 신호등 및/또는 가시광 통신 가능 영역 등을 검출한다. 또한 단말 장치(100)는 영상(610)에서 신호등(615)의 위치 및/또는 신호등과의 거리 정보를 획득한다. 도 6 (b) 에서는 신호등 및 가시광 통신 가능 영역으로 신호등 부분(615)을 검출한 것을 나타내었다. 또한 상기 단말 장치(100)는 신호등(615)과의 가시광 통신을 통해 신호 관련 정보, 즉 현재 신호 상태, 신호 변경까지 남은 시간 등에 관한 정보를 수신한다.The
단말 장치(100)는 위 정보들을 통해 주변 상황을 감지한다. 즉. 신호등의 신호 변경 상황과 신호등과의 거리 등을 종합하여 위험 여부를 판단할 수 있다. 상기 판단 결과, 위험 가능성이 높다면, 주의 운전 또는 감속을 지시하는 정보(618)를 출력한다. 상기 출력은 시각적, 청각적 알림을 포함할 수 있으며, 디스플레이 화면 및/또는 스피커를 통해 이루어질 수 있다.The
도 7 (a) 및 (b)는 본 명세서에 따른 차량의 위치 측정 방법의 실시예이다.7 (a) and 7 (b) are embodiments of a method for measuring a position of a vehicle according to the present specification.
도 7 (a)는 상기 단말 장치가 카메라 모듈을 통해 촬영된 영상 및 가시광 통신이 가능한 대상으로부터 수신한 정보에 기초하여 위치 정보를 획득하는 것을 나타낸 도면이다.FIG. 7A is a diagram illustrating that the terminal device acquires location information based on an image photographed through a camera module and information received from a target capable of visible light communication.
단말 장치(100)는 카메라 모듈을 통해 외부 영상을 수신한다. 단말 장치(100)는 상기 영상에서 가시광 통신 수행이 가능한 영역이 존재하는지 확인한다. 이후 단말 장치(100)는 통신 수행 가능 영역이 존재하는 경우, 가시광 통신 모듈을 활성화하고, 상기 활성화된 가시광 통신 모듈을 통해 상기 가시광 통신 수행 가능 영역(720)의 지리적 좌표를 수신한다.The
이후 단말 장치(100)는 상기 영상 및 지리적 좌표에 기초하여 상기 차량의 위치를 판단한다. 예를 들어, 가시광통신을 통해서 대상물체(가로등 등)의 절대위치 정보를 받고 영상 내 상기 대상 물체의 상대위치와 조합하여, 현재 차량의 위치를 역으로 계산할 수 있다.Thereafter, the
단말 장치(100)는 상기 판단한 차량의 위치 정보를 출력한다. 상기 출력은 시각적, 청각적 알림을 포함할 수 있으며, 디스플레이 화면 및/또는 스피커를 통해 이루어질 수 있다.The
도 7 (b)는 단말 장치가 차량의 위치를 판단하고 위치 정보를 출력하는 일 예이다.7B illustrates an example in which the terminal device determines a location of a vehicle and outputs location information.
단말 장치(100)는 영상(710)에서 가시광 통신 가능 영역 등을 검출한다. 도 7 (B)에서는 가시광 통신 가능 영역으로 가로등(720)을 검출한 것을 나타내었다. 또한 상기 단말 장치(100)는 가로등(720)과의 가시광 통신을 통해 상기 가로등의 위치 정보를 수신한다.The
이후 상기 단말 장치(100)는 상기 수신한 위치 정보와 (영상 내의) 가로등의 상대 위치와 조합하여 현재 차량의 위치를 계산할 수 있다. 이때 상기 단말 장치(100)는 상기 영상에 나타난 건물, 도로, 풍경 등을 분석하여 개략적인 위치 정보를 추가적으로 파악하여 상기 수신한 위치 정보와 조합할 수도 있다.Thereafter, the
상기 단말 장치(100)는 상기 계산 결과로 파악된 위치 정보를 여러 가지 방식으로 출력할 수 있다.The
본 발명은 LED(Light Emitting Diode) 가시광 무선통신(Visible Light Communication) 및/또한 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다.The present invention can be embodied as computer readable codes on a light emitting diode (LED) visible light communication and / or a computer readable recording medium. A computer-readable recording medium includes all kinds of recording apparatuses in which data that can be read by a computer system is stored.
이상에서 설명된 실시예들은 본 발명의 구성요소들과 특징들이 소정 형태로 결합된 것들이다. 각 구성요소 또는 특징은 별도의 명시적 언급이 없는 한 선택적인 것으로 고려되어야 한다. 각 구성요소 또는 특징은 다른 구성요소나 특징과 결합되지 않은 형태로 실시될 수 있다. 또한, 일부 구성요소들 및/또는 특징들을 결합하여 본 발명의 실시예를 구성하는 것도 가능하다. 본 발명의 실시예들에서 설명되는 동작들의 순서는 변경될 수 있다. 어느 실시예의 일부 구성이나 특징은 다른 실시예에 포함될 수 있고, 또는 다른 실시예의 대응하는 구성 또는 특징과 교체될 수 있다. 특허청구범위에서 명시적인 인용 관계가 있지 않은 청구항들을 결합하여 실시예를 구성하거나 출원 후의 보정에 의해 새로운 청구항으로 포함시킬 수 있음은 자명하다.The embodiments described above are the components and features of the present invention are combined in a predetermined form. Each component or feature shall be considered optional unless otherwise expressly stated. Each component or feature may be implemented in a form that is not combined with other components or features. It is also possible to construct embodiments of the present invention by combining some of the elements and / or features. The order of the operations described in the embodiments of the present invention may be changed. Some configurations or features of certain embodiments may be included in other embodiments, or may be replaced with corresponding configurations or features of other embodiments. It is clear that the claims that are not expressly cited in the claims may be combined to form an embodiment or be included in a new claim by an amendment after the application.
100 : 단말 장치100: terminal device
Claims (7)
카메라 모듈을 통해 외부 영상을 수신하는 단계;
상기 수신한 영상으로부터 제 1 정보를 획득하는 단계;
상기 수신한 영상에 가시광 통신이 수행되는 영역이 있는 경우, 가시광 통신 모듈을 활성화하는 단계;
상기 가시광 통신 모듈을 통해 제 2 정보를 수신하는 단계; 및
상기 제 1 정보와 상기 제 2 정보에 기초하여 결정한 주행 안내 정보를 출력하는 단계를 포함하되,
상기 제 1 정보는 상기 차량 주변의 다른 차량 또는 신호등의 존재 여부를 나타내는 정보이고,
상기 제 2 정보는 차량 주변의 다른 차량 또는 신호등의 상태 변경을 나타내는 정보인 것을 특징으로 하는 방법.In the method for controlling to output the driving guide information of the vehicle to the terminal,
Receiving an external image through a camera module;
Acquiring first information from the received image;
Activating a visible light communication module when there is an area where visible light communication is performed in the received image;
Receiving second information via the visible light communication module; And
Outputting driving guide information determined based on the first information and the second information,
The first information is information indicating the presence of other vehicles or traffic lights around the vehicle,
And the second information is information indicating a change of state of another vehicle or a traffic light around the vehicle.
상기 제 1 정보는 선행 차량의 방향 및 거리를 나타내는 정보이고,
상기 제 2 정보는 선행 차량의 급제동 정보이고,
상기 주행 안내 정보는 감속을 지시하는 정보인 것을 특징으로 하는 방법.The method of claim 1,
The first information is information indicating the direction and distance of the preceding vehicle,
The second information is rapid braking information of the preceding vehicle,
And the driving guide information is information for instructing deceleration.
상기 제 1 정보는 선행 차량의 방향 및 거리를 나타내는 정보이고,
상기 제 2 정보는 선행 차량의 차선 변경 정보이고,
상기 주행 안내 정보는 감속을 지시하는 정보인 것을 특징으로 하는 방법.The method of claim 1,
The first information is information indicating the direction and distance of the preceding vehicle,
The second information is lane change information of the preceding vehicle,
And the driving guide information is information for instructing deceleration.
상기 제 1 정보는 신호등과의 거리를 나타내는 정보이고,
상기 제 2 정보는 상기 신호등으로부터 수신한 신호 변경 관련 정보이고,
상기 주행 안내 정보는 속도의 가속 또는 감속을 지시하는 정보인 것을 특징으로 하는 방법.The method of claim 1,
The first information is information indicating the distance to the traffic light,
The second information is signal change related information received from the traffic light,
And the driving guide information is information for instructing acceleration or deceleration of speed.
상기 제 1 정보와 상기 제 2 정보에 기초하여 상기 차량의 주행을 제어하는 단계를 더 포함하는 것을 특징으로 하는 방법.The method of claim 1,
And controlling the running of the vehicle based on the first information and the second information.
카메라 모듈을 통해 외부 영상을 수신하는 단계;
상기 수신된 영상에 가시광 통신 수행 가능 영역이 존재하는지를 확인하는 단계;
상기 확인 결과, 가시광 통신 수행 가능 영역이 존재하는 경우,가시광 통신 모듈을 활성화하는 단계;
상기 활성화된 가시광 통신 모듈을 통해 상기 가시광 통신 수행 가능 영역의 지리적 좌표를 수신하는 단계; 및
상기 수신된 영상 및 지리적 좌표에 기초하여 상기 차량의 위치 정보를 출력하는 단계를 포함하여 이루어지는 것을 특징으로 하는 방법.In the method for controlling to output the location information of the vehicle to the terminal,
Receiving an external image through a camera module;
Confirming whether a visible light communication region exists in the received image;
Activating a visible light communication module when a visible light communication capable region exists as a result of the checking;
Receiving geographic coordinates of the visible light communication enabled area through the activated visible light communication module; And
And outputting location information of the vehicle based on the received image and geographical coordinates.
출력부;
영상을 촬영하기 위한 카메라 모듈;
외부와 가시광 통신을 하기 위한 가시광 통신 모듈; 및
상기 출력부, 카메라 모듈 및 상기 통신부와 기능적으로 연결되는 제어부를 포함하되,
상기 제어부는,
상기 카메라 모듈로부터 촬영되는 영상에서 제 1 정보를 검출하고, 상기 영상에서 가시광 통신이 수행되는 영역이 있는 경우, 가시광 통신 모듈을 활성화하도록 제어하고,
제 2 정보를 수신하도록 상기 가시광 통신 모듈을 제어하고,
상기 제 1 정보와 상기 제 2 정보에 기초하여 결정한 주행 안내 정보를 상기 출력부를 통해 출력하도록 제어하며,
상기 제 1 정보는 상기 차량 주변의 다른 차량 또는 신호등의 존재 여부를 나타내는 정보이고,
상기 제 2 정보는 차량 주변의 다른 차량 또는 신호등의 상태 변경을 나타내는 정보인 것을 특징으로 하는 단말.In the terminal device,
An output unit;
A camera module for capturing an image;
Visible light communication module for communicating visible light with the outside; And
It includes a control unit that is functionally connected to the output unit, the camera module and the communication unit,
The control unit,
Detecting first information from an image captured by the camera module, and if there is an area where visible light communication is performed in the image, controlling to activate the visible light communication module,
Control the visible light communication module to receive second information,
Controlling to output the driving guide information determined based on the first information and the second information through the output unit,
The first information is information indicating the presence of other vehicles or traffic lights around the vehicle,
And the second information is information indicating a change of state of another vehicle or a traffic light around the vehicle.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020110146434A KR20130077623A (en) | 2011-12-29 | 2011-12-29 | Apparatus for driving guidance and method using the same |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020110146434A KR20130077623A (en) | 2011-12-29 | 2011-12-29 | Apparatus for driving guidance and method using the same |
Publications (1)
Publication Number | Publication Date |
---|---|
KR20130077623A true KR20130077623A (en) | 2013-07-09 |
Family
ID=48990828
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020110146434A KR20130077623A (en) | 2011-12-29 | 2011-12-29 | Apparatus for driving guidance and method using the same |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR20130077623A (en) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20160056128A (en) * | 2014-11-11 | 2016-05-19 | 현대모비스 주식회사 | Driver Alarm System and Method |
KR101671945B1 (en) * | 2016-06-20 | 2016-11-03 | 오영동 | Method of assist of movement for vehicle |
-
2011
- 2011-12-29 KR KR1020110146434A patent/KR20130077623A/en not_active Application Discontinuation
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20160056128A (en) * | 2014-11-11 | 2016-05-19 | 현대모비스 주식회사 | Driver Alarm System and Method |
KR101671945B1 (en) * | 2016-06-20 | 2016-11-03 | 오영동 | Method of assist of movement for vehicle |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10115312B2 (en) | Transparent display apparatus for displaying information of danger element, and method thereof | |
US10217361B2 (en) | Apparatus and method for sensing and notifying pedestrian | |
US11205348B2 (en) | Drive assist device | |
JP6461318B2 (en) | Apparatus, method, and computer program for controlling indicating that road user has been recognized | |
KR102025544B1 (en) | Wearable video device and video system having the same | |
JP7241778B2 (en) | CONTROL METHOD, CONTROL DEVICE, AND STORAGE MEDIUM OF AUTOMATIC GUIDED VEHICLE | |
CN110979318B (en) | Lane information acquisition method and device, automatic driving vehicle and storage medium | |
KR101375868B1 (en) | Wearable Display Deice Having Sensing Function | |
US20180245923A1 (en) | Electronic machine equipment | |
KR101932200B1 (en) | Apparatus for presenting auxiliary pedestrian sign using image recognition technique, method thereof and computer recordable medium storing program to perform the method | |
CN105654778A (en) | Electronic apparatus and control method thereof | |
TWI641859B (en) | Mobile electronic apparatus, control method of mobile electronic apparatus, and control program of mobile electronic apparatus | |
KR20130077623A (en) | Apparatus for driving guidance and method using the same | |
KR20170037695A (en) | System and method for preventing a vehicle accitdent using traffic lights | |
US11724701B2 (en) | Terminal device, personal mobility, method for controlling the personal mobility | |
KR101224090B1 (en) | Apparatus and method for detecting nearing car | |
WO2017204332A1 (en) | Portable electronic device, control system, control method, and control program | |
US11328154B2 (en) | Systems and methods of increasing pedestrian awareness during mobile device usage | |
JP5604011B2 (en) | Vehicle periphery monitoring device | |
KR20220046553A (en) | Autonomous Vehicle Interaction System | |
CN106781584B (en) | Traffic light transformation prompting method | |
CN112954265A (en) | Early warning method, device, electronic equipment and medium | |
KR20180101058A (en) | Electronic apparatus and controlling method thereof | |
KR20210005818A (en) | Electronic apparatus and control method thereof | |
KR20210004917A (en) | Electronic apparatus and control method thereof |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E601 | Decision to refuse application |