KR20130077623A - Apparatus for driving guidance and method using the same - Google Patents

Apparatus for driving guidance and method using the same Download PDF

Info

Publication number
KR20130077623A
KR20130077623A KR1020110146434A KR20110146434A KR20130077623A KR 20130077623 A KR20130077623 A KR 20130077623A KR 1020110146434 A KR1020110146434 A KR 1020110146434A KR 20110146434 A KR20110146434 A KR 20110146434A KR 20130077623 A KR20130077623 A KR 20130077623A
Authority
KR
South Korea
Prior art keywords
information
vehicle
visible light
light communication
image
Prior art date
Application number
KR1020110146434A
Other languages
Korean (ko)
Inventor
안강일
김주영
오준규
서현욱
정성윤
임해용
장자순
Original Assignee
영남대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 영남대학교 산학협력단 filed Critical 영남대학교 산학협력단
Priority to KR1020110146434A priority Critical patent/KR20130077623A/en
Publication of KR20130077623A publication Critical patent/KR20130077623A/en

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • B60W40/04Traffic conditions
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3605Destination input or retrieval
    • G01C21/362Destination input or retrieval received from an external device or application, e.g. PDA, mobile phone or calendar application
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04BTRANSMISSION
    • H04B10/00Transmission systems employing electromagnetic waves other than radio-waves, e.g. infrared, visible or ultraviolet light, or employing corpuscular radiation, e.g. quantum communication
    • H04B10/11Arrangements specific to free-space transmission, i.e. transmission through air or vacuum
    • H04B10/114Indoor or close-range type systems
    • H04B10/116Visible light communication
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40Photo, light or radio wave sensitive means, e.g. infrared sensors
    • B60W2420/403Image sensing, e.g. optical camera

Landscapes

  • Engineering & Computer Science (AREA)
  • Remote Sensing (AREA)
  • Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Automation & Control Theory (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Mathematical Physics (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Signal Processing (AREA)
  • Electromagnetism (AREA)
  • General Physics & Mathematics (AREA)
  • Traffic Control Systems (AREA)

Abstract

PURPOSE: A driving guiding apparatus and a controlling method thereof are provided to effectively control driving and providing information thereabout. CONSTITUTION: A driving guiding apparatus comprises a step of receiving an external image through a camera module (S310); a step of obtaining first information from the external image (S320); a step of activating a visible communication-operating region when there is the visible communication-operating region in the received image (S340); a step of receiving second information through the visible ray communication module (S350); and a step of outputting diving guiding information based on the first and second information (S360). The first information shows whether there are other vehicles or traffic signals around the vehicle. The second information shows the state change of the other vehicles or traffic signals. [Reference numerals] (AA) Start; (BB) No; (CC) Yes; (DD) End; (S310) Receive an external image through a camera; (S320) Acquire first information; (S330) Visible ray communication area exists?; (S340) Visible ray communication module activation; (S350) Receive second information; (S360) Determine driving situation; (S370) Output driving guiding information

Description

주행 안내 장치 및 제어 방법{APPARATUS FOR DRIVING GUIDANCE AND METHOD USING THE SAME}Driving guidance device and control method {APPARATUS FOR DRIVING GUIDANCE AND METHOD USING THE SAME}

본 발명은 차량의 주행 안내 및 운행 제어 방법과 그 장치에 관한 것으로, 보다 상세하게는 가시광 통신 및 영상 처리를 이용하여 수집한 정보에 기초하여 차량 주행에 관련된 안내 정보를 제공하고 차량의 운행을 자동으로 제어하는 방법 및 장치에 관한 것이다.The present invention relates to a driving guide and a driving control method of a vehicle and a device thereof, and more particularly, to provide guide information related to driving of a vehicle based on information collected using visible light communication and image processing, and to automatically operate the vehicle. It relates to a method and apparatus for controlling.

가시광 통신은 사람의 눈에 보이는 빛인 가시광(visible light)을 이용하여 통신하는 것으로, LED 등의 전등을 눈이 느낄 수 없을 정도의 매우 빠른 속도로 켜고 끄는 것을 반복하고, 광수신부가 이를 감지함으로써 통신하는 방식이다. 예를 들면, 켜진 상태를 1, 꺼진 상태를 0으로 하여 디지털 신호를 주고받음으로써 통신이 가능한 방식이다.Visible light communication uses visible light, which is the visible light of the human eye, and repeats turning on and off the lights such as LEDs at a very high speed so that the eye cannot feel it, and the light receiving unit detects the communication. That's the way it is. For example, it is possible to communicate by exchanging digital signals by setting the ON state to 1 and the OFF state to 0.

가시광 무선 통신 기술은, 반도체가 메모리 및 프로세서에 이어 조명으로도 활용되기 시작하면서 반도체에 의해 빛을 발광하는 LED(Light Emitting Diode)와 같은 조명의 빛을 통신 광원으로 사용할 수 있는 기술로 등장하게 되었다. 즉 이러한 LED 조명 통신 융합은 LED를 통해 조명을 함과 동시에 통신을 할 수 있는 융합 기술로서, 조명은 눈으로 볼 수 있는 가시광이므로 가시광 무선 통신 또는 가시광 통신이라고도 하는 것이다. 가시광 통신 기술은 디지털 조명과 통신을 융합한 통신 기술로, 통신 여부가 눈으로 확인될 수 있다는 편리함이 있다. 가시광 통신 기술에서는 상술한 바와 같이 반도체에 의해 빛을 발광하는 LED 조명을 사용하게 되는데, 이러한 LED 조명은 디지털로 제어할 수 있기 때문에, 기존의 아날로그 조명에 비하여 기술 발전 속도가 높고, 다양한 멀티미디어 조명 및 통신 서비스를 제공할 수 있다.Visible light communication technology has emerged as a technology that can be used as a communication light source, such as light emitting diodes (LEDs) that emit light by semiconductors, as semiconductors are also being used as lightings after memory and processors. . In other words, the LED lighting communication convergence is a fusion technology capable of communicating at the same time while lighting through the LED, the lighting is also visible light wireless communication or visible light communication because visible light visible. Visible light communication technology is a communication technology that combines digital lighting and communication, there is a convenience that communication can be visually confirmed. In the visible light communication technology, as described above, LED lights emitting light by semiconductors are used. Since the LED lights can be digitally controlled, the technology development speed is higher than that of conventional analog lights, and various multimedia lights and It can provide a communication service.

가시광 통신에서 사용되는 빛은 780nm에서 380nm의 파장(wavelength)을 갖는다. 이 파장을 주파수로 바꾸면, 385 THz에서 789 THz(주파수 대역 = 빛의 속도(300,000,000m)/파장(380×1000))에 해당하는데, 가청(오디오) 주파수 대역은 20 Hz에서 20,000 Hz에 해당되고, 적외선 파장을 사용하는 IrDA, 2.4 Hz의 IEEE 802.11n, UWB, 802.15.4 Zigbee, Bluetooth, 60 GHz의 IEEE802.15-3c 등이 있는 바, 가시광 통신은 종래의 통신 방법들 중 800-900nm를 사용하는 IrDA와 가장 유사한 파장을 사용하지만, 조명과 동시에 통신을 할 수 있다는 것이 특징이Light used in visible light communication has a wavelength of 780nm to 380nm. Converting this wavelength to frequency corresponds to 385 THz to 789 THz (frequency band = speed of light (300,000,000 m) / wavelength (380 × 1000)), with the audible (audio) frequency band corresponding to 20 Hz to 20,000 Hz. , IrDA using infrared wavelengths, IEEE 802.11n at 2.4 Hz, UWB, 802.15.4 Zigbee, Bluetooth, IEEE802.15-3c at 60 GHz, and visible light communication is 800-900 nm among conventional communication methods. It uses the most similar wavelength to IrDA, but it can communicate simultaneously with lighting.

며 장점이 된다.It is an advantage.

가시광 통신을 이용할 경우 조명으로 사용되는 빛을 사용하기 때문에, 종래의 각종 전자파를 이용하는 통신 방법과는 달리 인체에 무해하며, 주파수 허가를 받을 필요가 없고, ISM과의 간섭도 없으며, 물리적으로 보안기능을 제공하고, 초정밀 측위에 사용할 수 있는 등의 여러 가지 장점이 있다. 특히, 종래에 사용되는 대표적인 아날로그 조명인 형광등은 생산 시나 폐기 시에 환경 파괴 물질의 배출이 발생된다는 문제점이 있는 반면, LED 조명은 보다 친환경적이며, 90% 이상 전력을 절감할 수 있을 뿐만 아니라 보다 긴 수명을 가지는 장점으로 인하여 미국, 유럽, 일본 등에서는 기존 조명 기구를 LED 조명으로 변경하도록 권장하는 법률 제정을 추진 중에 있다.When using visible light communication, it uses light that is used as lighting, so it is harmless to human body, unlike the conventional communication method using various kinds of electromagnetic waves, it does not need to be licensed, does not interfere with ISM, and has a physical security function. There are a number of advantages, including the ability to provide high precision positioning and use for ultra-precision positioning. In particular, fluorescent lamps, which are typical analog lights used in the related art, have a problem that emissions of environmentally destructive materials are generated during production or disposal, whereas LED lighting is more environmentally friendly, and saves more than 90% of power, Because of its longevity, the US, Europe, and Japan are enacting legislation that recommends changing existing lighting fixtures to LED lighting.

차량에 있어서도, 차량의 조명등 예컨대, 전조등, 후미등 등을 통해 상기의 가시광 통신을 수행하는 기술들이 제안되었다.Also in a vehicle, techniques for performing the above-mentioned visible light communication through a lighting lamp of a vehicle, for example, a headlight and a taillight, have been proposed.

그러나, 도로에서 차량이 가시광 통신 장치를 이용하여 차량 대 차량의 통신만을 수행할 경우, 현재 운전중인 차량과 직접적인 연관이 있는 상대 차량, 예를 들어 바로 앞에서 운행 중인 차량으로부터 수신되는 정보만을 이용하기 위한 기술은 제안되지 않았다. 또한 현재 운전중인 차량과 주변 차량의 상대적 위치 정보를 이용한 주행 안내 및/또는 차량 제어 방법도 제안되지 않았다.However, when the vehicle performs only the vehicle-to-vehicle communication using the visible light communication device on the road, it is necessary to use only information received from the other vehicle directly related to the vehicle currently being driven, for example, the vehicle in front of the vehicle. No technique has been proposed. In addition, a driving guidance and / or vehicle control method using relative position information of a vehicle currently being driven and a surrounding vehicle has not been proposed.

따라서, 본 명세서는 주변 차량과의 가시광 통신뿐만 아니라 카메라 등을 통해 수집한 영상 정보를 더 이용하여, 차량 운행과 관련된 상황 판단의 정확성을 높인 주행 안내 및/또는 차량 제어 방법과 장치를 제안하는데 그 목적이 있다.Accordingly, the present specification proposes a driving guide and / or a vehicle control method and apparatus for improving accuracy of situation determination related to vehicle driving by further using image information collected through a camera or the like as well as visible light communication with surrounding vehicles. There is a purpose.

상기와 같은 목적을 달성하기 위하여 본 명세서에서의 일 개시에 따르면, 차량의 주행 안내 정보를 단말에 출력하도록 제어하기 위한 방법이 제공된다. 상기 방법은 카메라 모듈을 통해 외부 영상을 수신하는 단계와; 상기 수신한 영상으로부터 제 1 정보를 획득하는 단계와; 상기 수신한 영상에 가시광 통신이 수행되는 영역이 있는 경우, 가시광 통신 모듈을 활성화하는 단계와; 상기 가시광 통신 모듈을 통해 제 2 정보를 수신하는 단계와; 상기 제 1 정보와 상기 제 2 정보에 기초하여 결정한 주행 안내 정보를 출력하는 단계를 포함한다. 상기 제 1 정보는 상기 차량 주변의 다른 차량 또는 신호등의 존재 여부를 나타내는 정보이고, 상기 제 2 정보는 차량 주변의 다른 차량 또는 신호등의 상태 변경을 나타내는 정보이다.According to one disclosure in the present specification to achieve the above object, there is provided a method for controlling to output the driving guide information of the vehicle to the terminal. The method includes receiving an external image via a camera module; Acquiring first information from the received image; Activating a visible light communication module when there is an area where visible light communication is performed in the received image; Receiving second information via the visible light communication module; Outputting driving guide information determined based on the first information and the second information. The first information is information indicating the presence or absence of another vehicle or traffic light around the vehicle, and the second information is information indicating a state change of another vehicle or traffic light around the vehicle.

상기 방법에서 상기 제 1 정보는 선행 차량의 방향 및 거리를 나타내는 정보이고, 상기 제 2 정보는 선행 차량의 급제동 정보이고, 상기 주행 안내 정보는 감속을 지시하는 정보일 수 있다.In the method, the first information may be information indicating a direction and a distance of the preceding vehicle, the second information may be rapid braking information of the preceding vehicle, and the driving guide information may be information indicating deceleration.

상기 방법에서 상기 제 1 정보는 선행 차량의 방향 및 거리를 나타내는 정보이고, 상기 제 2 정보는 선행 차량의 차선 변경 정보이고, 상기 주행 안내 정보는 감속을 지시하는 정보일 수 있다.In the method, the first information may be information indicating a direction and a distance of the preceding vehicle, the second information may be lane change information of the preceding vehicle, and the driving guide information may be information indicating deceleration.

상기 방법에서 상기 제 1 정보는 신호등과의 거리를 나타내는 정보이고, 상기 제 2 정보는 상기 신호등으로부터 수신한 신호 변경 관련 정보이고, 상기 주행 안내 정보는 속도의 가속 또는 감속을 지시하는 정보일 수 있다.In the method, the first information may be information indicating a distance from the traffic light, the second information may be signal change related information received from the traffic light, and the driving guide information may be information indicating acceleration or deceleration of speed. .

상기 방법은 상기 제 1 정보와 상기 제 2 정보에 기초하여 상기 차량의 주행을 제어하는 단계를 더 포함할 수 있다.The method may further include controlling driving of the vehicle based on the first information and the second information.

본 명세서에서의 다른 개시에 따르면, 차량의 위치 정보를 단말에 출력하도록 제어하기 위한 방법이 제공된다. 상기 방법은 카메라 모듈을 통해 외부 영상을 수신하는 단계와; 상기 수신된 영상에 가시광 통신 수행 가능 영역이 존재하는지를 확인하는 단계와; 상기 확인 결과, 가시광 통신 수행 가능 영역이 존재하는 경우,가시광 통신 모듈을 활성화하는 단계와; 상기 활성화된 가시광 통신 모듈을 통해 상기 가시광 통신 수행 가능 영역의 지리적 좌표를 수신하는 단계와; 상기 수신된 영상 및 지리적 좌표에 기초하여 상기 차량의 위치 정보를 출력하는 단계를 포함할 수 있다.According to another disclosure herein, a method for controlling to output the position information of the vehicle to the terminal is provided. The method includes receiving an external image via a camera module; Confirming whether a visible light communication region exists in the received image; Activating a visible light communication module when the visible light communication capable region exists as a result of the checking; Receiving geographic coordinates of the visible light communication enabled area through the activated visible light communication module; And outputting location information of the vehicle based on the received image and geographical coordinates.

본 명세서에서의 또 다른 개시에 따르면 단말이 제공된다. 상기 단말은 출력부와; 영상을 촬영하기 위한 카메라 모듈과; 외부와 가시광 통신을 하기 위한 가시광 통신 모듈과; 상기 출력부, 카메라 모듈 및 상기 통신부와 기능적으로 연결되는 제어부를 포함한다. 상기 제어부는, 상기 카메라 모듈로부터 촬영되는 영상에서 제 1 정보를 검출하고, 상기 영상에서 가시광 통신이 수행되는 영역이 있는 경우, 가시광 통신 모듈을 활성화하도록 제어하고, 제 2 정보를 수신하도록 상기 가시광 통신 모듈을 제어하고, 상기 제 1 정보와 상기 제 2 정보에 기초하여 결정한 주행 안내 정보를 상기 출력부를 통해 출력하도록 제어할 수 있다. 상기 제 1 정보는 상기 차량 주변의 다른 차량 또는 신호등의 존재 여부를 나타내는 정보이고, 상기 제 2 정보는 차량 주변의 다른 차량 또는 신호등의 상태 변경을 나타내는 정보이다.According to yet another disclosure herein, a terminal is provided. The terminal and the output unit; A camera module for capturing an image; A visible light communication module for communicating visible light with the outside; And a controller that is functionally connected to the output unit, the camera module, and the communication unit. The controller detects first information from an image captured by the camera module, controls to activate a visible light communication module when there is an area where visible light communication is performed in the image, and receives the second information. The module may be controlled, and the driving guide information determined based on the first information and the second information may be output through the output unit. The first information is information indicating the presence or absence of another vehicle or traffic light around the vehicle, and the second information is information indicating a state change of another vehicle or traffic light around the vehicle.

본 명세서에 따른 주행 안내 및/또는 차량 제어 방법과 장치는, 운행 중인 차량의 주변 상황에 대한 정보를 더 정확히 판단하여 그에 알맞은 운행 안내 정보를 제공하고 차량 운행을 효과적으로 제어할 수 있는 효과가 있다.The driving guide and / or vehicle control method and apparatus according to the present disclosure have an effect of more accurately determining information about a surrounding situation of a driving vehicle, providing driving guide information corresponding thereto, and effectively controlling vehicle driving.

도 1은 본 발명의 실시예에 따른 단말 장치의 블록도이다.
도 2는 본 발명의 일 실시예에 따른 단말 장치의 장착도이다.
도 3은 본 발명의 일 실시예에 따른 주행 안내 정보 출력 및 운행 제어 방법을 나타낸 흐름도이다.
도 4 (a) 내지 (c)는 본 명세서에 따른 주행 안내 정보 출력 및 운행 제어 방법의 제 1 실시예이다.
도 5 (a) 및 (b)는 본 명세서에 따른 주행 안내 정보 출력 및 운행 제어 방법의 제 2 실시예이다.
도 6 (a) 및 (b)는 본 명세서에 따른 주행 안내 정보 출력 및 운행 제어 방법의 제 3 실시예이다.
도 7(a) 및 (b)는 본 명세서에 따른 차량의 위치 측정 방법의 실시예이다.
1 is a block diagram of a terminal device according to an embodiment of the present invention.
2 is a mounting diagram of a terminal device according to an embodiment of the present invention.
3 is a flowchart illustrating a driving guide information output and a driving control method according to an exemplary embodiment of the present invention.
4 (a) to (c) is a first embodiment of the driving guidance information output and driving control method according to the present specification.
5 (a) and (b) are a second embodiment of a driving guide information output and driving control method according to the present specification.
6 (a) and (b) illustrate a third embodiment of a method for outputting driving guidance information and driving control according to the present specification.
7 (a) and 7 (b) are embodiments of a method for measuring a position of a vehicle according to the present specification.

본 명세서에서 사용되는 기술적 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아님을 유의해야 한다. 또한, 본 명세서에서 사용되는 기술적 용어는 본 명세서에서 특별히 다른 의미로 정의되지 않는 한, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 의미로 해석되어야 하며, 과도하게 포괄적인 의미로 해석되거나, 과도하게 축소된 의미로 해석되지 않아야 한다. 또한, 본 명세서에서 사용되는 기술적인 용어가 본 발명의 사상을 정확하게 표현하지 못하는 잘못된 기술적 용어일 때에는, 당업자가 올바르게 이해할 수 있는 기술적 용어로 대체되어 이해되어야 할 것이다. 또한, 본 발명에서 사용되는 일반적인 용어는 사전에 정의되어 있는 바에 따라, 또는 전후 문맥상에 따라 해석되어야 하며, 과도하게 축소된 의미로 해석되지 않아야 한다.It is to be noted that the technical terms used herein are merely used to describe particular embodiments, and are not intended to limit the present invention. It is also to be understood that the technical terms used herein are to be interpreted in a sense generally understood by a person skilled in the art to which the present invention belongs, Should not be construed to mean, or be interpreted in an excessively reduced sense. In addition, when the technical terms used herein are incorrect technical terms that do not accurately express the spirit of the present invention, they should be replaced with technical terms that can be understood correctly by those skilled in the art. In addition, the general terms used in the present invention should be interpreted according to a predefined or prior context, and should not be construed as being excessively reduced.

또한, 본 명세서에서 사용되는 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "구성된다" 또는 "포함한다" 등의 용어는 명세서 상에 기재된 여러 구성 요소들, 또는 여러 단계들을 반드시 모두 포함하는 것으로 해석되지 않아야 하며, 그 중 일부 구성 요소들 또는 일부 단계들은 포함되지 않을 수도 있고, 또는 추가적인 구성 요소 또는 단계들을 더 포함할 수 있는 것으로 해석되어야 한다.Also, the singular forms "as used herein include plural referents unless the context clearly dictates otherwise. In the present application, the term "comprising" or "comprising" or the like should not be construed as necessarily including the various elements or steps described in the specification, Or may be further comprised of additional components or steps.

또한, 또한, 본 명세서에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 명세서 작성의 용이함만이 고려되어 부여되거나 혼용되는 것으로서, 그 자체로 서로 구별되는 의미 또는 역할을 갖는 것은 아니다In addition, the suffixes "module" and "unit" for the components used herein are given or mixed in consideration of ease of specification, and do not have distinct meanings or roles from each other.

이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 실시예를 상세히 설명하되, 도면 부호에 관계없이 동일하거나 유사한 구성 요소는 동일한 참조 번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다. Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings, wherein like reference numerals refer to like or similar elements throughout the several views, and redundant description thereof will be omitted.

또한, 본 발명을 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다. 또한, 첨부된 도면은 본 발명의 사상을 쉽게 이해할 수 있도록 하기 위한 것일 뿐, 첨부된 도면에 의해 본 발명의 사상이 제한되는 것으로 해석되어서는 아니 됨을 유의해야 한다. 본 발명의 사상은 첨부된 도면 외에 모든 변경, 균등물 내지 대체물에까지도 확장되는 것으로 해석되어야 한다.In the following description, well-known functions or constructions are not described in detail since they would obscure the invention in unnecessary detail. It is to be noted that the accompanying drawings are only for the purpose of facilitating understanding of the present invention, and should not be construed as limiting the scope of the present invention with reference to the accompanying drawings. The spirit of the invention should be construed to extend to all changes, equivalents, and substitutes in addition to the accompanying drawings.

도 1은 본 발명의 실시예에 따른 단말 장치의 블록도이다.1 is a block diagram of a terminal device according to an embodiment of the present invention.

도 1에 도시한 바와 같이, 상기 단말 장치(100)는, 카메라 모듈(110), 통신부(120), 제어부(130), 표시부(140) 및 저장부(150)를 포함할 수 있다. 도 1에 도시된 단말 장치(100)의 구성 요소는 모두 필수 구성 요소인 것은 아니며, 상기 단말 장치는 도 1에 도시된 구성 요소보다 많은 구성 요소에 의해 구현될 수도 있고, 그보다 적은 구성 요소에 의해서도 구현될 수 있다.As illustrated in FIG. 1, the terminal device 100 may include a camera module 110, a communication unit 120, a control unit 130, a display unit 140, and a storage unit 150. The components of the terminal device 100 shown in FIG. 1 are not all essential components, and the terminal device may be implemented by more components than those shown in FIG. 1, or by fewer components. Can be implemented.

상기 카메라 모듈(110)은, 상기 단말 장치(100)의 임의의 동일면의 동일 중심축 상에 수평 간격으로 이격되어 설치되는 적어도 한 쌍의 카메라(일 예로, 스테레오 카메라(stereo camera) 또는 스테레오코스픽 카메라(stereoscopic camera)) 또는 단일 카메라를 포함한다. 이때, 상기 고정된 수평 간격은, 일반적인 사람의 두 눈 간의 거리를 고려하여 설정할 수 있으며, 상기 단말 장치(100)를 구성할 때 설정한다. 또한, 상기 카메라 모듈(110)은, 영상 촬상이 가능한 임의의 모든 카메라 모듈일 수도 있다.The camera module 110 may include at least one pair of cameras (eg, a stereo camera or a stereoscopic camera) spaced apart from each other at horizontal intervals on the same central axis of the same plane of the terminal device 100. Camera (stereoscopic camera) or a single camera. In this case, the fixed horizontal interval may be set in consideration of the distance between two eyes of a general person, and is set when configuring the terminal device 100. In addition, the camera module 110 may be any camera module capable of image capturing.

또한, 상기 카메라 모듈(110)은, 상기 한 쌍의 카메라에 의해 동시에 촬영된 제1 영상(일 예로, 상기 한 쌍의 카메라에 포함된 좌측 카메라에 의해 촬영된 좌측 영상)과 제2 영상(일 예로, 상기 한 쌍의 카메라에 포함된 우측 카메라에 의해 촬영된 우측 영상)을 수신한다.In addition, the camera module 110 may include a first image (eg, a left image captured by a left camera included in the pair of cameras) and a second image captured by the pair of cameras simultaneously. For example, the right image captured by the right camera included in the pair of cameras) is received.

또한, 상기 카메라 모듈(110)은, CCD 소자, CMOS 소자 등과 같은 이미지 센서일 수 있다.In addition, the camera module 110 may be an image sensor such as a CCD device and a CMOS device.

또한, 상기 카메라 모듈(110)은, 차량에 설치되는 경우, 상기 차량의 소정 위치에 고정되어, 주행 방향의 전방, 측방, 후방 등을 촬영하고, 상기 촬영된 영상을 수신하도록 구성될 수도 있다.In addition, when installed in the vehicle, the camera module 110 may be fixed to a predetermined position of the vehicle, and may be configured to photograph the front, the side, the rear of the driving direction, and the like to receive the photographed image.

상기 통신부(120)는 주변 차량, 가로등, 신호등 등 차량 주변의 가시광 통신 가능 장치와의 가시광 통신을 통하여 차량의 주변 상황과 관련된 정보를 수신할 수 있다. 예를 들어 전방 차량의 급제동, 차선 변경 등의 정보, 신호등의 신호 변경과 관련된 정보, 가로등의 위치 정보 등을 수신할 수 있다. 또는 상기 통신부는 전광판에 디스플레이되는 광고에서 상품 관련 정보를 수신할 수도 있다.The communication unit 120 may receive information related to the surrounding situation of the vehicle through visible light communication with the visible light communication capable apparatus around the vehicle, such as a surrounding vehicle, a street lamp, a traffic light, and the like. For example, it is possible to receive information such as sudden braking of a front vehicle, lane change, information related to a signal change of a traffic light, location information of a street lamp, and the like. Alternatively, the communication unit may receive product related information in an advertisement displayed on an electronic sign.

상기 제어부(130)는, 상기 단말 장치(100)의 전반적인 동작을 제어하며 특히 본명세서에서 제안된 방법 및 기능을 수행한다.The controller 130 controls the overall operation of the terminal device 100 and particularly performs the method and function proposed in the present specification.

또한, 상기 제어부(130)는 카메라 모듈(110)로부터 수신한 영상에서 상기 카메라 모듈이 장착된 차량과 전방 물체와의 거리에 근거하여 설정된 하나 이상의 검색 영역을 선택할 수 있다. 여기에서 상기 하나 이상의 검색 영역은 현재 차량의 위치와 상기 전방 물체와의 거리에 따라 상기 물체의 전체 부분 중에 영상에 나타나는 일 부분만으로 이루어질 수 있다.In addition, the controller 130 may select one or more search areas set based on the distance between the vehicle equipped with the camera module and the front object in the image received from the camera module 110. Here, the one or more search areas may consist of only one portion of the entire portion of the object that appears in the image according to the position of the current vehicle and the distance between the front object.

또한, 상기 제어부(130)는 카메라 모듈(110)로부터 수신한 영상에서 가시광 통신이 가능한 영역을 판별하여 해당 부분만을 영상 처리할 수 있다. 예를 들어, 상기 영상 중 전방 차량의 후미등 부분만을 선별하여 그 부분만을 추적할 수 있고, 상기 추적을 통해 전방 차량의 위치, 속도 등을 판단할 수 있다.In addition, the controller 130 may determine a region in which visible light communication is possible in the image received from the camera module 110 and process only the corresponding portion. For example, only the taillight portion of the front vehicle of the image may be selected to track only that portion, and the position, speed, etc. of the front vehicle may be determined through the tracking.

또한, 상기 제어부(130)는 상기 통신부(120)를 통해 차량 주변 상황과 관련된 정보를 수신할 수 있다. 상기 제어부(130)는 상기 수신한 정보와 상기 카메라 모듈(110)로부터 검출한 영상 정보를 기초로 차량 주변의 상황을 판단할 수 있다. 이때, 상기 제어부(130)는 상기 판단에 근거하여 차량의 운행을 직접 제어할 수도 있다. 즉, 차량의 방향 전환 장치, 속도 변환 장치 등을 제어하여 현재 상황에 적절한 운행을 할 수 있도록 제어할 수 있다. 예컨대, 운행 속도를 감속하도록 차량의 브레이크 장치를 직접 제어할 수 있으며, 전방의 위험 물체를 피하도록 차량의 방향 전환 장치를 직접 제어할 수도 있다.In addition, the controller 130 may receive information related to a vehicle surrounding situation through the communication unit 120. The controller 130 may determine a situation around the vehicle based on the received information and the image information detected by the camera module 110. In this case, the controller 130 may directly control the driving of the vehicle based on the determination. That is, the vehicle may be controlled so as to drive appropriately for the current situation by controlling the vehicle's direction switching device and speed conversion device. For example, the brake device of the vehicle may be directly controlled to slow down the running speed, and the direction change device of the vehicle may be directly controlled to avoid dangerous objects in front of the vehicle.

상기 표시부(140)는, 상기 제어부(130)의 제어에 따라 차량의 운행을 안내하는 정보를 표시할 수 있다. 즉, 상기 제어부(130)가 판단한 차량 주변의 상황에 근거하여 주의 운전, 감속 등을 안내하는 정보를 표시할 수 있다. The display unit 140 may display information for guiding driving of the vehicle under the control of the controller 130. That is, the controller 130 may display information for guiding attention driving, deceleration, etc. based on the situation around the vehicle determined by the controller 130.

또한, 상기 표시부(140)는, 상기 제어부(130)의 제어에 따라 상기 저장부(150)에 포함된 사용자 인터페이스 및/또는 그래픽 사용자 인터페이스를 이용하여 다양한 메뉴 화면 등과 같은 다양한 콘텐츠를 표시한다. 여기서, 상기 표시부(140)에 표시되는 콘텐츠는, 다양한 텍스트 또는 이미지 데이터(각종 정보 데이터 포함)와 아이콘, 리스트 메뉴, 콤보 박스 등의 데이터를 포함하는 메뉴 화면 등을 포함한다.In addition, the display unit 140 displays various contents such as various menu screens using a user interface and / or a graphic user interface included in the storage unit 150 under the control of the controller 130. Here, the content displayed on the display unit 140 includes a menu screen including various text or image data (including various information data) and data such as icons, list menus, combo boxes, and the like.

또한, 상기 표시부(140)는, 3차원 디스플레이(3D Display) 또는 2차원 디스플레이(2D Display)를 포함한다. 또한, 상기 표시부(140)는, 액정 디스플레이(Liquid Crystal Display : LCD), 박막 트랜지스터 액정 디스플레이(Thin Film Transistor-Liquid Crystal Display : TFT LCD), 유기 발광 다이오드(Organic Light-Emitting Diode : OLED), 플렉시블 디스플레이(Flexible Display), LED(Light Emitting Diode) 중에서 적어도 하나를 포함할 수도 있다.In addition, the display unit 140 includes a 3D display or a 2D display. In addition, the display unit 140 may include a liquid crystal display (LCD), a thin film transistor liquid crystal display (TFT LCD), an organic light-emitting diode (OLED), and a flexible display. The display device may include at least one of a flexible display and a light emitting diode (LED).

또한, 상기 표시부(140)는, 상기 제어부(130)의 제어에 의해 상기 3차원 영상(또는, 2차원 영상)을 표시한다.In addition, the display unit 140 displays the 3D image (or 2D image) under the control of the controller 130.

또한, 상기 단말 장치(100)의 구현 형태에 따라 상기 표시부(140)가 2개 이상 존재할 수 있다. 예를 들면, 상기 단말 장치(100)에 복수의 표시부들이 하나의 면(동일면)에 이격되거나 일체로 배치될 수 있고, 또한 서로 다른 면에 각각 배치될 수도 있다.In addition, two or more display units 140 may exist according to an implementation form of the terminal device 100. For example, a plurality of display units may be spaced apart or integrally disposed on one surface (same surface) of the terminal device 100, or may be disposed on different surfaces.

한편, 상기 표시부(140)와 터치 동작을 감지하는 센서(이하, '터치 센서'라 함)가 상호 레이어 구조를 이루는 경우(이하, '터치 스크린'이라 함)에, 상기 표시부(140)는 출력 장치 이외에 입력 장치로도 사용될 수 있다. 상기 터치 센서는, 예를 들어, 터치 필름, 터치 시트, 터치 패드, 터치 패널 등의 형태를 가질 수 있다.On the other hand, when the display unit 140 and a sensor for detecting a touch operation (hereinafter, referred to as a “touch sensor”) form a mutual layer structure (hereinafter, referred to as a “touch screen”), the display unit 140 is output. In addition to the device can also be used as an input device. The touch sensor may have, for example, a form of a touch film, a touch sheet, a touch pad, or a touch panel.

또한, 상기 터치 센서는, 상기 표시부(140)의 특정 부위에 가해진 압력 또는 상기 표시부(140)의 특정 부위에 발생하는 정전 용량 등의 변화를 전기적인 입력 신호로 변환하도록 구성될 수 있다. 또한, 상기 터치 센서는, 터치되는 위치 및 면적뿐만 아니라, 터치 시의 압력까지도 검출할 수 있도록 구성될 수 있다. 상기 터치 센서에 대한 터치 입력이 있는 경우, 그에 대응하는 신호(들)는 터치 제어기(미도시)로 보내진다. 터치 제어기는 그 신호(들)를 처리한 다음 대응하는 데이터를 상기 제어부(130)로 전송한다. 이로써, 상기 제어부(130)는, 상기 표시부(140)의 어느 영역이 터치되었는지 여부 등을 알 수 있게 된다.In addition, the touch sensor may be configured to convert a change in pressure applied to a specific portion of the display unit 140 or capacitance generated at a specific portion of the display unit 140 into an electrical input signal. In addition, the touch sensor may be configured to detect not only the position and area of the touch but also the pressure at the time of touch. If there is a touch input to the touch sensor, the corresponding signal (s) is sent to a touch controller (not shown). The touch controller processes the signal (s) and then transmits corresponding data to the controller 130. As a result, the controller 130 may determine which area of the display unit 140 is touched.

또한, 상기 표시부(140)는, 근접 센서를 포함할 수 있다. 또한, 상기 근접 센서는, 터치 스크린에 의해 감싸지는 단말 장치(100)의 내부 영역 또는 상기 터치 스크린의 근처에 배치될 수 있다.In addition, the display unit 140 may include a proximity sensor. In addition, the proximity sensor may be disposed in the inner region of the terminal device 100 surrounded by the touch screen or near the touch screen.

이와 같이, 상기 표시부(140)가 입력 장치로 사용되는 경우, 사용자에 의한 버튼 조작을 입력받거나, 디스플레이되는 화면을 터치/스크롤하는 등의 조작에 의해 명령 또는 제어 신호를 입력받을 수 있다.As such, when the display unit 140 is used as an input device, a command or control signal may be input by an operation such as receiving a button operation by a user or touching / scrolling the displayed screen.

상기 저장부(150)는, 본 명세서에서 제안된 방법들을 저장한다. 또한, 상기 저장부(150)는, 상기 단말 장치(100)가 동작하는데 필요한 데이터와 프로그램 등을 저장한다.The storage unit 150 stores the methods proposed herein. In addition, the storage unit 150 stores data and programs required for the terminal device 100 to operate.

여기서, 도 1의 단말 장치는, 스탠드 얼론(stand alone)으로 구성될 수 있을 뿐만 아니라, 이동 단말기(Mobile Terminal), 텔레매틱스 단말기(Telematics Terminal), 스마트 폰(Smart Phone), 휴대 단말기(Portable Terminal), 개인 정보 단말기(Personal Digital Assistant: PDA), 휴대용 멀티미디어 플레이어(Portable Multimedia Player : PMP), 노트북 컴퓨터, 태블릿 PC(Tablet PC), 와이브로(Wibro) 단말기, IPTV(Internet Protocol Television) 단말기, 텔레비전(Television), 3D 텔레비전, 영상 기기, 텔레매틱스(Telematics) 단말기, 내비게이션(Navigation) 단말기, AVN(Audio Video Navigation) 단말기 등과 같이 다양한 단말기에 적용될 수 있다.Here, the terminal device of FIG. 1 may not only be configured as stand alone, but also a mobile terminal, a telematics terminal, a smart phone, and a portable terminal. , Personal Digital Assistant (PDA), Portable Multimedia Player (PMP), Notebook Computer, Tablet PC (Tablet PC), Wibro Terminal, Internet Protocol Television (IPTV) Terminal, Television ), 3D televisions, video devices, telematics terminals, navigation terminals, AVN terminals, and the like.

도 2는 본 발명의 일 실시예에 따른 단말 장치의 장착도이다.2 is a mounting diagram of a terminal device according to an embodiment of the present invention.

상기 단말 장치(100)는 차량 내부에 장착될 수 있다.The terminal device 100 may be mounted in a vehicle.

카메라 모듈(110)은 차량(200)의 전방을 주시할 수 있는 위치에 장착될 수 있다. 도 2에서는 상기 카메라 모듈(110)이 차량 운전자의 눈 높이와 유사한 위치에 장착된 것으로 도시하였으나, 차량 또는 운전자에 의한 요인에 의해 상기 장착 위치는 변경될 수 있다. 또한, 카메라 모듈(110)은 상기 단말 장치(100)의 모든 구성요소와 한 위치에 장착될 수도 있고, 기타 구성 요소가 분리되어 장착될 수도 있다. 본 명세서에 개시되는 카메라 모듈(110)은 측방 또는 후방을 촬영하는 데에도 이용될 수 있으며, 이 때 상기 카메라 모듈(110)의 위치는 변경될 수도 있다.The camera module 110 may be mounted at a position capable of watching the front of the vehicle 200. In FIG. 2, the camera module 110 is mounted at a position similar to the eye height of the vehicle driver, but the mounting position may be changed by factors caused by the vehicle or the driver. In addition, the camera module 110 may be mounted at one location with all the components of the terminal device 100, or other components may be mounted separately. The camera module 110 disclosed herein may also be used to photograph side or rear, and at this time, the position of the camera module 110 may be changed.

도 3는 본 발명의 일 실시예에 따른 주행 안내 정보 출력 및 운행 제어 방법을 나타낸 흐름도이다.3 is a flowchart illustrating a driving guide information output and a driving control method according to an exemplary embodiment of the present invention.

단말 장치는 카메라 모듈을 통해 외부로부터 영상을 수신한다(S310). 상기 단말 장치는 상기 수신한 영상으로부터 제 1 정보를 검출한다(S320). 여기서 상기 제 1 정보는 주변 차량의 위치, 주변 차량과의 거리, 신호등의 위치. 신호등과의 거리 등 차량 주변의 다른 차량 또는 신호등의 존재을 나타내는 정보일 수 있다. The terminal device receives an image from the outside through the camera module (S310). The terminal device detects first information from the received image (S320). The first information may include a location of a surrounding vehicle, a distance from a surrounding vehicle, and a location of a traffic light. It may be information indicating the presence of other vehicles or traffic lights around the vehicle, such as a distance from the traffic lights.

이때 단말 장치는 상기 수신한 영상에 가시광 통신이 수행되는 영역이 있는 경우, 가시광 통신 모듈을 활성화하도록 제어한다(S340).In this case, when there is an area where visible light communication is performed in the received image, the terminal device controls to activate the visible light communication module (S340).

상기 활성화된 가시광 통신 모듈을 통해 단말 장치는 제 2 정보를 수신한다(S350). 여기서 상기 제 2 정보는 주변 차량의 운행 정보, 예컨대 급제동, 차선변경 등과 관련된 정보 또는 신호등의 신호상태, 신호 변경까지 남은 시간 등 차량 주변의 다른 차량 또는 신호등의 상태 변경을 나타내는 정보일 수 있다.The terminal device receives second information through the activated visible light communication module in operation S350. Here, the second information may be driving information of surrounding vehicles, for example, information related to sudden braking, lane change, or the like, or information indicating a state change of another vehicle or traffic light around the vehicle, such as a signal state of a traffic light or a time remaining until a signal change.

단말 장치는 상기 수신한 제 1 정보와 제 2 정보를 기초로 차량의 주변 상황을 판단할 수 있다(S360). 예를 들어, 주의 운전이 필요한 상황인지 또는 감속 운전해야 할 상황인지 등을 판단할 수 있다.The terminal device may determine the surrounding situation of the vehicle based on the received first information and the second information (S360). For example, it may be determined whether the situation requires attention or deceleration.

상기 판단 결과, 운전자에게 주의를 알려야 할 상황인 경우, 단말 장치는 주행 안내 정보를 출력할 수 있다(S370). 상기 출력은 시각적, 청각적 알림을 포함할 수 있으며, 디스플레이 화면 및/또는 스피커를 통해 이루어질 수 있다.As a result of the determination, when it is the situation to notify the driver of the caution, the terminal device can output the driving guide information (S370). The output may include visual and audio notifications and may be through a display screen and / or a speaker.

이때, 상기 단말 장치는 차량의 운행을 직접 제어할 수도 있다. 즉, 차량의 방향 전환 장치, 속도 변환 장치 등을 제어하여 현재 상황에 적절한 운행을 할 수 있도록 제어할 수 있다. 예컨대, 운행 속도를 감속하도록 차량의 브레이크 장치를 직접 제어할 수 있다. 또는 전방의 위험 물체를 피하도록 차량의 방향 전환 장치를 직접 제어할 수도 있다.In this case, the terminal device may directly control the driving of the vehicle. That is, the vehicle may be controlled so as to drive appropriately for the current situation by controlling the vehicle's direction switching device and speed conversion device. For example, it is possible to directly control the brake device of the vehicle to slow down the running speed. Alternatively, the vehicle's turning device may be directly controlled to avoid dangerous objects in front of the vehicle.

여기서, 상기 단말 장치의 차량 직접 제어는 상기 단말 장치가 탑재되는 차량의 차량 자동 제어 모드가 ‘온(on)’일 경우, 수행될 수 있다.The direct vehicle control of the terminal device may be performed when the vehicle automatic control mode of the vehicle on which the terminal device is mounted is 'on'.

도 4 (a) 내지 (c)는 본 명세서에 따른 주행 안내 정보 출력 및 운행 제어 방법의 제 1 실시예이다.4 (a) to (c) is a first embodiment of the driving guidance information output and driving control method according to the present specification.

도 4 (a) 는 상기 단말 장치가 카메라 모듈을 통해 촬영된 영상 및 전방 차량과의 가시광 통신을 통하여 주행 관련 정보를 수신하는 것을 나타낸 도면이다.4A is a diagram illustrating that the terminal device receives driving related information through an image captured by a camera module and visible light communication with a front vehicle.

본 명세서에 따른 단말 장치(100, 이하 단말 장치)는 상기 단말 장치의 카메라 모듈을 통해 외부 영상을 수신한다. 상기 단말장치(100)는 상기 영상에서 차량영역을 검출할 수 있다. 차량영역 검출을 위한 영상처리과정의 예로서 전처리기법과 분류기법을 들 수 있다. 상기 전처리기법은 에지분석, 역투영변환등이 있으며, 차량후보영역을 설정하는 영상처리 과정이다. 상기 분류기법은 SVM, Ada-boost등을 통해 차량후보영역 중에서 차량판별을 수행하는 영상처리 과정이다. 이때 차량검출영역에서 통신 가능 영역인 LED후미등 영역만을 추출할 수 있으며, 대칭성판별법, 문턱치 설정 혹은 특정색화소 추출법등을 이용될 수 있다. The terminal device 100 (hereinafter, referred to as a terminal device) according to the present specification receives an external image through a camera module of the terminal device. The terminal device 100 may detect a vehicle area from the image. As an example of an image processing process for detecting a vehicle area, a preprocessing technique and a classification technique may be used. The preprocessing technique includes edge analysis, reverse projection transformation, and the like, and is an image processing process for setting a vehicle candidate region. The classification technique is an image processing process of performing vehicle discrimination in a vehicle candidate area through SVM, Ada-boost, and the like. In this case, only the LED taillight region, which is a communicable region, may be extracted from the vehicle detection region, and symmetry discrimination, threshold setting, or specific color extraction may be used.

상기 단말장치(100)는 카메라 모듈을 통해 촬영된 영상을 카메라모델을 통해 전역좌표계(World Coordinates System)로 변환하여 영상 내 모든 차량의 기준좌표를 얻을 수 있다. 또한, 상기 단말장치가 설치된 차량이 진행하고 있는 차선의 중심을 기준으로 대상차량의 기준좌표를 이용하여 촬영차량과의 방향각을 얻을 수 있다. The terminal device 100 may obtain the reference coordinates of all vehicles in the image by converting the image photographed through the camera module into a world coordinate system through a camera model. In addition, the direction angle with the photographing vehicle may be obtained by using the reference coordinate of the target vehicle on the basis of the center of the lane where the vehicle equipped with the terminal apparatus is traveling.

상기 단말 장치(100)는 상기 영상 처리 과정을 통하여 제 1 정보를 획득할 수 있다. 상기 제 1 정보는 주변 차량들(400a, 400b)의 거리 또는 위치 정보를 포함할 수 있다.The terminal device 100 may obtain first information through the image processing process. The first information may include distance or location information of the surrounding vehicles 400a and 400b.

또한, 상기 단말 장치(100)는 가시광 통신 모듈을 통해 제 2 정보를 수신할 수 있다. 상기 제 2 정보는 주변 차량(400a, 400b)의 운행 상태, 특히 급제동 정보를 포함할 수 있다. 이때 상기 단말 장치(100)는 상기 카메라 모듈을 통해 수신한 영상에서 가시광 통신 영역이 검출되는 경우에만 상기 가시광 통신 모듈을 활성화시킬 수도 있다.In addition, the terminal device 100 may receive the second information through the visible light communication module. The second information may include driving conditions of the surrounding vehicles 400a and 400b, in particular sudden braking information. In this case, the terminal device 100 may activate the visible light communication module only when the visible light communication area is detected in the image received through the camera module.

단말 장치(100)는 상기 수신한 제 1 정보와 제 2 정보를 기초로 차량의 주변 상황을 판단한다. 상기 단말 장치(100)는 상기 상황 판단을 근거로 주행 안내 정보 출력 및/또는 차량 운행 제어를 수행할 수 있다. 즉, 차량의 방향 전환 장치, 속도 변환 장치 등을 제어하여 현재 상황에 적절한 운행을 할 수 있도록 제어할 수 있다.The terminal device 100 determines the surrounding situation of the vehicle based on the received first information and the second information. The terminal device 100 may output driving guide information and / or control a vehicle driving based on the situation determination. That is, the vehicle may be controlled so as to drive appropriately for the current situation by controlling the vehicle's direction switching device and speed conversion device.

도 4 (b) 는 단말 장치가 주행 상황을 판단하고 주행 안내 정보를 출력하는 일 예이다.4B illustrates an example in which the terminal device determines driving conditions and outputs driving guide information.

단말 장치(100)는 영상(410)에서 차량 특징 데이터, 가시광 통신이 가능한 영역 등을 검출한다. 도 4 (b) 에서는 전방 정면 차량 및 가시광 통신 가능 영역으로 후미등 부분(415)을 검출한 것을 나타내었다. 또한 상기 단말 장치(100)는 전방 차량이 급제동한 경우, 전방 차량과의 가시광 통신을 통해 급제동 정보를 수신한다.The terminal device 100 detects vehicle characteristic data, an area in which visible light communication is possible, and the like in the image 410. In FIG. 4B, the rear light portion 415 is detected as the front front vehicle and the visible light communication region. In addition, when the front vehicle suddenly brakes, the terminal device 100 receives the sudden braking information through visible light communication with the front vehicle.

단말 장치(100)는 위 정보들을 통해 주변 상황을 감지한다. 즉. 전방 차량의 급제동 상황과 전방 차량과의 거리 등을 종합하여 위험 여부를 판단할 수 있다. 상기 판단 결과, 위험 가능성이 높다면, 단말 장치는 주의 운전 또는 감속을 지시하는 정보(418)를 출력한다. 상기 출력은 시각적, 청각적 알림을 포함할 수 있으며, 디스플레이 화면 및/또는 스피커를 통해 이루어질 수 있다.The terminal device 100 detects a surrounding situation through the above information. In other words. It is possible to determine whether or not the risk by combining the braking situation of the vehicle ahead and the distance to the vehicle ahead. As a result of the determination, if the risk is high, the terminal device outputs information 418 indicating instructing to drive or slow down. The output may include visual and audio notifications and may be through a display screen and / or a speaker.

도 4 (c) 는 단말 장치가 주행 상황을 판단하는 다른 예이다.4C is another example in which the terminal device determines a driving situation.

단말 장치(100)는 영상(420)에서 차량 특징 데이터, 가시광 통신 가능 영역 등을 획득한다. 도 4 (c) 에서는 전방 측면 차량 및 가시광 통신 가능 영역으로 후미등 부분(425)을 검출한 것을 나타내었다. 또한 상기 단말 장치(100)는 전방 차량이 급제동한 경우, 전방 차량과의 가시광 통신을 통해 급제동 정보를 수신한다.The terminal device 100 obtains vehicle characteristic data, visible light communication area, and the like from the image 420. In FIG. 4C, the rear light portion 425 is detected as the front side vehicle and the visible light communication region. In addition, when the front vehicle suddenly brakes, the terminal device 100 receives the sudden braking information through visible light communication with the front vehicle.

이때 (b)와는 달리, 급제동 정보를 수신하더라도 전방 차량은 정면에 있지 않으므로, 위험한 상황이라 판단하지 않을 수 있다. 따라서 이러한 경우에는 별도의 지시를 출력하지 않을 수 있다.In this case, unlike (b), even if the braking information is received, since the front vehicle is not in the front, it may not be determined as a dangerous situation. Therefore, in this case, a separate instruction may not be output.

도 5 (a) 및 (b)는 본 명세서에 따른 주행 안내 정보 출력 및 운행 제어 방법의 제 2 실시예이다.5 (a) and (b) are a second embodiment of a driving guide information output and driving control method according to the present specification.

도 5 (a) 는 단말 장치(100)가 카메라 모듈을 통해 촬영된 영상 및 전방 차량과의 가시광 통신을 통하여 주행 관련 정보를 수신하는 것을 나타낸 도면이다.FIG. 5A is a diagram illustrating that the terminal device 100 receives driving related information through an image captured by a camera module and visible light communication with a front vehicle.

도 4 (a)에서 설명한 바와 같이, 단말 장치(100)는 상기 카메라 모듈과 가시광 통신 모듈을 통해 정보를 수신할 수 있다. 단말 장치(100)는 상기 수신한 정보를 기초로 차량의 주변 상황을 판단한다. 상기 단말 장치(100)는 상기 상황 판단을 근거로 주행 안내 정보 출력 및/또는 차량 운행 제어를 수행할 수 있다.As described with reference to FIG. 4A, the terminal device 100 may receive information through the camera module and the visible light communication module. The terminal device 100 determines the surrounding situation of the vehicle based on the received information. The terminal device 100 may output driving guide information and / or control a vehicle driving based on the situation determination.

도 5 (b) 는 단말 장치(100)가 주행 상황을 판단하고 주행 안내 정보를 출력하는 일 예이다.5B illustrates an example in which the terminal device 100 determines driving conditions and outputs driving guide information.

단말 장치(100)는 영상(510)에서 차량 특징 데이터, 가시광 통신 가능 영역 등을 획득한다. 또한 단말 장치(100)는 영상(510)에서 주위 차량의 위치, 거리 정보를 획득한다. 도 5 (b) 에서는 우측 전방 차량(500b) 및 가시광 통신 가능 영역으로 방향 표시등 부분(515)을 검출한 것을 나타내었다. 또한 상기 단말 장치(100)는 전방 차량이 차선 변경을 위해 방향 표시등을 점멸하는 경우, 전방 차량(500b)과의 가시광 통신을 통해 차선 변경 정보를 수신한다.The terminal device 100 obtains vehicle characteristic data, visible light communication area, and the like from the image 510. In addition, the terminal device 100 obtains location and distance information of surrounding vehicles in the image 510. In FIG. 5B, the direction indicator portion 515 is detected as the right front vehicle 500b and the visible light communication region. In addition, the terminal device 100 receives the lane change information through visible light communication with the front vehicle 500b when the front vehicle blinks the direction indicator to change lanes.

단말 장치(100)는 위 정보들을 통해 주변 상황을 감지한다. 즉. 전방 차량(100)의 차선 변경 상황과 전방 차량과의 거리 등을 종합하여 위험 여부를 판단할 수 있다. 상기 판단 결과, 위험 가능성이 높다면, 단말 장치는 주의 운전 또는 감속을 지시하는 정보(518)를 출력한다. 상기 출력은 시각적, 청각적 알림을 포함할 수 있으며, 디스플레이 화면 및/또는 스피커를 통해 이루어질 수 있다.The terminal device 100 detects a surrounding situation through the above information. In other words. The risk of the vehicle may be determined by combining the lane change situation of the front vehicle 100 and the distance with the front vehicle. As a result of the determination, if the risk is high, the terminal device outputs information 518 indicating the attention driving or deceleration. The output may include visual and audio notifications and may be through a display screen and / or a speaker.

도 6 (a) 및 (b)는 본 명세서에 따른 주행 안내 정보 출력 및 운행 제어 방법의 제 3 실시예이다.6 (a) and (b) illustrate a third embodiment of a method for outputting driving guidance information and driving control according to the present specification.

도 6 (a)는 상기 단말 장치가 카메라 모듈을 통해 촬영된 영상 및 전방 차량과의 가시광 통신을 통하여 주행 관련 정보를 수신하는 것을 나타낸 도면이다.FIG. 6A is a diagram illustrating that the terminal device receives driving related information through an image captured by a camera module and visible light communication with a front vehicle.

도 4 (a)에서 설명한 바와 같이, 단말 장치(100)는 상기 카메라 모듈과 가시광 통신 모듈을 통해 정보를 수신할 수 있다. 단말 장치(100)는 상기 수신한 정보를 기초로 차량의 주변 상황을 판단한다. 상기 단말 장치(100)는 상기 상황 판단을 근거로 주행 안내 정보 출력 및/또는 차량 운행 제어를 수행할 수 있다.As described with reference to FIG. 4A, the terminal device 100 may receive information through the camera module and the visible light communication module. The terminal device 100 determines the surrounding situation of the vehicle based on the received information. The terminal device 100 may output driving guide information and / or control a vehicle driving based on the situation determination.

도 6 (b)는 단말 장치가 주행 상황을 판단하고 주행 안내 정보를 출력하는 일 예이다.6B illustrates an example in which the terminal device determines driving conditions and outputs driving guide information.

단말 장치(100)는 영상(610)에서 신호등 및/또는 가시광 통신 가능 영역 등을 검출한다. 또한 단말 장치(100)는 영상(610)에서 신호등(615)의 위치 및/또는 신호등과의 거리 정보를 획득한다. 도 6 (b) 에서는 신호등 및 가시광 통신 가능 영역으로 신호등 부분(615)을 검출한 것을 나타내었다. 또한 상기 단말 장치(100)는 신호등(615)과의 가시광 통신을 통해 신호 관련 정보, 즉 현재 신호 상태, 신호 변경까지 남은 시간 등에 관한 정보를 수신한다.The terminal device 100 detects a traffic light and / or a visible light communication area in the image 610. In addition, the terminal device 100 obtains the position of the traffic light 615 and / or the distance information with the traffic light in the image 610. 6 (b) shows that the traffic light portion 615 is detected as a traffic light and visible light communication region. In addition, the terminal device 100 receives signal related information, that is, information on a current signal state, time remaining until a signal change, and the like through visible light communication with the traffic light 615.

단말 장치(100)는 위 정보들을 통해 주변 상황을 감지한다. 즉. 신호등의 신호 변경 상황과 신호등과의 거리 등을 종합하여 위험 여부를 판단할 수 있다. 상기 판단 결과, 위험 가능성이 높다면, 주의 운전 또는 감속을 지시하는 정보(618)를 출력한다. 상기 출력은 시각적, 청각적 알림을 포함할 수 있으며, 디스플레이 화면 및/또는 스피커를 통해 이루어질 수 있다.The terminal device 100 detects a surrounding situation through the above information. In other words. It is possible to determine whether or not the risk by combining the signal change situation of the traffic light and the distance to the traffic light. As a result of the determination, if the possibility of danger is high, information 618 for instructing caution driving or deceleration is output. The output may include visual and audio notifications and may be through a display screen and / or a speaker.

도 7 (a) 및 (b)는 본 명세서에 따른 차량의 위치 측정 방법의 실시예이다.7 (a) and 7 (b) are embodiments of a method for measuring a position of a vehicle according to the present specification.

도 7 (a)는 상기 단말 장치가 카메라 모듈을 통해 촬영된 영상 및 가시광 통신이 가능한 대상으로부터 수신한 정보에 기초하여 위치 정보를 획득하는 것을 나타낸 도면이다.FIG. 7A is a diagram illustrating that the terminal device acquires location information based on an image photographed through a camera module and information received from a target capable of visible light communication.

단말 장치(100)는 카메라 모듈을 통해 외부 영상을 수신한다. 단말 장치(100)는 상기 영상에서 가시광 통신 수행이 가능한 영역이 존재하는지 확인한다. 이후 단말 장치(100)는 통신 수행 가능 영역이 존재하는 경우, 가시광 통신 모듈을 활성화하고, 상기 활성화된 가시광 통신 모듈을 통해 상기 가시광 통신 수행 가능 영역(720)의 지리적 좌표를 수신한다.The terminal device 100 receives an external image through a camera module. The terminal device 100 checks whether there is an area in which the visible light communication can be performed in the image. Thereafter, when the communication capable region exists, the terminal device 100 activates the visible light communication module and receives the geographical coordinates of the visible light communication capable region 720 through the activated visible light communication module.

이후 단말 장치(100)는 상기 영상 및 지리적 좌표에 기초하여 상기 차량의 위치를 판단한다. 예를 들어, 가시광통신을 통해서 대상물체(가로등 등)의 절대위치 정보를 받고 영상 내 상기 대상 물체의 상대위치와 조합하여, 현재 차량의 위치를 역으로 계산할 수 있다.Thereafter, the terminal device 100 determines the location of the vehicle based on the image and the geographical coordinates. For example, the position of the current vehicle may be reversely calculated by receiving absolute position information of an object (eg, a street lamp) through visible light communication, and combining the object with the relative position of the object in the image.

단말 장치(100)는 상기 판단한 차량의 위치 정보를 출력한다. 상기 출력은 시각적, 청각적 알림을 포함할 수 있으며, 디스플레이 화면 및/또는 스피커를 통해 이루어질 수 있다.The terminal device 100 outputs the determined location information of the vehicle. The output may include visual and audio notifications and may be through a display screen and / or a speaker.

도 7 (b)는 단말 장치가 차량의 위치를 판단하고 위치 정보를 출력하는 일 예이다.7B illustrates an example in which the terminal device determines a location of a vehicle and outputs location information.

단말 장치(100)는 영상(710)에서 가시광 통신 가능 영역 등을 검출한다. 도 7 (B)에서는 가시광 통신 가능 영역으로 가로등(720)을 검출한 것을 나타내었다. 또한 상기 단말 장치(100)는 가로등(720)과의 가시광 통신을 통해 상기 가로등의 위치 정보를 수신한다.The terminal device 100 detects a visible light communication area or the like in the image 710. In FIG. 7B, the street lamp 720 is detected as a visible light communication region. In addition, the terminal device 100 receives location information of the street light through visible light communication with the street light 720.

이후 상기 단말 장치(100)는 상기 수신한 위치 정보와 (영상 내의) 가로등의 상대 위치와 조합하여 현재 차량의 위치를 계산할 수 있다. 이때 상기 단말 장치(100)는 상기 영상에 나타난 건물, 도로, 풍경 등을 분석하여 개략적인 위치 정보를 추가적으로 파악하여 상기 수신한 위치 정보와 조합할 수도 있다.Thereafter, the terminal device 100 may calculate the current location of the vehicle by combining the received location information with the relative location of the street light (in the image). In this case, the terminal device 100 may further analyze the building, the road, the scenery, and the like shown in the image to additionally identify the approximate location information and combine it with the received location information.

상기 단말 장치(100)는 상기 계산 결과로 파악된 위치 정보를 여러 가지 방식으로 출력할 수 있다.The terminal device 100 may output the location information determined as the calculation result in various ways.

본 발명은 LED(Light Emitting Diode) 가시광 무선통신(Visible Light Communication) 및/또한 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다.The present invention can be embodied as computer readable codes on a light emitting diode (LED) visible light communication and / or a computer readable recording medium. A computer-readable recording medium includes all kinds of recording apparatuses in which data that can be read by a computer system is stored.

이상에서 설명된 실시예들은 본 발명의 구성요소들과 특징들이 소정 형태로 결합된 것들이다. 각 구성요소 또는 특징은 별도의 명시적 언급이 없는 한 선택적인 것으로 고려되어야 한다. 각 구성요소 또는 특징은 다른 구성요소나 특징과 결합되지 않은 형태로 실시될 수 있다. 또한, 일부 구성요소들 및/또는 특징들을 결합하여 본 발명의 실시예를 구성하는 것도 가능하다. 본 발명의 실시예들에서 설명되는 동작들의 순서는 변경될 수 있다. 어느 실시예의 일부 구성이나 특징은 다른 실시예에 포함될 수 있고, 또는 다른 실시예의 대응하는 구성 또는 특징과 교체될 수 있다. 특허청구범위에서 명시적인 인용 관계가 있지 않은 청구항들을 결합하여 실시예를 구성하거나 출원 후의 보정에 의해 새로운 청구항으로 포함시킬 수 있음은 자명하다.The embodiments described above are the components and features of the present invention are combined in a predetermined form. Each component or feature shall be considered optional unless otherwise expressly stated. Each component or feature may be implemented in a form that is not combined with other components or features. It is also possible to construct embodiments of the present invention by combining some of the elements and / or features. The order of the operations described in the embodiments of the present invention may be changed. Some configurations or features of certain embodiments may be included in other embodiments, or may be replaced with corresponding configurations or features of other embodiments. It is clear that the claims that are not expressly cited in the claims may be combined to form an embodiment or be included in a new claim by an amendment after the application.

100 : 단말 장치100: terminal device

Claims (7)

차량의 주행 안내 정보를 단말에 출력하도록 제어하기 위한 방법에 있어서,
카메라 모듈을 통해 외부 영상을 수신하는 단계;
상기 수신한 영상으로부터 제 1 정보를 획득하는 단계;
상기 수신한 영상에 가시광 통신이 수행되는 영역이 있는 경우, 가시광 통신 모듈을 활성화하는 단계;
상기 가시광 통신 모듈을 통해 제 2 정보를 수신하는 단계; 및
상기 제 1 정보와 상기 제 2 정보에 기초하여 결정한 주행 안내 정보를 출력하는 단계를 포함하되,
상기 제 1 정보는 상기 차량 주변의 다른 차량 또는 신호등의 존재 여부를 나타내는 정보이고,
상기 제 2 정보는 차량 주변의 다른 차량 또는 신호등의 상태 변경을 나타내는 정보인 것을 특징으로 하는 방법.
In the method for controlling to output the driving guide information of the vehicle to the terminal,
Receiving an external image through a camera module;
Acquiring first information from the received image;
Activating a visible light communication module when there is an area where visible light communication is performed in the received image;
Receiving second information via the visible light communication module; And
Outputting driving guide information determined based on the first information and the second information,
The first information is information indicating the presence of other vehicles or traffic lights around the vehicle,
And the second information is information indicating a change of state of another vehicle or a traffic light around the vehicle.
제 1 항에 있어서,
상기 제 1 정보는 선행 차량의 방향 및 거리를 나타내는 정보이고,
상기 제 2 정보는 선행 차량의 급제동 정보이고,
상기 주행 안내 정보는 감속을 지시하는 정보인 것을 특징으로 하는 방법.
The method of claim 1,
The first information is information indicating the direction and distance of the preceding vehicle,
The second information is rapid braking information of the preceding vehicle,
And the driving guide information is information for instructing deceleration.
제 1 항에 있어서,
상기 제 1 정보는 선행 차량의 방향 및 거리를 나타내는 정보이고,
상기 제 2 정보는 선행 차량의 차선 변경 정보이고,
상기 주행 안내 정보는 감속을 지시하는 정보인 것을 특징으로 하는 방법.
The method of claim 1,
The first information is information indicating the direction and distance of the preceding vehicle,
The second information is lane change information of the preceding vehicle,
And the driving guide information is information for instructing deceleration.
제 1 항에 있어서,
상기 제 1 정보는 신호등과의 거리를 나타내는 정보이고,
상기 제 2 정보는 상기 신호등으로부터 수신한 신호 변경 관련 정보이고,
상기 주행 안내 정보는 속도의 가속 또는 감속을 지시하는 정보인 것을 특징으로 하는 방법.
The method of claim 1,
The first information is information indicating the distance to the traffic light,
The second information is signal change related information received from the traffic light,
And the driving guide information is information for instructing acceleration or deceleration of speed.
제 1 항에 있어서,
상기 제 1 정보와 상기 제 2 정보에 기초하여 상기 차량의 주행을 제어하는 단계를 더 포함하는 것을 특징으로 하는 방법.
The method of claim 1,
And controlling the running of the vehicle based on the first information and the second information.
차량의 위치 정보를 단말에 출력하도록 제어하기 위한 방법에 있어서,
카메라 모듈을 통해 외부 영상을 수신하는 단계;
상기 수신된 영상에 가시광 통신 수행 가능 영역이 존재하는지를 확인하는 단계;
상기 확인 결과, 가시광 통신 수행 가능 영역이 존재하는 경우,가시광 통신 모듈을 활성화하는 단계;
상기 활성화된 가시광 통신 모듈을 통해 상기 가시광 통신 수행 가능 영역의 지리적 좌표를 수신하는 단계; 및
상기 수신된 영상 및 지리적 좌표에 기초하여 상기 차량의 위치 정보를 출력하는 단계를 포함하여 이루어지는 것을 특징으로 하는 방법.
In the method for controlling to output the location information of the vehicle to the terminal,
Receiving an external image through a camera module;
Confirming whether a visible light communication region exists in the received image;
Activating a visible light communication module when a visible light communication capable region exists as a result of the checking;
Receiving geographic coordinates of the visible light communication enabled area through the activated visible light communication module; And
And outputting location information of the vehicle based on the received image and geographical coordinates.
단말 장치에 있어서,
출력부;
영상을 촬영하기 위한 카메라 모듈;
외부와 가시광 통신을 하기 위한 가시광 통신 모듈; 및
상기 출력부, 카메라 모듈 및 상기 통신부와 기능적으로 연결되는 제어부를 포함하되,
상기 제어부는,
상기 카메라 모듈로부터 촬영되는 영상에서 제 1 정보를 검출하고, 상기 영상에서 가시광 통신이 수행되는 영역이 있는 경우, 가시광 통신 모듈을 활성화하도록 제어하고,
제 2 정보를 수신하도록 상기 가시광 통신 모듈을 제어하고,
상기 제 1 정보와 상기 제 2 정보에 기초하여 결정한 주행 안내 정보를 상기 출력부를 통해 출력하도록 제어하며,
상기 제 1 정보는 상기 차량 주변의 다른 차량 또는 신호등의 존재 여부를 나타내는 정보이고,
상기 제 2 정보는 차량 주변의 다른 차량 또는 신호등의 상태 변경을 나타내는 정보인 것을 특징으로 하는 단말.
In the terminal device,
An output unit;
A camera module for capturing an image;
Visible light communication module for communicating visible light with the outside; And
It includes a control unit that is functionally connected to the output unit, the camera module and the communication unit,
The control unit,
Detecting first information from an image captured by the camera module, and if there is an area where visible light communication is performed in the image, controlling to activate the visible light communication module,
Control the visible light communication module to receive second information,
Controlling to output the driving guide information determined based on the first information and the second information through the output unit,
The first information is information indicating the presence of other vehicles or traffic lights around the vehicle,
And the second information is information indicating a change of state of another vehicle or a traffic light around the vehicle.
KR1020110146434A 2011-12-29 2011-12-29 Apparatus for driving guidance and method using the same KR20130077623A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020110146434A KR20130077623A (en) 2011-12-29 2011-12-29 Apparatus for driving guidance and method using the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020110146434A KR20130077623A (en) 2011-12-29 2011-12-29 Apparatus for driving guidance and method using the same

Publications (1)

Publication Number Publication Date
KR20130077623A true KR20130077623A (en) 2013-07-09

Family

ID=48990828

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020110146434A KR20130077623A (en) 2011-12-29 2011-12-29 Apparatus for driving guidance and method using the same

Country Status (1)

Country Link
KR (1) KR20130077623A (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160056128A (en) * 2014-11-11 2016-05-19 현대모비스 주식회사 Driver Alarm System and Method
KR101671945B1 (en) * 2016-06-20 2016-11-03 오영동 Method of assist of movement for vehicle

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160056128A (en) * 2014-11-11 2016-05-19 현대모비스 주식회사 Driver Alarm System and Method
KR101671945B1 (en) * 2016-06-20 2016-11-03 오영동 Method of assist of movement for vehicle

Similar Documents

Publication Publication Date Title
US10115312B2 (en) Transparent display apparatus for displaying information of danger element, and method thereof
US10217361B2 (en) Apparatus and method for sensing and notifying pedestrian
US11205348B2 (en) Drive assist device
JP6461318B2 (en) Apparatus, method, and computer program for controlling indicating that road user has been recognized
KR102025544B1 (en) Wearable video device and video system having the same
JP7241778B2 (en) CONTROL METHOD, CONTROL DEVICE, AND STORAGE MEDIUM OF AUTOMATIC GUIDED VEHICLE
CN110979318B (en) Lane information acquisition method and device, automatic driving vehicle and storage medium
KR101375868B1 (en) Wearable Display Deice Having Sensing Function
US20180245923A1 (en) Electronic machine equipment
KR101932200B1 (en) Apparatus for presenting auxiliary pedestrian sign using image recognition technique, method thereof and computer recordable medium storing program to perform the method
CN105654778A (en) Electronic apparatus and control method thereof
TWI641859B (en) Mobile electronic apparatus, control method of mobile electronic apparatus, and control program of mobile electronic apparatus
KR20130077623A (en) Apparatus for driving guidance and method using the same
KR20170037695A (en) System and method for preventing a vehicle accitdent using traffic lights
US11724701B2 (en) Terminal device, personal mobility, method for controlling the personal mobility
KR101224090B1 (en) Apparatus and method for detecting nearing car
WO2017204332A1 (en) Portable electronic device, control system, control method, and control program
US11328154B2 (en) Systems and methods of increasing pedestrian awareness during mobile device usage
JP5604011B2 (en) Vehicle periphery monitoring device
KR20220046553A (en) Autonomous Vehicle Interaction System
CN106781584B (en) Traffic light transformation prompting method
CN112954265A (en) Early warning method, device, electronic equipment and medium
KR20180101058A (en) Electronic apparatus and controlling method thereof
KR20210005818A (en) Electronic apparatus and control method thereof
KR20210004917A (en) Electronic apparatus and control method thereof

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application