KR20180122159A - Around View Monitoring System In a Vehicle And Method Thereof - Google Patents
Around View Monitoring System In a Vehicle And Method Thereof Download PDFInfo
- Publication number
- KR20180122159A KR20180122159A KR1020170056292A KR20170056292A KR20180122159A KR 20180122159 A KR20180122159 A KR 20180122159A KR 1020170056292 A KR1020170056292 A KR 1020170056292A KR 20170056292 A KR20170056292 A KR 20170056292A KR 20180122159 A KR20180122159 A KR 20180122159A
- Authority
- KR
- South Korea
- Prior art keywords
- vehicle
- image
- top view
- communication
- roi
- Prior art date
Links
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
- B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R21/00—Arrangements or fittings on vehicles for protecting or preventing injuries to occupants or pedestrians in case of accidents or other traffic risks
- B60R21/01—Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents
- B60R21/013—Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents including means for detecting collisions, impending collisions or roll-over
- B60R21/0134—Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents including means for detecting collisions, impending collisions or roll-over responsive to imminent contact with an obstacle, e.g. using radar systems
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
- B60W40/02—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W2050/0062—Adapting control system settings
- B60W2050/0063—Manual parameter input, manual setting means, manual initialising or calibrating means
- B60W2050/0064—Manual parameter input, manual setting means, manual initialising or calibrating means using a remote, e.g. cordless, transmitter or receiver unit, e.g. remote keypad or mobile phone
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
- B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
- B60W2050/143—Alarm means
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
- B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
- B60W2050/146—Display means
-
- B60W2550/10—
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2552/00—Input parameters relating to infrastructure
- B60W2552/50—Barriers
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2756/00—Output or target parameters relating to data
- B60W2756/10—Involving external transmission of data to or from the vehicle
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60Y—INDEXING SCHEME RELATING TO ASPECTS CROSS-CUTTING VEHICLE TECHNOLOGY
- B60Y2400/00—Special features of vehicle units
- B60Y2400/90—Driver alarms
Landscapes
- Engineering & Computer Science (AREA)
- Automation & Control Theory (AREA)
- Mechanical Engineering (AREA)
- Transportation (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- Mathematical Physics (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Traffic Control Systems (AREA)
- Closed-Circuit Television Systems (AREA)
Abstract
Description
본 발명은 차량의 어라운드 뷰 모니터링 시스템 및 그 제어 방법에 관한 것으로 보다 상세하게는 차량에 탑재된 복수의 카메라를 이용하여 획득되는 촬영 영상을 기초로 무선 통신으로 단말기에 표시하는 어라운드 뷰 모니터링 시스템 및 그 제어 방법에 관한 것이다. BACKGROUND OF THE
종래에는 차량의 주변 영상을 디스플레이하는 시스템이 차량에 설치되어있지 않아, 운전자는 단지 자신의 육안을 통해 차량 주변을 확인하거나, 사이드 미러를 통해 차량 주변을 확인할 수 있다.Conventionally, a system for displaying a peripheral image of a vehicle is not installed in the vehicle, so that the driver can confirm the vicinity of the vehicle through his or her eyes only, or confirm the vicinity of the vehicle through the side mirror.
하지만, 차량 운전 시 사이드 미러만으로 주변 장애물을 확인하는 경우 사이드 미러로 확인하지 못하는 사각 지대가 발생하고, 이러한 사각 지대에 존재하는 장애물을 확인하기 위하여 운전자가 차량의 주변을 돌아보면서 육안으로 장애물이 존재하는지 여부를 확인해야만 접촉 사고와 같은 교통 안전 사고 및 인명 사고의 발생을 방지할 수 있다.However, in the case of checking the surrounding obstacle by only the side mirror when driving the vehicle, a blind spot which can not be confirmed by the side mirror occurs, and in order to check the obstacles existing in the blind spot, the driver looks around the vehicle, It is possible to prevent the occurrence of traffic safety accidents such as contact accidents and human accidents.
따라서, 최근에는 차량의 전방, 후방, 좌우 방향에 각각 설치된 카메라를 통하여 주변 환경을 촬영하고, 촬영된 영상을 조합하여 차량에 구비된 디스플레이 장치를 통해 차량의 주변 영상을 디스플레이하는 장치가 개발되고 있다.Accordingly, recently, an apparatus has been developed for shooting a surrounding environment through a camera installed in each of front, rear, and left and right directions of a vehicle, and displaying a peripheral image of the vehicle through a display device provided in the vehicle by combining the captured images .
특히, 현재 차량의 주변 영역의 주차 공간을 촬영하여 운전자가 주차 시 눈으로 확인하기 어려운 공간을 촬영하여 운전자에게 보여주는 어라운드 뷰 모니터링 시스템(AVM: Around View Monitor)이 도입되었다. 이러한, 어라운드 뷰 모니터링 시스템은 또한 현재 차량의 위치에서 주차 공간을 파악하여 현재 차량이 주차 공간에 위치하기 위한 주차 궤적을 보여줄 수 있다. In particular, an Around View Monitor (AVM) is introduced, which photographs the parking space in the surrounding area of the current vehicle and shows the driver a picture of the space that the driver can not visually check at the time of parking. The surround view monitoring system can also display the parking trajectory for the current vehicle to be located in the parking space by grasping the parking space at the current vehicle position.
본 발명의 실시 예는 차량 주변 영상을 촬영하여 탑뷰 영상을 생성하고, 이를 단말기에 표시함에 따라 운전자가 실시간으로 주변 상황을 확인할 수 있도록 한다. In the embodiment of the present invention, a top view image is generated by photographing a peripheral image of a vehicle, and the terminal displays the top view image so that the driver can check the surrounding situation in real time.
또한, 본 발명의 실시 예는 차량 주변 영상 정보를 운전자에게 표시하여 줌에 따라 주변 차량 및 장애물과의 접촉 사고를 미연에 방지하고자 한다. In addition, the embodiment of the present invention intends to prevent a contact accident between a nearby vehicle and an obstacle in accordance with the display of the surrounding image information to the driver.
본 발명의 일 실시예에 따르면, 차량의 전방, 후방 및 좌우 주변 영상을 획득하는 영상 획득부; 획득한 차량 주변 영상을 기초로 탑 뷰 영상을 생성하고, 생성된 탑 뷰 영상에 상기 차량의 외면으로부터 미리 설정된 간격으로 설정된 관심 영역(Region Of Interest: ROI)를 표시하고, 상기 관심 영역에 장애물이 존재하는지 여부를 판단하는 전자 제어 유닛; 및 상기 탑 뷰 및 획득한 영상 정보를 단말기에 무선 통신으로 송신하는 통신부;를 포함하는 차량의 어라운드 뷰 모니터링 시스템이 제공될 수 있다. According to an embodiment of the present invention, there is provided an image processing apparatus including an image acquiring unit acquiring a front, rear, and left and right peripheral images of a vehicle; The method includes generating a top view image based on the acquired peripheral image of the vehicle, displaying a region of interest (ROI) set at a preset interval from the outer surface of the vehicle in the generated top view image, An electronic control unit for judging whether or not it exists; And a communication unit for transmitting the top view and the acquired image information to the terminal through wireless communication.
또한, 상기 전자 제어 유닛은 상기 관심 영역 내 장애물이 감지되는 경우 운전자에게 경고할 수 있다.In addition, the electronic control unit may warn the driver when an obstacle in the area of interest is detected.
또한, 상기 장애물이 주차 라인인 경우에 있어서, 상기 전자 제어 유닛은 상기 주차 라인이 상기 ROI 내에 포함하는 경우 상기 차량의 궤적을 상기 탑 뷰에 추가적으로 표시할 수 있다.Further, in the case where the obstacle is a parking line, the electronic control unit may additionally display the trajectory of the vehicle in the top view when the parking line is included in the ROI.
또한, 상기 통신부는 상기 단말기에 생성한 상기 탑 뷰 및 상기 획득한 주변 영상을 동시에 송신가능 할 수 있다. In addition, the communication unit can simultaneously transmit the top view generated by the terminal and the obtained peripheral image.
본 발명의 다른 일 실시예에 따르면, 차량의 전방, 후방 및 좌우 주변 영상을 획득하는 단계; 획득한 차량 주변 영상을 기초로 탑 뷰를 생성하는 단계; 및 생성된 탑 뷰 영상에 상기 차량의 외면으로부터 미리 설정된 가격으로 설정된 관심 영역(ROI:Region of Interest)를 표시하는 단계; 상기 관심 영역에 장애물이 존재하는지 여부를 판단하는 단계; 및 상기 탑 뷰 및 획득한 주변 영상 정보를 단말기에 무선 통신으로 송신하는 단계;를 포함하는 차량의 어라운드 뷰 모니터링 제어 방법이 제공될 수 있다.According to another embodiment of the present invention, there is provided a method of driving a vehicle, comprising: obtaining a front, rear, and left and right surroundings images of the vehicle; Generating a top view based on the acquired vehicle surroundings image; And displaying a region of interest (ROI) set at a preset price from an outer surface of the vehicle on the generated top view image; Determining whether an obstacle exists in the ROI; And transmitting the top view and the acquired peripheral image information to the terminal by wireless communication.
또한, 상기 관심 영역에 장애물이 존재하는지 여부를 판단하는 단계;는 상기 관심 영역에 장애물을 감지하는 단계; 및 상기 장애물이 감지되는 경우 운전자에게 경고하는 단계를 더 포함할 수 있다.The method may further include determining whether an obstacle exists in the ROI, detecting an obstacle in the ROI, And warning the driver when the obstacle is detected.
또한, 상기 장애물이 주차라인인 경우에 있어서, 상기 주차 라인이 상기 ROI 내에 포함되면 상기 차량의 궤적을 상기 탑 뷰에 추가적으로 표시하는 단계;를 더 포함할 수 있다. In addition, in the case where the obstacle is a parking line, the step of additionally displaying the trajectory of the vehicle on the top view, if the parking line is included in the ROI, may be further included.
또한, 상기 탑 뷰 및 획득한 주변 영상 정보를 단말기에 무선 통신으로 송신하는 단계;는 상기 단말기에 생성한 상기 탑 뷰 및 상기 획득한 주변 영상을 동시에 표시하도록 송신할 수 있다. In addition, transmitting the top view and the acquired peripheral image information to the terminal through wireless communication may transmit the top view generated by the terminal and the acquired peripheral image to be simultaneously displayed.
본 발명의 실시 예는 차량 주변 영상을 촬영하여 탑뷰 영상을 생성하고, 이를 단말기에 표시함에 따라 운전자가 실시간으로 주변 상황을 확인할 수 있도록 한다. In the embodiment of the present invention, a top view image is generated by photographing a peripheral image of a vehicle, and the terminal displays the top view image so that the driver can check the surrounding situation in real time.
또한, 본 발명의 실시 예는 차량 주변 영상 정보를 운전자에게 표시하여 줌에 따라 주변 차량 및 장애물과의 접촉 사고를 미연에 방지하고자 한다. In addition, the embodiment of the present invention intends to prevent a contact accident between a nearby vehicle and an obstacle in accordance with the display of the surrounding image information to the driver.
도 1은 본 발명의 실시 예에 따른 어라운드 뷰 모니터링 시스템을 포함한 차량에 포함된 각종 전자 장치를 도시한 블록도이다.
도 2는 본 발명의 일 실시 예에 따른 어라운드 뷰 모니터링 시스템에 포함된 통신부의 내부 블록도이다.
도 3은 본 발명의 일 실시 예에 따른 어라운드 뷰 모니터링 시스템의 블록도이다.
도 4는 본 발명의 일 실시 예에 따른 차량에 설치된 카메라에 의하여 주변 촬영을 기초로 획득한 탑뷰를 나타낸 개략도이다.
도 5는 본 발명의 일 실시 예에 따른 차량에 설치된 카메라에 의하여 획득한영상을 기초로 확보한 탑뷰를 나타낸 개략도이다.
도 6은 본 발명의 일 실시 예에 따른 어라운드 뷰 모니터링 시스템과 단말기의 송수신을 설명하기 위한 순서도이다. 1 is a block diagram illustrating various electronic devices included in a vehicle including an ambient view monitoring system according to an embodiment of the present invention.
2 is an internal block diagram of a communication unit included in the surrounding view monitoring system according to an embodiment of the present invention.
3 is a block diagram of an overview view monitoring system in accordance with an embodiment of the present invention.
4 is a schematic view showing a top view acquired based on a surrounding photographing by a camera installed in a vehicle according to an embodiment of the present invention.
5 is a schematic view showing a top view obtained based on an image acquired by a camera installed in a vehicle according to an embodiment of the present invention.
FIG. 6 is a flowchart for explaining transmission and reception of an environment monitoring system and a terminal according to an embodiment of the present invention. Referring to FIG.
이하에서는 본 발명의 실시 예를 첨부 도면을 참조하여 상세히 설명한다. 이하의 실시 예는 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 본 발명의 사상을 충분히 전달하기 위해 제시하는 것이다. 본 발명은 여기서 제시한 실시 예만으로 한정되지 않고 다른 형태로 구체화될 수도 있다. 도면은 본 발명을 명확히 하기 위해 설명과 관계없는 부분의 도시를 생략하고, 이해를 돕기 위해 구성요소의 크기를 다소 과장하여 표현할 수 있다.Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings. The following embodiments are provided to fully convey the spirit of the present invention to a person having ordinary skill in the art to which the present invention belongs. The present invention is not limited to the embodiments shown herein but may be embodied in other forms. For the sake of clarity, the drawings are not drawn to scale, and the size of the elements may be slightly exaggerated to facilitate understanding.
도 1은 본 발명의 실시 예에 따른 어라운드 뷰 모니터링 시스템을 포함한 차량에 포함된 각종 전자 장치를 도시한 블록도이고, 도 2는 본 발명의 일 실시예에 따른 어라운드 뷰 모니터링 시스템에 포함된 통신부의 내부 블록도이고, 도 3은 본 발명의 일 실시 예에 따른 어라운드 뷰 모니터링 시스템의 블록도이다.FIG. 1 is a block diagram illustrating various electronic devices included in a vehicle including an environment monitoring system according to an exemplary embodiment of the present invention. FIG. 2 is a block diagram of a communication unit included in the surrounding view monitoring system according to an exemplary embodiment of the present invention. Figure 3 is a block diagram of an overview view monitoring system in accordance with an embodiment of the present invention.
도 1 에 도시된 바와 같이, 차량은 도 1에 도시된 바와 같이, 다양한 전자 장치(100)를 포함할 수 있다.As shown in FIG. 1, a vehicle may include various
구체적으로, 차량은 다양한 전자 장치(100)를 포함할 수 있다. 즉, 도 1에 도시된 바와 같이 차량은 AVN (Audio/Video/Navigation) 장치(110), 입출력 제어 시스템(120), 엔진 제어 시스템(Engine Management System, EMS) (130), 변속 제어 시스템(Transmission Management System: TMS) (140), 제동 제어 장치(brake-by-wire) (150), 조향 제어 장치(steering-by-wire) (160), 어라운드 뷰 모니터링 시스템(170), 카메라 모듈(180), 장애물 감지 모듈(190) 및 무선 통신 장치(200) 등을 포함할 수 있다. In particular, the vehicle may include various
다만, 도 1에 도시된 전자 장치(100)는 차량에 포함된 전자 장치의 일부에 불과하며 차량에는 더욱 다양한 전자 장치가 마련될 수 있다.However, the
또한, 차량 포함된 각종 전자 장치(100)는 차량 통신 네트워크(NT)를 통하여 서로 통신할 수 있다. 차량 통신 네트워크(NT)는 최대 24.5Mbps(Mega-bits per second)의 통신 속도를 갖는 모스트(MOST, Media Oriented Systems Transport), 최대 10Mbpas의 통신 속도를 갖는 플렉스레이(FlexRay), 125kbps(kilo-bits per second) 내지 1Mbps의 통신 속도를 갖는 캔(CAN, Controller Area Network), 20kbps의 통신 속도를 갖는 린(LIN, Local Interconnect Network) 등의 통신 규약을 채용할 수 있다. 이와 같은 차량 통신 네트워크(NT)는 모스트, 플레스레이, 캔, 린 등 단일의 통신 규약을 채용할 수 있을 뿐만 아니라, 복수의 통신 규약을 채용할 수도 있다.In addition, the various
먼저, AVN 장치(110)는 운전자의 제어 명령에 따라 음악 또는 영상을 출력하는 장치이다. 구체적으로, AVN 장치(110)는 운전자의 제어 명령에 따라 음악 또는 동영상을 재생하거나 목적지까지의 경로를 안내할 수 있다.First, the AVN
이와 같은 AVN 장치(110)는 운전자에게 영상을 표시하는 AVN 디스플레이(111), 운전자의 제어 명령을 수신하는 AVN 버튼 모듈(113), 차량의 지리적 위치 정보를 획득하는 GPS (Global Positioning System) 모듈(115)을 포함할 수 있다. 여기서, AVN 디스플레이(111)는 운전자의 터치 입력을 수신할 수 있는 터치 감지 디스플레이(예를 들어, 터치 스크린)을 채용할 수 있다. 또한, AVN 디스플레이(111)는 액정 디스플레이(Liquid Crystal Display: LCD) 패널 또는 유기 발광 다이오드(Organic Light Emitting Diode: OLED) 패널 등을 채용할 수 있다.The AVN
또한, GPS 모듈(115)은 GPS(Global Positioning System) 위성으로부터 차량의 위치를 산출하기 위한 정보를 수신하고, GPS 위성으로부터 수신된 정보를 기초로 차량의 위치를 판단할 수 있다.In addition, the
입출력 제어 시스템(120)은 버튼을 통한 운전자의 제어 명령을 수신하고, 운전자의 제어 명령에 대응하는 정보를 표시한다. 입출력 제어 시스템(120)는 대시 보드에 마련되어 영상을 표시하는 클러스터 디스플레이(121), 영상을 윈드 스크린에 투영하는 헤드업 디스플레이(122) 및 스티어링 휠에 설치되는 휠 버튼 모듈(123)을 포함할 수 있다.The input /
클러스터 디스플레이(121)는 에 마련되어 영상을 표시한다. 특히, 클러스터 디스플레이(121)는 윈드 스크린에 인접하여 마련됨으로써 운전자의 시선이 차량의 전방으로부터 크게 벗어나지 않은 상태에서 운전자(U)가 차량의 동작 정보, 도로의 정보 또는 주행 경로 등을 획득할 수 있도록 한다. 이와 같은 클러스터 디스플레이(121)는 액정 디스플레이(Liquid Crystal Display: LCD) 패널 또는 유기 발광 다이오드(Organic Light Emitting Diode: OLED) 패널 등을 채용할 수 있다.The
헤드업 디스플레이(122)는 영상을 윈드 스크린에 투영시킬 수 있다. 헤드-업 디스플레이(122)에 의하여 윈드 스크린에 투영되는 영상은 차량의 동작 정보, 도로의 정보 또는 주행 경로 등을 포함할 수 있다.The head-up
엔진 제어 시스템(130)는 연료분사 제어, 연비 피드백 제어, 희박 연소 제어, 점화 시기 제어 및 공회전수 제어 등을 수행한다. 이러한 엔진 제어 시스템(140)은 단일의 장치일 수 있을 뿐만 아니라, 통신을 통하여 연결된 복수의 장치들일 수도 있다.The
변속 제어 시스템(140)는 변속점 제어, 댐퍼 클러치 제어, 마찰 클러치 온/오프 시의 압력 제어 및 변속 중 엔진 토크 제어 등을 수행한다. 이러한 변속 제어 시스템(140)은 단일의 장치일 수 있을 뿐만 아니라, 통신을 통하여 연결된 복수의 장치들일 수도 있다.The
제동 제어 장치(150)는 차량의 제동을 제어할 수 있으며, 대표적으로 안티락 브레이크 시스템(Anti-lock Brake System, ABS) 등을 포함할 수 있다. The
조향 제어 장치(160)는 저속 주행 또는 주차 시에는 조향력을 감소시키고 고속 주행 시에는 조향력을 증가시킴으로써 운전자의 조향 조작을 보조한다.The
어라운드 뷰 모니터링 시스템(170)은 본 후술하는 카메라 모듈(180)로부터 촬영된 영상을 수신 받아 그에 따른 차량 주변 모니터링이 가능하다.The surrounding
카메라 모듈(180)은 차량 주변 영상을 촬영한다. The
이러한 카메라 모듈(180)은 도 4 에 도시된 차량에 있어서 포함된 전방 카메라(a), 좌측 카메라(b), 후방 카메라(c), 및 우측 카메라(d)에 의하여 차량 주변의 영상을 확보하고, 확보한 영상을 차량 통신 네트워크(NT)를 통하여 어라운드 뷰 모니터링 시스템(170)에 송신할 수 있다.The
장애물 감지 모듈(190)은 차량 주변의 장애물을 감지하는 것으로, 도시되지는 않았으나 레이더 센서 또는 레이더 센서를 포함하여 장애물을 감지한다.The
따라서 카메라 모듈(180)과 장애물 감지 모듈(190)은 운전 보조 시스템의 일장치로서 차량의 주행을 보조하며, 전방 충돌 회피 기능, 차선 이탈 경고 기능, 사각 지대 감지 기능, 후방 감시 기능 등을 수행하기 위한 감지 정보를 운전 보조 시스템으로 전송한다. Therefore, the
무선 통신 장치(200)는 외부 차량, 외부 단말기 또는 사용자 단말기 등과 통신할 수 있다. 무선 통신 장치(200)의 구성 및 동작에 대해서는 도 2에서 자세하게 설명한다. The
도 2는 아래에서 자세하게 설명한다.2 is described in detail below.
도 2에 도시된 무선 통신 장치(200)는 차량 내부의 차량 통신 네트워크(NT)를 통하여 차량 내부의 각종 전자 장치(100)와 통신하는 내부 통신부(220), 외부 차량, 단말기(1) 또는 무선 통신 기지국과 통신하는 무선 통신부(300), 내부 통신부(220)와 무선 통신부(300)의 동작을 제어하는 통신 제어부(210)를 포함할 수 있다.The
내부 통신부(220)는 차량 통신 네트워크(NT)와 연결되는 내부 통신 인터페이스(225), 신호를 변조/복조하는 내부 신호 변환 모듈(223), 차량 통신 네트워크(NT)을 통한 통신을 제어하는 내부 통신 제어 모듈(221)을 포함할 수 있다.The
내부 통신 인터페이스(225)는 차량 통신 네트워크(NT)를 통하여 차량 내부의 각종 전자 장치(100)로부터 송신된 통신 신호를 수신하고, 차량 통신 네트워크(NT)를 통하여 차량 내부의 각종 전자 장치(100)로 통신 신호를 송신한다. 여기서, 통신 신호는 차량 통신 네트워크(NT)를 통하여 송수신되는 신호를 의미한다.The
이와 같은 내부 통신 인터페이스(225)는 차량 통신 네트워크(NT)와 무선 통신 장치(200)를 연결하는 통신 포트(communication port) 및 신호를 송/수신하는 송수신기(transceiver)를 포함할 수 있다.The
내부 신호 변환 모듈(223)는 아래에서 설명하는 내부 통신 제어 모듈(221)의 제어에 따라 내부 통신 인터페이스(223)를 통하여 수신된 통신 신호를 제어 신호로 복조하고, 통신 제어부(210)로부터 출력된 디지털 제어 신호를 내부 통신 인터페이스(223)를 통하여 송신하기 위한 아날로그 통신 신호로 변조한다.The internal
앞서 설명한 바와 같이 통신 신호는 차량 통신 네트워크(NT)를 통하여 송수신되는 신호를 의미하고, 제어 신호는 무선 통신 장치(200) 내부에서 송수신 신호를 의미한다. 차량 통신 네트워크(NT)를 통하여 송수신되는 통신 신호와 내부 통신부(220)와 통신 제어부(210) 사이에서 송수신되는 제어 신호는 서로 상이한 포맷을 갖는다.As described above, the communication signal refers to a signal transmitted / received through the vehicle communication network NT, and the control signal refers to a transmission / reception signal within the
즉, 내부 신호 변환 모듈(223)는 통신 제어부(210)가 출력한 제어 신호를 차량 네트워크(NT)의 통신 규약에 따른 통신 신호로 변조하고, 차량 네트워크(NT)의 통신 규약에 따른 통신 신호를 통신 제어부(210)가 인식할 수 있는 제어 신호로 복조한다.That is, the internal
이와 같은 내부 신호 변환 모듈(223)는 통신 신호의 변조/복조를 수행하기 위한 프로그램과 데이터를 저장하는 메모리, 메모리에 저장된 프로그램과 데이터에 따라 통신 신호의 변조/복조를 수행하는 프로세서를 포함할 수 있다.Such an internal
내부 통신 제어 모듈(221)은 내부 신호 변환 모듈(223)과 통신 인터페이스(225)의 동작을 제어한다.The internal
예를 들어, 통신 신호를 송신하는 경우, 내부 통신 제어 모듈(221)은 통신 인터페이스(225)를 통하여 통신 네트워크(NT)가 다른 전자 장치(100)에 의하여 점유되었는지를 판단하고, 통신 네트워크(NT)가 비어있으면 통신 신호를 송신하도록 내부 통신 인터페이스(225)와 내부 신호 변환 모듈(223)을 제어한다. 또한, 통신 신호를 수신하는 경우, 내부 통신 제어 모듈(221)은 통신 인터페이스(225)를 통하여 수신된 통신 신호를 복조하도록 내부 통신 인터페이스(225)와 신호 변화 모듈(223)을 제어한다.For example, when transmitting a communication signal, the internal
즉, 내부 통신 제어 모듈(221)은 본 발명에 따른 어라운드 뷰 모니터링 시스템(170)에 의하여 통신 네트워크(NT)가 점유되었는지를 판단할 수 있다. That is, the internal
이와 같은 내부 통신 제어 모듈(221)은 내부 신호 변환 모듈(223)과 통신 인터페이스(225)을 제어하기 위한 프로그램과 데이터를 저장하는 메모리, 메모리에 저장된 프로그램과 데이터에 따라 제어 신호를 생성하는 프로세서를 포함할 수 있다.The internal
또한, 실시 형태에 따라 내부 통신 제어 모듈(221)은 생략될 수 있다. 예를 들어, 내부 통신 제어 모듈(221)은 아래에서 설명하는 통신 제어부(210)에 통합될 수 있으며, 이러한 경우 통신 제어부(210)가 직접 내부 통신부(220)의 신호 송신/신호 수신을 제어할 수 있다.In addition, the internal
무선 통신부(300)는 무선 신호를 통하여 단말기(1)와 무선 신호를 주고 받을 수 있다.The
무선 통신부(300)는 다양한 통신 규약을 통하여 신호를 주고 받을 수 있다.The
예를 들어, 무선 통신부(300)는 시간 분할 다중 접속(Time Division Multiple Access: TDMA)과 부호 분할 다중 접속(Code Division Multiple Access: CDMA) 등의 제2 세대(2G) 통신 방식, 광대역 부호 분할 다중 접속(Wide Code Division Multiple Access: WCDMA)과 CDMA2000(Code Division Multiple Access 2000)과 와이브로(Wireless Broadband: Wibro)와 와이맥스(World Interoperability for Microwave Access: WiMAX) 등의 3세대(3G) 통신 방식, 엘티이(Long Term Evolution: LTE)와 와이브로 에볼류션(Wireless Broadband Evolution) 등 4세대(4G) 통신 방식을 채용할 수 있다. 또한, 무선 통신부(300)는 5세대(5G) 통신 방식을 채용할 수도 있다.For example, the
예를 들어, 무선 통신부(300)에서 5세대(5G) 통신 방식을 채용한 경우 차량은 주행 중에도 각종 디바이스로부터 센서정보를 전달 받아, 실시간 처리를 통해 본 발명에 따른 어라운드 뷰 모니터링 시스템(170)을 제공할 수 있을 뿐만 아니라, 각종 원격제어를 제공할 수 있다. For example, when the 5th generation (5G) communication system is adopted in the
특히, 디바이스간 통신은 디바이스 간에 이루어지는 통신으로써, 디바이스가 센서를 통해 감지한 데이터뿐만 아니라, 디바이스 내에 저장되어 있는 각종 데이터가 포함된 무선 신호를 송수신하는 통신을 의미한다. 디바이스간 통신방식에 의할 경우, 기지국을 거쳐 무선 신호를 주고 받을 필요가 없고, 디바이스 간에 무선 신호 전송이 이루어지므로, 불필요한 에너지를 절감할 수 있다. Particularly, inter-device communication refers to communication between devices, and refers to communication in which a wireless signal including various data stored in a device is transmitted and received as well as data sensed by a device through a sensor. According to the inter-device communication method, it is not necessary to exchange wireless signals via the base station, and radio signals are transmitted between the devices, so unnecessary energy can be saved.
이 때, 차량과 단말기(1) 사이에 무선 통신을 수행하기 위하여 차량 내 차량과 단말기(1)의 네트워크를 중계해주는 라우터(Router)와 같은 기타 통신장치가 내장되어야 한다.At this time, in order to perform wireless communication between the vehicle and the
구체적으로, 무선 통신부(300)는 신호를 변조/복조하는 무선 신호 변환 모듈(320), 무선 통신을 위한 빔 패턴(beam pattern)을 형성하고 빔 패턴의 전파를 통하여 무선 신호를 송/수신하는 빔 포밍 모듈(330) 및 무선 통신을 제어하는 무선 통신 제어 모듈(310)을 포함할 수 있다.Specifically, the
무선 신호 변환 모듈(320)은 아래에서 설명하는 무선 통신 제어 모듈(310)의 제어에 따라 빔 포밍 모듈(330)을 통하여 수신된 무선 통신 신호를 제어 신호로 복조하고, 통신 제어부(210)로부터 출력된 제어 신호를 빔 포밍 모듈(330)를 통하여 송신하기 위한 무선 통신 신호로 변조한다.The wireless
무선 통신을 통하여 송수신되는 무선 통신 신호는 무선 통신의 신뢰성을 확보하기 위하여 제어 신호와 상이한 포맷을 갖는다. 특히, 무선 통신 신호는 아날로그 신호인데 비하여 제어 신호는 디지털 신호인 점에서 큰 차이가 있다.A wireless communication signal transmitted / received through wireless communication has a format different from a control signal in order to ensure reliability of wireless communication. Particularly, the wireless communication signal is an analog signal, whereas the control signal is a digital signal.
또한, 무선 통신 신호는 신호를 전송하기 위하여 고주파수의 반송파에 신호를 실어 보낸다. 이를 위하여 무선 신호 변환 모듈(320)는 통신 제어부(210)로부터 출력된 제어 신호에 따라 반송파를 변조함으로써 통신 신호를 생성하고, 어레이 안테나(340)를 통하여 수신된 통신 신호를 복조함으로써 제어 신호를 복원할 수 있다.In addition, a wireless communication signal carries a signal on a carrier wave of a high frequency to transmit a signal. For this, the wireless
이와 같은 무선 신호 변환 모듈(320)는 통신 신호의 변조/복조를 수행하기 위한 프로그램과 데이터를 저장하는 메모리, 메모리에 저장된 프로그램과 데이터에 따라 통신 신호의 변조/복조를 수행하는 프로세서를 포함할 수 있다.The wireless
빔 포밍 모듈(330)은 아래에서 설명하는 무선 통신 제어 모듈(310)의 제어에 따라 무선 통신을 위한 빔 패턴을 형성하여 무선 신호를 송신하거나 수신할 수 있다.The
이와 같은 빔 포밍 모듈(330)는 위상 배열 안테나를 이용하여 빔 패턴을 형성할 수 있다.The
여기서 빔 패턴은 무선 신호를 특정한 방향으로 집중하는 경우, 무선 신호의 세기에 의하여 나타나는 패턴이다. 다시 말해, 빔 패턴은 무선 신호의 전력이 집중되는 패턴을 의미한다. Here, the beam pattern is a pattern that appears due to the intensity of the radio signal when the radio signal is concentrated in a specific direction. In other words, the beam pattern means a pattern in which the power of the radio signal is concentrated.
무선 통신 제어 모듈(310)은 무선 신호 변환 모듈(320)과 빔 포밍 모듈(330)의 동작을 제어한다.The wireless communication control module 310 controls operations of the wireless
예를 들어, 본 발명에 따른 어라운드 뷰 모니터링 시스템(170)을 동작시키기위하여 단말기(1)와의 통신을 확립하는(establish) 경우, 무선 통신 제어 모듈(310)은 최적의 무선 통신 채널을 평가하기 위하여 무선 신호 변환 모듈(320)과 빔 포밍 모듈(330)을 제어할 수 있다. For example, when establishing communication with the
또한, 단말기(1)에 통신 신호를 송신하는 경우, 무선 통신 제어 모듈(310)은 통신 신호를 송신하기 위한 빔 패턴(BP)을 형성하기 위하여 빔 포밍 모듈(330)을 제어할 수 있다. In addition, when transmitting a communication signal to the
이와 같은 무선 통신 제어 모듈(310)은 무선 신호 변환 모듈(320)과 빔 포밍 모듈(330)을 제어하기 위한 프로그램과 데이터를 저장하는 메모리, 메모리에 저장된 프로그램과 데이터에 따라 제어 신호를 생성하는 프로세서를 포함할 수 있다.The wireless communication control module 310 includes a memory for storing programs and data for controlling the wireless
실시 형태에 따라 무선 신호 변환 모듈(320)과 무선 통신 제어 모듈(310)은 별개의 메모리와 프로세서로 구현되거나, 단일의 메모리와 프로세서로 구현될 수 있다.According to the embodiment, the wireless
또한, 실시 형태에 따라 무선 통신 제어 모듈(310)은 생략될 수 있다. 예를 들어, 무선 통신 제어 모듈(310)은 아래에서 설명하는 통신 제어부(210)에 통합될 수 있으며, 이러한 경우 통신 제어부(210)가 직접 무선 통신부(300)의 신호 송신/신호 수신을 제어할 수 있다.In addition, the wireless communication control module 310 may be omitted according to the embodiment. For example, the wireless communication control module 310 may be integrated into the
통신 제어부(210)는 내부 통신부(220) 및 무선 통신부(300)의 동작을 제어한다.The
구체적으로, 내부 통신부(220)를 통하여 신호가 수신되면 수신된 신호를 해석하고 해석 결과에 따라 내부 통신부(220) 및 무선 통신부(300)의 동작을 제어한다.Specifically, when a signal is received through the
예를 들어, 차량에 포함된 다른 전자 장치(100), 예를 들어, 카메라 모듈(180) 및 장애물 감지 모듈(190)로부터 내부 통신부(220)를 통하여 데이터 전송 요청이 수신되면, 통신 제어부(210)는 해당 데이터를 외부 차량, 외부 단말기 또는 외부 기지국으로 전송하도록 무선 통신부(300)를 제어할 수 있다.For example, when a data transmission request is received from another
이와 같은 통신 제어부(210)는 내부 통신부(220)와 무선 통신부(300)를 제어하기 위한 프로그램 및 데이터를 저장하는 메모리, 메모리에 저장된 프로그램과 데이터에 따라 제어 신호를 생성하는 프로세서를 포함할 수 있다. The
이상에서는 무선 통신 장치(200)를 비롯하여 차량에 구비된 각종 전자 장치(100)의 구성에 대하여 설명하였다.The configuration of various
이하에서는 차량에 구비된 무선 통신 장치(200), 카메라 모듈(180) 및 장애물 감지 모듈(190)과 내부 통신을 통하여 정보를 송신 및 수신하여 동작하는 어라운드 뷰 모니터링 시스템(170)의 구성 블록도 및 동작에 대하여 설명한다.Hereinafter, a configuration block diagram of an averaged
구체적으로, 본 발명에 따른 어라운드 뷰 모니터링 시스템(170)은 카메라 모듈(180)에서 촬영한 영상을 획득하는 영상 획득부(171), 차량 내부의 각종 전자 장치(100) 및 외부의 단말기(1)와 통신하는 통신부(176) 및 획득한 차량 주변의 영상 정보 및 주변 정보를 기초로 차량의 어라운드 뷰 모니터링 시스템(170)을 제어하는 전자 제어 유닛(172)을 포함한다.The surrounding
먼저, 어라운드 뷰 모니터링 시스템(170)의 통신부(176)는 카메라 모듈(181)에서 촬영한 영상 정보를 영상 획득부(171)로 전달하는 내부 통신부 역할을 수행하는 CAN 통신부(177)와, 영상 획득부(171)에서 확보한 영상을 기초로 탑 뷰를 생성하여 운전자의 단말기(1)에 표시하도록 송신하는 외부 통신부 역할을 수행하는 무선 통신부(178)를 포함한다.The
구체적으로, 내부 통신 역할을 수행하는 CAN 통신부(177)는 도 2에 도시된 내부 통신부(220)와 동일한 기능을 수행하며, 외부 통신 역할을 수행하는 무선 통신부(178)는 도 2의 무선 통신부(300)와 동일한 기능을 수행할 수 있다.Specifically, the
따라서, 어라운드 뷰 모니터링 시스템(170) 내 포함된 통신부(176)는 차량의 각종 전자 장치(100)에서 획득한 정보를 CAN 통신부(177)를 통하여 확보하고, 이를 무선 통신부(178)를 통하여 탑 뷰 기타 경고 메시지를 단말기(1)에 전송하는 역할을 수행한다.Therefore, the
먼저, 영상 획득부(171)는 도 4는 전방 카메라(a), 좌측 카메라(b), 후방 카메라(c), 및 우측 카메라(d)에 의하여 주변 영상을 촬영하는 것으로, 카메라 센서를 구비하여, 차량의 외부 영상을 촬영하고 이에 대한 촬영 정보를 생성할 수 있다. 4, the
구체적으로, 카메라 센서는 대개 1 채널 이상의 카메라를 사용하는데 보통 그 이미지 센서로 CMOS(Complementary Metal Oxide Semiconductor)를 사용할 수 있다. CMOS 이미지 센서는 노출된 이미지를 전기적인 형태로 바꾸어 전송하는 반도체 소자이다. Specifically, a camera sensor usually uses a camera having more than one channel, and a CMOS (Complementary Metal Oxide Semiconductor) can be used as the image sensor. A CMOS image sensor is a semiconductor device that converts exposed images into electrical form and transmits them.
다만 이에 한정되는 것은 아니며, CCD(Change Coupled Device)이미지 센서(미도시)로 구현될 수도 있다. 이와 같이, 카메라 센서는 차량의 복수의 위치에 설치되어 차량 전방, 후방 및 측방 영상을 획득할 수 있다. However, the present invention is not limited thereto, and may be realized by a CCD (Change Coupled Device) image sensor (not shown). Thus, the camera sensor can be installed at a plurality of positions of the vehicle to obtain the front, rear, and side images of the vehicle.
따라서, 복수의 카메라 센서(a 내지 d)를 기초로 현재 차량의 주변 영역의 주차 공간을 촬영하여 운전자가 주차 시 눈으로 확인하기 어려운 공간을 촬영하여 운전자에게 보여주는 어라운드 뷰 모니터링 시스템(AVM: Around View Monitor)을 동작되도록 획득한 영상을 CAN 통신부(177)를 통하여 어라운드 뷰 모니터링 시스템(170)의 전자 제어 유닛(172)으로 송신한다.Therefore, it is possible to take a picture of a parking space in a peripheral area of the present vehicle based on the plurality of camera sensors (a to d), to take an Around View (AVM) system Monitor to the
다음으로, 전자 제어 유닛(172)은 획득한 영상을 기초로 탑 뷰(Top View)를 생성하고, 생성한 탑 뷰를 기초로 ROI(Region Of Interest)을 생성하여, ROI 에 장애물이 존재하는 지 여부를 운전자가 확인할 수 있도록 표시하는 것으로, 기능적으로 전자 제어 유닛(172)의 구성 블록도는 판단부(173), 제어부(174) 및 경고부(175)를 포함한다.Next, the
먼저, 판단부(173)는 영상 획득부(171)로부터 확보한 영상 정보를 기초로 탑 뷰를 생성한다. 구체적으로, 도 4는 본 발명의 일 실시 예에 따른 차량에 설치된 카메라에 의하여 주변 촬영을 기초로 획득한 탑뷰를 나타낸 개략도이다. First, the
이 때, 생성된 탑 에서 차량의 일정 반경 내를 ROI(관심영역)으로 설정한다.At this time, the ROI (ROI) within a certain radius of the vehicle is set in the generated tower.
구체적으로, 도 4에 도시된 바와 같이, 차량 전방으로 미리 설정된 거리, 차량 측방으로 미리 설정된 거리, 차량 후방으로 미리 설정된 거리로 형성된 직사각형 형태의 ROI가 설정될 수 있다. Specifically, as shown in Fig. 4, a rectangle-shaped ROI formed by a predetermined distance to the front of the vehicle, a preset distance to the vehicle side, and a predetermined distance to the rear of the vehicle may be set.
뿐만 아니라, 판단부(173)는 복수의 카메라 센서(a 내지 d)를 통하여 확보한 영상 속에 차량 주차 라인이 감지되는 경우, 감지된 라인을 탑뷰에 반영하여 표시하도록 할 수도 있다. 구체적으로, 도 5는 주차장의 라인을 후방 카메라(d)가 촬영한 경우에 있어서, 탑뷰에 반영하여 표시된 경우를 도시한 개략도이다.In addition, when the vehicle parking line is detected in the video secured through the plurality of camera sensors (a to d), the
뿐만 아니라, 판단부(173)는 복수의 카메라 센서(a 내지 d)가 주차장에 표시된 라인을 감지한 경우 및 장애물이 감지된 경우, 해당 라인 및 장애물을 탑뷰에 표시할 수도 있다.In addition, the
예를 들어, 도 5에 도시된 바와 같이, 판단부(173)는 영상 획득부(171)에서 획득한 영상에 기초하여 타 차량을 포함하는 탑 뷰를 생성한다.For example, as shown in FIG. 5, the
또한, 판단부(173)는 설정한 ROI 영역 내에 장애물이 감지되는지 여부를 판단한다. 즉, 판단부(173)는 주차 라인이 감지된 경우와 같이, 차량이 주차될 것으로 판단된 경우에 있어서, 통신부(176) 내 CAN 통신부(177)를 통하여 차량의 각종 전자 장치(100)의 동작 상태를 판단하여, 해당 차량의 예상 경로를 추측한다. In addition, the
따라서, 판단부(173)는 추측한 예상 경로를 운전자가 확인할 수 있도록 도 5에 도시된 바와 같이, 점선 형태로 표시할 수 있다. Accordingly, the
따라서, 제어부(174)는 판단부(173)에서 생성한 탑 뷰를 단말기(1)에 표시하도록 통신부(176)를 제어하고, 판단부(173)에서 생성한 ROI 영역을 운전자가 감지할 수 있도록 도 4 및 도 5에 도시된 바와 같이, 점선 등으로 표시하도록 한다.The
뿐만 아니라 제어부(174)는 영상 획득부(171)를 통하여 획득한 영상을 그대로 사용자의 단말기(1)에 표시하도록 제어할 수도 있다.In addition, the
따라서, 예를 들어, 제어부(174)는 CAN 통신부(177)를 통하여 수신한 차량의 동작 정보를 기초로 운전자가 전진 주행 시 전방 카메라센서(a)를 통하여 획득한 전방 영상 정보를, 운전자가 후진 주행 시 후방 카메라 센서(c)를 통하여 획득한 후방 영상 정보를 탑 뷰와 함께 표시하도록 제어할 수도 있다.Accordingly, for example, the
즉, 제어부(174)는 전자 제어 유닛(172) 내 판단부(173) 및 경고부(175)를 총괄적으로 제어하는 것으로, 영상 획득부(171)의 영상을 기초로 탑뷰를 생성하고, 생성한 탑 뷰를 통신부(176)를 통하여 단말기로 송신하도록 총괄적으로 제어할 수 있다. That is, the
다음으로, 경고부(175)는 생성된 ROI 영역 내에 장애물이 존재하는 경우, 표시된 ROI의 색깔을 달리하거나, 표시된 ROI를 깜빡이는 등 운전자가 확인할 수 있도록 표시하여, ROI 영역 내에 장애물이 존재함을 확인 가능하도록 경고 한다.If there is an obstacle in the generated ROI area, the
또한, 본 발명에 따른 어라운드 뷰 모니터링 시스템(170)은 통신부(176)를 통하여 영상 이외의 차량 주변의 장애물을 감지하는 센서로부터 감지 신호를 획득할 수도 있다.In addition, the surrounding
예를 들어, 장애물 감지 모듈(190)에 포함된 레이더 센서 또는 레이저 센서를 통하여 장애물과의 거리를 감지하고, 해당 감지된 거리와 영상 획득부(171)를 통하여 획득한 장애물의 위치를 서로 비교하여 전자 제어 유닛(172) 내 탑 뷰에서 장애물의 위치를 보정할 수도 있다. For example, the distance to the obstacle is detected through the radar sensor or the laser sensor included in the
이상에서는 본 발명에 따른 어라운드 뷰 모니터링 시스템(170)의 구성에 대하여 살펴보았다.The configuration of the surrounding
이하에서는 본 발명에 따른 어라운드 뷰 모니터링 시스템(170)에 있어서, 시스템과 단말기의 송수신을 설명하기 위한 순서도이다.Hereinafter, the surround
먼저, 본 발명에 따른 차량의 어라운드 뷰 모니터링 시스템(AVM)(170)은 무선 통신을 수행하여 단말기(1)와 연결됨으로써, 본 발명에 따른 어라운드 뷰 모니터링이 동작된다(S10). 무선 통신을 통하여 차량의 어라운드 뷰 모니터링 시스템과 통신 연결됨에 따라, 차량의 카메라 모듈(180)을 통하여 획득한 영상을 단말기(1)에 실시간으로 전송 가능 하다.First, the surround view monitoring system (AVM) 170 of the vehicle according to the present invention performs wireless communication and is connected to the
차량에 포함된 카메라 모듈(180)은 차량 전방, 측방 및 후방에 장착된 카메라 센서(a 내지 d)를 통하여 차량 주변의 영상을 획득한다(S100). 이후, 획득한 차량 주변의 영상을 CAN 통신을 통하여 본 발명에 따른 어라운드 뷰 모니터링 시스템(170)의 영상 획득부(171)에 전송한다.The
이 후, 어라운드 뷰 모니터링 시스템(170)은 획득한 차량 주변 영상 정보를 기초로 탑 뷰를 생성한다(S200). 구체적으로, 어라운드 뷰 모니터링 시스템(170) 내 전자 제어 유닛(172)은 탑 뷰 영상을 생성하고, 생성한 탑 뷰 영상을 단말기(1)로 송신하도록 제어한다. 이 때, 단말기(1)에 생성한 영상 정보를 송신하기 위하여 어라운드 뷰 모니터링 시스템(170) 내 포함된 무선 통신부(178)를 기초로 무선 통신으로 전송할 수 있다. 이 후, 단말기(1)는 수신한 탑 뷰 영상을 표시하고(S300), 도시되지는 않았으나, 차량의 카메라 모듈(1)에서 촬영한 영상을 실시간으로 무선 통신으로 수신하여 영상도 표시할 수 있다.Thereafter, the surrounding
또한, 차량의 전자 제어 유닛(172)는 생성된 탑 뷰에 미리 설정한 거리 영역 내 ROI를 생성하고(S400), 생성된 ROI 내에 레인(예를 들어, 주차 라인)또는 장애물이 감지되는지를 판단한다. 뿐만 아니라, 차량의 전자 제어 유닛(172)은 해당 ROI를 탑뷰와 함께 표시한다. 또한, 차량의 전자 제어 유닛(172)은 ROI 내에 장애물이 감지되는 경우 운전자가 확인할 수 있도록 경고 표시하도록 제어한다. The
따라서, 차량의 저자 제어 유닛(172)에서 탑 뷰에 추가하여 생성된 ROI 및 감지 정보를 포함하여 단말기(1)에 송신하고(S30), 단말기는 해당 정보를 탑 뷰에 추가하여 표시한다(S600).Accordingly, the
이상에서는 개시된 발명의 일 실시예에 대하여 도시하고 설명하였지만, 개시된 발명은 상술한 특정의 실시예에 한정되지 아니하며 청구범위에서 청구하는 요지를 벗어남 없이 개시된 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의하여 다양한 변형실시가 가능함을 물론이고 이러한 변형실시들은 개시된 발명으로부터 개별적으로 이해될 수 없다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is clearly understood that the same is by way of illustration and example only and is not to be construed as limited to the embodiments set forth herein; It will be understood that various modifications may be made without departing from the spirit and scope of the invention.
100: 전자 장치 100: Electronic device
Claims (8)
획득한 차량 주변 영상을 기초로 탑 뷰 영상을 생성하고, 생성된 탑 뷰 영상에 상기 차량의 외면으로부터 미리 설정된 간격으로 설정된 관심 영역(Region Of Interest: ROI)를 표시하고, 상기 관심 영역에 장애물이 존재하는지 여부를 판단하는 전자 제어 유닛; 및
상기 탑 뷰 및 획득한 영상 정보를 단말기에 무선 통신으로 송신하는 통신부;를 포함하는 차량의 어라운드 뷰 모니터링 시스템. An image acquiring unit for acquiring front, rear, and left and right surroundings images of the vehicle;
The method includes generating a top view image based on the acquired peripheral image of the vehicle, displaying a region of interest (ROI) set at a preset interval from the outer surface of the vehicle in the generated top view image, An electronic control unit for judging whether or not it exists; And
And a communication unit for transmitting the top view and the acquired image information to a terminal by wireless communication.
상기 전자 제어 유닛은 상기 관심 영역 내 장애물이 감지되는 경우 운전자에게 경고하는 차량의 어라운드 뷰 모니터링 시스템. The method according to claim 1,
Wherein the electronic control unit alerts the driver when an obstacle in the area of interest is sensed.
상기 장애물이 주차 라인인 경우에 있어서, 상기 전자 제어 유닛은 상기 주차 라인이 상기 ROI 내에 포함하는 경우 상기 차량의 궤적을 상기 탑 뷰에 추가적으로 표시하는 차량의 어라운드 뷰 모니터링 시스템. 3. The method of claim 2,
Wherein the electronic control unit additionally displays the trajectory of the vehicle in the top view when the obstacle is a parking line, if the parking line is included in the ROI.
상기 통신부는 상기 단말기에 생성한 상기 탑 뷰 및 상기 획득한 주변 영상을 동시에 송신가능한 차량의 어라운드 뷰 모니터링 시스템. The method of claim 3,
Wherein the communication unit is capable of simultaneously transmitting the top view and the acquired peripheral image generated in the terminal.
획득한 차량 주변 영상을 기초로 탑 뷰를 생성하는 단계; 및
생성된 탑 뷰 영상에 상기 차량의 외면으로부터 미리 설정된 가격으로 설정된 관심 영역(ROI:Region of Interest)를 표시하는 단계;
상기 관심 영역에 장애물이 존재하는지 여부를 판단하는 단계; 및
상기 탑 뷰 및 획득한 주변 영상 정보를 단말기에 무선 통신으로 송신하는 단계;를 포함하는 차량의 어라운드 뷰 모니터링 제어 방법. Obtaining front, rear and left and right surroundings images of the vehicle;
Generating a top view based on the acquired vehicle surroundings image; And
Displaying a region of interest (ROI) set at a predetermined price from an outer surface of the vehicle on the generated top view image;
Determining whether an obstacle exists in the ROI; And
And transmitting the top view and the acquired peripheral image information to a terminal by wireless communication.
상기 관심 영역에 장애물이 존재하는지 여부를 판단하는 단계;는
상기 관심 영역에 장애물을 감지하는 단계; 및
상기 장애물이 감지되는 경우 운전자에게 경고하는 단계를 더 포함하는 차량의 어라운드 뷰 모니터링 제어 방법. 6. The method of claim 5,
Determining whether an obstacle exists in the ROI;
Detecting an obstacle in the area of interest; And
And warning the driver if the obstacle is detected.
상기 장애물이 주차라인인 경우에 있어서, 상기 주차 라인이 상기 ROI 내에 포함되면 상기 차량의 궤적을 상기 탑 뷰에 추가적으로 표시하는 단계;를 더 포함하는 차량의 어라운드 뷰 모니터링 제어 방법. The method according to claim 6,
Further comprising displaying the trajectory of the vehicle in the top view if the obstacle is a parking line and the parking line is included in the ROI.
상기 탑 뷰 및 획득한 주변 영상 정보를 단말기에 무선 통신으로 송신하는 단계;는 상기 단말기에 생성한 상기 탑 뷰 및 상기 획득한 주변 영상을 동시에 표시하도록 송신하는 차량의 어라운드 뷰 모니터링 제어 방법.
8. The method of claim 7,
And transmitting the top view and the acquired peripheral image information to the terminal through wireless communication, the method comprising: transmitting the top view and the acquired peripheral image generated in the terminal to simultaneously display the acquired surround image.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020170056292A KR20180122159A (en) | 2017-05-02 | 2017-05-02 | Around View Monitoring System In a Vehicle And Method Thereof |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020170056292A KR20180122159A (en) | 2017-05-02 | 2017-05-02 | Around View Monitoring System In a Vehicle And Method Thereof |
Publications (1)
Publication Number | Publication Date |
---|---|
KR20180122159A true KR20180122159A (en) | 2018-11-12 |
Family
ID=64398141
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020170056292A KR20180122159A (en) | 2017-05-02 | 2017-05-02 | Around View Monitoring System In a Vehicle And Method Thereof |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR20180122159A (en) |
-
2017
- 2017-05-02 KR KR1020170056292A patent/KR20180122159A/en active Search and Examination
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109789778B (en) | Automatic parking assist device and vehicle comprising same | |
US8886386B2 (en) | Method for wireless communication between vehicles | |
US11027654B2 (en) | Vehicle vision system with compressed video transfer via DSRC link | |
US8947219B2 (en) | Warning system with heads up display | |
KR20170099188A (en) | Driver Assistance Apparatus and Vehicle Having The Same | |
KR20180132922A (en) | Vehicle display devices and vehicles | |
US20160275360A1 (en) | Vehicle and method for controlling the same | |
CN111016905A (en) | Interaction method and system for automatic driving vehicle and driving remote control terminal | |
KR102392221B1 (en) | An image processing apparatus, and an imaging apparatus, and an image processing system | |
KR102478809B1 (en) | Method for invoking a teleoperated driving session, apparatus for performing the steps of the method, vehicle and computer program | |
US20200154025A1 (en) | Control apparatus, image pickup apparatus, control method, program, and image pickup system | |
JP2007140674A (en) | Dead angle information providing device | |
US20230275058A1 (en) | Electronic substrate and electronic apparatus | |
US10911159B2 (en) | Communication unit and communication system | |
KR20180080939A (en) | Driving assistance apparatus and vehicle having the same | |
KR20170017647A (en) | Driver Assistance Apparatus and Vehicle Having The Same | |
JP2009015452A (en) | On-vehicle communication device | |
US10910289B2 (en) | Electronic substrate and electronic apparatus | |
KR102533246B1 (en) | Navigation Apparutaus and Driver Assistance Apparatus Having The Same | |
KR20180122159A (en) | Around View Monitoring System In a Vehicle And Method Thereof | |
JP2006072725A (en) | On-vehicle system | |
US20230179971A1 (en) | Location of neighbouring v2x-capable vehicles | |
KR20180106336A (en) | Camera apparatus, collision prevention apparatus using the same and method of preventing collision | |
US20210331586A1 (en) | Vehicle control device and vehicle control method | |
KR102050991B1 (en) | System for recognizing circumstance of vehicle and method thereof |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
AMND | Amendment | ||
E601 | Decision to refuse application | ||
AMND | Amendment |