KR20230033151A - 자율주행 차량 안전 지원 및 확장 시스템 - Google Patents

자율주행 차량 안전 지원 및 확장 시스템 Download PDF

Info

Publication number
KR20230033151A
KR20230033151A KR1020210114479A KR20210114479A KR20230033151A KR 20230033151 A KR20230033151 A KR 20230033151A KR 1020210114479 A KR1020210114479 A KR 1020210114479A KR 20210114479 A KR20210114479 A KR 20210114479A KR 20230033151 A KR20230033151 A KR 20230033151A
Authority
KR
South Korea
Prior art keywords
vehicle
safety support
safety
driving
autonomous
Prior art date
Application number
KR1020210114479A
Other languages
English (en)
Other versions
KR102658916B1 (ko
Inventor
강영훈
김혜정
오정민
최정희
박수조
Original Assignee
한양대학교 에리카산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한양대학교 에리카산학협력단 filed Critical 한양대학교 에리카산학협력단
Priority to KR1020210114479A priority Critical patent/KR102658916B1/ko
Publication of KR20230033151A publication Critical patent/KR20230033151A/ko
Application granted granted Critical
Publication of KR102658916B1 publication Critical patent/KR102658916B1/ko

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W60/00Drive control systems specially adapted for autonomous road vehicles
    • B60W60/001Planning or execution of driving tasks
    • B60W60/0015Planning or execution of driving tasks specially adapted for safety
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/14Adaptive cruise control
    • B60W30/16Control of distance between vehicles, e.g. keeping a distance to preceding vehicle
    • B60W30/165Automatically following the path of a preceding lead vehicle, e.g. "electronic tow-bar"
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/146Display means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2556/00Input parameters relating to data
    • B60W2556/45External transmission of data to or from the vehicle
    • B60W2556/65Data transmitted between vehicles

Landscapes

  • Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Mathematical Physics (AREA)
  • Traffic Control Systems (AREA)

Abstract

본 발명은 자율주행 차량을 이용하는 경우에 안전지원차량이 본 자율주행 차량의 안전을 지원하도록 에스코트하면서 실시간 경로에서 운행하는 다른 차량과 주변의 감지장치 또는 출력장치에서 안전이 보다 확장되어 지원하도록 감지의 폭을 넓히고 출력의 폭을 넓히는 자율주행 차량 안전 지원 및 확장 시스템을 제공한다.
이에 본 발명의 일 측면에 따른 자율주행 차량 안전 지원 및 확장 시스템은 안전지원을 제어하는 서버, 자율주행 차량인 운행차량, 및 또 다른 자율주행 차량인 안전지원차량을 포함하고, 상기 안전지원차량은 상기 운행차량과 함께 운행하고, 상기 서버는 운행차량 또는 안전지원차량의 실시간 운행 경로에 근접하여 운행하는 타 차량, 감지장치 및 출력장치 중 적어도 하나와 통신한다.

Description

자율주행 차량 안전 지원 및 확장 시스템{SAFETY SUPPORT AND EXTENSION SYSTEM FOR SELF DRIVING CARS}
본 발명은 차량 안전 지원 시스템에 대한 것으로서 보다 상세하게는 자율주행 차량의 운행 시 안전을 지원하고 이를 주변까지 확장하는 자율주행 차량의 안전 지원 및 확장 시스템에 대한 것이다.
자동차는 사용되는 원동기의 종류에 따라, 내연기관(internal combustion engine) 자동차, 외연기관(external combustion engine) 자동차, 가스터빈(gas turbine) 자동차 또는 전기자동차(electric vehicle) 등으로 분류될 수 있다.
자율주행 차량은 인간의 운전 없이 자동으로 주행할 수 있는 자동차이다. 자율주행 차량은는 레이더, LIDAR(light detection and ranging), GPS, 카메라로 주위의 환경을 인식하여 목적지를 지정하는 것만으로 자율적으로 주행한다. 이미 실용화되고 있는 자율주행 차량으로는로는 이스라엘 군에서 운용되는 미리 설정된 경로를 순찰하는 무인 차량과 국외 광산이나 건설 현장 등에서 운용되고 있는 덤프 트럭 등의 무인 운행 시스템 등이 있다.
이러한 자율주행 차량의 첫 번째 핵심기술은 자율주행 차량 시스템과 Actual System이다. 실험실 내의 시뮬레이션뿐만 아니라 실제로 자율주행 차량 시스템을 구축하는 기술이며 구동장치인 가속기, 감속기 및 조향장치 등을 무인화 운행에 맞도록 구현하고, 자율주행 차량에 장착된 컴퓨터, 소프트웨어 그리고 하드웨어를 이용하여 제어를 가능하게 한다.
두 번째 핵심기술은 비전, 센서를 이용하여 시각정보를 입력받고 처리하는 것이다. 무인화 운행을 위한 자율 주행의 기본이 되는 것으로, 영상정보를 받아들이고 이 영상 중에서 필요한 정보를 추출해내는 기술이다. 이것은 CCD(charge-coupled device) 카메라뿐만 아니라 초음파 센서 및 레인지 필더 등의 센서를 사용하여 거리와 주행에 필요한 정보를 융합하여 분석 및 처리를 통해 장애물 회피와 돌발상황에 대처할 수 있게 한다.
세 번째 핵심기술은 통합관제 시스템과 운행감시 고장진단체계 기술이다. 이 기술은 차량의 운행을 감시하고 수시로 바뀌는 상황에 따라 적절한 명령을 내리는 운행감시체계를 구축하고, 개별적 프로세서 및 센서에서 발생되는 여러 상황을 분석하여 시스템의 고장을 진단하여 오퍼레이터에 대한 적절한 정보를 제공하거나 경보를 알리는 기능을 수행할 수 있게 한다.
네 번째 핵심기술은 지능제어 및 지능운행 장치이다. 이 기술은 무인운행기법으로 실제 차량모델을 이용한 수학적인 해석에 근거하여 제어명령을 생성하여 현재 자율주행 차량에 적용되고 있는 첫 번째 적용기술은 지능형 순향제어(ACC: Adaptive Cruise Control) 시스템이다. 지능형 순향제어는 레이더 가이드 기술에 기반을 두고 운전자가 페달을 조작하지 않아도 스스로 속도를 조절하여 앞차 또는 장애물과의 거리를 유지시켜주는 시스템이다. 운전자가 앞차와의 거리를 입력하면 자동차 전면에 부착된 장거리 레이더가 앞차의 위치를 탐지하여 일정속도를 유지하거나 감속, 가속하며 필요한 경우 완전히 정지하여 시야확보가 어려운 날씨에 유용하다.
다섯 번째 적용기술은 차선이탈방지 시스템이다. 이는 내부에 달린 카메라가 차선을 감지하여 의도하지 않은 이탈 상황을 운전자에게 알려주는 기술로 자율주행 차량에서는 도보와 중앙선을 구분하여 자동차가 차선을 따라 안전하게 주행할 수 있도록 해준다.
여섯 번째 적용기술은 주차보조 시스템이다. 이는 운전자가 어시스트 버튼을 탐색한 수 후진기어를 넣고 브레이크 페달을 밟으면 자동차가 조향장치 조절하여 후진 일렬주차를 도와주는 시스템이다. 차량 장착형 센서뿐만 아니라 인프라를 기반으로 출발지에서 주차공간까지 차량을 자동으로 유도하여 주차 시 불필요하게 소모되는 시간과 에너지를 절약해주어 소요비용과 환경오염을 최소화 해준다.
일곱 번째 적용기술은 자동주차 시스템이다. 이는 운전자가 주차장 앞에 차를 정지시킨 뒤 엔진을 끄고 내려서 리모콘 잠금 스위치를 2회 연속 누르면 자동차에 설치된 카메라가 차고의 반대편 벽에 미리 붙여놓은 반사경을 탐지해 적정한 접근 경로를 계산하여 스스로 주차를 하는 기술이다.
여덟 번째 적용 기술은 사각지대 정보 안내 시스템이다. 이는 자동차의 양측면에 장착된 센서가 사이드 미러로 보이지 않는 사각지대에 다른 차량이 있는지를 판단하여 운전자에게 경고를 해주는 것으로 복잡한 도로 상황에서 양측의 장애물 및 차량을 확인하여 차선을 변경하는 용도로 사용된다.
자율주행의 가장 큰 장점은 주행속도와 교통 관리 자료가 일치하기 때문에 조절장치를 더욱 고르게 하여 반복정지를 피해 연료 효율에 도움을 준다는 것과 노인, 아동, 장애인 등 운전을 할 수 없는 이들도 이용할 수 있다는 것이다. 이외에도 장시간 운전으로 인한 피로를 해결해주고, 교통사고의 위험을 크게 줄일 수 있는 것과 도로의 교통 흐름이 빨라지고 교통 혼잡을 줄일 수 있다는 장점이 있다.
그런데 최근에는 자율주행의 대중화가 가속되고 있어 자율주행으로 여러가지 다양한 문제가 발생될 것으로 예견되고 있다. 특히, 야간에 자율주행이 한적한 곳에서 이루어지는 경우에는 대중의 의한 감시가 없어 범죄의 타겟이 될 여지가 있다. 따라서, 보다 향상된 안전 대책이 필요할 것으로 예견되고 있다.
한국공개특허 제10-2020-0116610호(2020. 10. 13.), 발명의 명칭: 안심귀가 에스코트 드론{Relief Home Escort Drones}
본 발명은 상기한 종래기술의 문제점을 해결하기 위한 것으로서, 본 발명의 목적은 자율주행 차량을 이용하는 경우에 안전지원차량이 본 자율주행 차량의 안전을 지원하도록 에스코트하면서 실시간 경로에서 운행하는 다른 차량과 주변의 감지장치 또는 출력장치에서 안전이 보다 확장되어 지원하도록 감지의 폭을 넓히고 출력의 폭을 넓히는 자율주행 차량 안전 지원 및 확장 시스템을 제공함에 있다.
본 발명의 일 측면에 따른 자율주행 차량 안전 지원 및 확장 시스템은 안전지원을 제어하는 서버, 자율주행 차량인 운행차량, 및 또 다른 자율주행 차량인 안전지원차량을 포함하고, 상기 안전지원차량은 상기 운행차량과 함께 운행하고, 상기 서버는 운행차량 또는 안전지원차량의 실시간 운행 경로에 근접하여 운행하는 타 차량, 감지장치 및 출력장치 중 적어도 하나와 통신한다.
이때, 상기 운행차량에서 안전지원차량의 지원 여부를 입력한 경우에 상기 안전지원차량은 상기 운행차량과 함께 목적지로 운행할 수 있다.
또한, 상기 서버는 상기 운행차량 또는 안전지원차량의 실시간 운행 경로에 근접하여 운행하는 타 차량 또는 출력장치에 일시적 안전지원표시를 출력하도록 제어할 수 있다.
또한, 상기 안전지원차량이 상기 운행차량과 함께 목적지로 운행하는 경우에는 상기 안전지원차량과 상기 운행차량이 상기 타 차량 또는 출력장치가 출력하는 일시적 안전지원표시와 동일한 표시를 외부에 출력할 수 있다.
또한, 상기 서버는 상기 안전지원차량과 상기 운행차량이 상기 타 차량 또는 출력장치가 출력하는 일시적 안전지원표시와 동일한 표시를 외부에 출력하는 동안 상기 운행차량, 상기 안전지원차량 및 상기 타 차량을 일시적으로 군집주행되도록 제어 신호를 송출할 수 있다.
본 발명은 자율주행 차량을 이용하는 경우에 안전지원차량이 본 자율주행 차량의 안전을 지원하도록 에스코트하면서 실시간 경로에서 운행하는 타 차량과 주변의 감지장치 또는 출력장치에서 안전이 보다 확장되도록 감지 및 출력을 확장하므로 자율주행 차량을 운행하는 경우의 안전이 현저하게 담보된다.
도 1은 본 발명의 일 실시예에 따른 자율주행 차량 안전 지원 및 확장 시스템의 구성도이다.
도 2는 도 1에서의 자율주행 차량을 더욱 상세하게 도시한 구성도이다.
도 3은 도 2에서의 감지부를 더욱 상세하게 도시한 구성도이다.
도 4는 도 2에서의 출력부를 더욱 상세하게 도시한 구성도이다.
도 5는 도 2에서의 제어부를 더욱 상세하게 도시한 구성도이다.
도 6은 도 1에서의 서버를 더욱 상세하게 도시한 구성도이다.
도 7 내지 도 10은 본 발명의 일 실시예에 따른 자율주행 차량 안전 지원 및 확장 시스템의 작용을 설명하는 도면이다.
이하, 첨부된 도면을 참조하여 본 명세서에 개시된 실시예를 상세히 설명하되, 도면 부호에 관계없이 동일하거나 유사한 구성요소는 동일한 참조 번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다.
이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 명세서 작성의 용이함만이 고려되어 부여되거나 혼용되는 것으로서, 그 자체로 서로 구별되는 의미 또는 역할을 갖는 것은 아니다.
또한, 본 명세서에 개시된 실시예를 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 명세서에 개시된 실시예의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다.
또한, 첨부된 도면은 본 명세서에 개시된 실시예를 쉽게 이해할 수 있도록 하기 위한 것일 뿐, 첨부된 도면에 의해 본 명세서에 개시된 기술적 사상이 제한되지 않으며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.
제1, 제2 등과 같이 서수를 포함하는 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되지는 않는다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다.
단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다.
본 출원에서, "포함한다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
이하, 본 발명의 일 실시예에 따른 자율주행 차량 안전 지원 및 확장시스템을 설명한다. 도 1은 본 발명의 일 실시예에 따른 자율주행 차량 안전 지원 및 확장 시스템의 구성도이고, 도 2는 도 1에서의 자율주행 차량을 더욱 상세하게 도시한 구성도이며, 도 3은 도 2에서의 감지부를 더욱 상세하게 도시한 구성도이고, 도 4는 도 2에서의 출력부를 더욱 상세하게 도시한 구성도이며, 도 5는 도 2에서의 제어부를 더욱 상세하게 도시한 구성도이고, 도 6은 도 1에서의 서버를 더욱 상세하게 도시한 구성도이다.
도면을 참조하면, 우선 본 발명의 일 실시예에 따른 자율주행 차량 안전 지원 및 확장 시스템(1000)은 자율주행 차량(100)인 운행차량(100_1)과 또 다른 자율주행 차량(100)인 안전지원차량(100_2)으로 이루어진다. 또한 도시된 바와 같이 안전 지원 시스템을 전체적으로 제어하는 서버(200)를 더 포함하여 이루어질 수 있다.
나아가, 본 실시예에 따른 자율주행 차량 안전 지원 및 확장 시스템(1000)은 안전 운행차량 또는 안전지원차량의 경로에서 운행하는 타 차량(300), 마찬가지로 운행차량 또는 안전지원차량의 경로에 배치된 CCTV 또는 카메라와 같은 감지장치(400), 운행차량 또는 안전지원차량의 경로에 배치된 디스플레이 장치와 같은 출력장치(500)를 더 포함하여 이루어질 수 있다.
이 경우, 자율주행 차량(100)인 운행차량(100_1)과 또 다른 자율주행 차량(100)인 안전지원차량(100_2)은 모두 입력부(110), 감지부(120), 출력부(130), 제어부(140), 통신부(150) 및 구동부(160)를 포함하여 이루어진다.
이하, 편의상 운행차량(100_1)와 안전지원차량(100_2)의 입력부, 감지부, 출력부, 제어부, 통신부 및 구동부는 모두 같은 참조부호를 사용하며, 구성 또는 효과에 차이에 있는 부분은 따로 어느 차량의 구성인지 명기하도록 한다.
먼저, 입력부(110)는 운전을 위한 사용자 입력을 수신하는 장치이다. 메뉴얼 모드인 경우 자율주행 차량(100)의 입력부(110)는 조향 입력 장치, 가속 입력 장치, 브레이크 입력 장치를 포함할 수 있다. 또한, 입력부(110)는 자율주행 차량의 목적지 또는 경로를 입력하는 역할을 하고 입력된 목적지에 따라 제어부(140)가 구동을 제어하거나 서버(200)로부터 정보를 수신 받아 경로를 연속적으로 설정하게 된다. 본 실시예에서는 운행차량(100_1)에서 주로 입력부(110)를 주로 사용하게 된다. 또한, 운행차량(100_1)의 입력부(120)에서 안전지원차량(100_2)의 지원 여부를 입력한 경우에 안전지원차량(100_2)은 운행차량(100_1)과 함께 목적지로 운행하게 된다.
감지부(120)는 레이더(121) 및 라이다(122)를 포함하고, 카메라(123)를 더 포함하여 이루어질 수 있다. 우선, 레이더(121)는 전파를 이용하여 자율주행 차량(100) 외부의 오브젝트에 대한 정보를 생성할 수 있다. 레이더(121)는 전자파 송신부, 전자파 수신부 및 전자파 송신부 및 전자파 수신부와 전기적으로 연결되어, 수신되는 신호를 처리하고, 처리되는 신호에 기초하여 오브젝트에 대한 데이터를 생성하는 적어도 하나의 프로세서를 포함할 수 있다.
레이더(121)는 전파 발사 원리상 펄스 레이더(Pulse Radar) 방식 또는 연속파 레이더(Continuous Wave Radar) 방식으로 구현될 수 있다. 레이더(121)는 연속파 레이더 방식 중에서 신호 파형에 따라 FMCW(Frequency Modulated Continuous Wave)방식 또는 FSK(Frequency Shift Keyong) 방식으로 구현될 수 있다. 레이더(121)는 전자파를 매개로, TOF(Time of Flight) 방식 또는 페이즈 쉬프트(phase-shift) 방식에 기초하여 오브젝트를 검출하고, 검출된 오브젝트의 위치, 검출된 오브젝트와의 거리 및 상대 속도를 검출할 수 있다. 특히 레이더(21)는 초근접 주행되는 선행 차량과의 거리 및 상대 속도를 실시간으로 검출하도록 한다.
이때 레이더(121)는 차량의 전방, 후방 또는 측방에 위치하는 오브젝트를 감지하기 위해 차량의 외부의 적절한 위치에 배치될 수 있다.
라이다(122)는 레이저 광을 이용하여 자율주행 차량(100) 외부의 오브젝트 및 주차 또는 출차를 막고 있는 다른 차량 등의 장애에 대한 정보를 생성할 수 있다. 라이다(122)는 광 송신부(미도시), 광 수신부(미도시) 및 광 송신부 및 광 수신부와 전기적으로 연결되어, 수신되는 신호를 처리하고, 처리된 신호에 기초하여 오브젝트에 대한 데이터를 생성하는 적어도 하나의 프로세서를 포함할 수 있다.
라이다(122)는 TOF(Time of Flight) 방식 또는 페이즈 쉬프트(phase-shift) 방식으로 구현될 수 있다. 라이다(122)는 구동식 또는 비구동식으로 구현될 수 있는데, 구동식으로 구현되는 경우 라이다(122)는 모터에 의해 회전되며 자율주행 차량(100) 주변의 오브젝트를 검출할 수 있다. 비구동식으로 구현되는 경우, 라이다(122)는 광 스티어링에 의해 차량을 기준으로 소정 범위 내에 위치하는 오브젝트를 검출할 수 있다. 자율주행 차량(100)은 복수의 비구동식 라이다를 포함할 수 있다. 라이다(122)는 레이저 광 매개로 TOF(Time of Flight) 방식 또는 페이즈 쉬프트(phase-shift) 방식에 기초하여 오브젝트를 검출하고, 검출된 오브젝트의 위치, 검출된 오브젝트와의 거리 및 상대 속도를 검출할 수 있다. 특히 라이다(122)는 선행 차량의 위치와 후행 차량과의 거리 및 상대 속도를 검출하여 양자간 동일한 제어가 이루어지도록 할 수 있다.
이때 라이다(122)는 차량의 전방, 후방 또는 측방에 위치하는 오브젝트를 감지하기 위해 차량의 외부의 적절한 위치에 배치될 수 있다.
한편, 카메라(123)는 영상을 이용하여 자율주행 차량(100) 외부의 오브젝트 및 장애에 대한 정보를 생성할 수 있다. 이때 카메라(123)는 차량 외부의 목표물에 대하여 촬상할 수 있다.
카메라(123)는 적어도 하나의 렌즈, 적어도 하나의 이미지 센서 및 이미지 센서와 전기적으로 연결되어 수신되는 신호를 처리하고, 처리되는 신호에 기초하여 오브젝트에 대한 데이터를 생성하는 적어도 하나의 프로세서를 포함할 수 있다.
카메라(123)는 모노 카메라, 스테레오 카메라, AVM(Around View Monitoring) 카메라 중 적어도 어느 하나일 수 있다. 카메라(123)는 다양한 영상 처리 알고리즘을 이용하여, 오브젝트의 위치 정보, 오브젝트와의 거리 정보, 오브젝트와의 상대 속도 정보, 오브젝트의 모션 정보 등을 획득할 수 있다.
예를 들어, 카메라(123)는 획득된 영상에서 시간에 따른 오브젝트 크기의 변화를 기초로, 오브젝트와의 거리 정보 및 상대 속도 정보를 획득할 수 있다. 또한, 카메라(123)는, 핀홀(pin hole) 모델, 노면 프로파일링 등을 통해, 오브젝트와의 거리 정보 및 상대 속도 정보를 획득할 수 있다.
또한, 카메라(123)는 스테레오 카메라에서 획득된 스테레오 영상에서 디스패러티(disparity) 정보를 기초로 선행 차량과의 거리 정보, 상대 속도 정보를 획득할 수 있다. 이에 선행 차량과의 초근접 주행 제어를 더욱 보조하게 된다.
카메라(123)는 차량 외부를 촬영하기 위해 차량에서 FOV(field of view) 확보가 가능한 위치에 장착될 수 있다. 카메라(123)는 차량 전방의 영상을 획득하기 위해 차량의 실내에서 프런트 윈드 쉴드에 근접하게 배치될 수 있다. 나아가 카메라(123)는 프런트 범퍼 또는 라디에이터 그릴 주변에 배치될 수 있다. 카메라(123)는 차량 후방의 영상을 획득하기 위해 차량의 실내에서 리어 글라스에 근접하게 배치될 수 있다. 이때, 카메라(123)는 리어 범퍼, 트렁크 또는 테일 게이트 주변에 배치될 수 있다. 카메라(123)가 차량 측방의 영상을 획득하기 위해서는 차량의 실내에서 사이드 윈도우 중 적어도 어느 하나에 근접하게 배치될 수 있다. 또는 카메라(123)는 사이드 미러, 휀더 또는 도어 주변에 배치될 수 있다.
또한, 감지부(120)는 자율주행 차량의 위치 정보를 활용해야 되므로 GPS(124)를 필수적으로 더 포함한다. 또한, GPS(124)는 자율주행 차량(100)의 위치 데이터를 생성하는데 일반적인 GPS(Global Positioning System) 및 DGPS(Differential Global Positioning System) 중 적어도 어느 하나를 포함할 수 있다. 이러한 GPS 및 DGPS 중 적어도 어느 하나에서 생성되는 신호에 기초하여 자율주행 차량(100)의 위치 데이터를 생성할 수 있다.
이때, GPS(124)는 IMU(Inertial Measurement Unit) 및 감지부(120)의 카메라(123) 중 적어도 어느 하나에 기초하여 위치 데이터를 보정할 수 있다. 또한, GPS(124)는 GNSS(Global Navigation Satellite System)로 명명될 수 있다.
한편, 감지부(120)는 탑승자가 조향 작동을 수행하지 않더라도 음성 등으로 보호자 이외에 탑승객도 자율주행에 개입하기 위해 마이크(125)를 더 구비할 수 있다. 또한, 본 실시예에 따른 마이크(125)는 차량 외부에 있는 타인의 음성을 정보를 획득한다. 이는 타인의 음성으로 이루어진 명령을 수집하기 위함이다.
나아가 생체정보센서(126)은 탑승객의 심박, 협압, 뇌파 등을 센싱하여 응급 상황을 판단하도록 한다. 이때, 생체정보센서(126)는 주기적으로 작동되어 탑승객을 감지하고 이상 신호 감지 후 설정 시간 이상 신호가 유지되는 경우에는 통신부(150)가 서버(200)에 생체정보를 송신하여 응급 상황인지 판단할 수 있다. 한편, 생체정보센서(126)은 부가적으로 차량의 입출입 시 지문, 홍채 정보를 센싱하여 오류 탑승을 막는 기능도 별도로 수행할 수 있다. 이러한 생체정보센서(126)를 활용하여 자율주행 차량(100)은 탑승객이 탑승하거나 하차한 것을 감지할 수 있다.
또한, 본 실시예에서 안전지원차량의 감지부(120)는 도로 뿐만 아니라 보행로까지 감지 범위를 확대하는 것이 바람직하다. 정차 중인 경우에 도로 등에서 갑자기 운행차량에 접근하는 위험을 감지하기 위함이다.
한편, 출력부(130)는 자율주행 차량(100)의 내부 또는 외부에 배치되어 주행 관련 상황을 표시하고 나아가 차량의 외부에 형상, 모양 및 색체 중 어느 하나가 디스플레이되도록 하여 차량의 탑승객 및 주위의 타인에게 예측 가능성을 제공하도록 할 수 있다.
더욱 상세하게 본 실시예에 따른 출력부(130)는 순찰표시모듈(131), 안전지원표시모듈(132)을 포함하여 이루어진다.
안전지원차량(100_2)의 경우에는 평상 시 도로 순찰 및 방범을 지원하는 용도로 사용할 수 있으므로 안전지원차량의 출력부는 순찰표시모듈(131)을 구비하여 가로등 등이 없는 야간 도로를 순찰하고 주위에 조명을 비추는 역할을 하여 자율주행 환경의 안전을 강화할 수 있다.
안전지원표시모듈(132)은 안전지원차량(100_2)과 운행차량(100_1)이 함께 목적지로 운행하는 경우에 안전지원차량(100_2)과 운행차량(100_1) 모두에 구비되어 안전 지원과 관련된 표시를 외부에 출력하는 역할을 수행한다. 더욱 상세하게 안전지원표시모듈(132)은 차량의 하부를 빛으로 비추어 소정의 조명 영역이 표시되도록 하여 안전하게 에스코트됨을 표시하거나 현재 안전지원차량(100_2)이 서버(200)와 통신되고 주변 상황이 자세하게 모니터링 되고 있다는 내용을 외부에 출력하여 주의를 환기시킬 수 있도록 한다.
한편 전술한 서버(200)는 운행차량(100_1) 또는 안전지원차량(100_2)의 실시간 운행 경로에 근접하여 운행하는 타 차량(300), 감지장치(400) 및 출력장치(500) 중 적어도 하나와 통신할 수 있는데, 이때 출력장치(500)는 현재 안전지원차량(100_2) 뿐만 아니라 출력장치(500)도 함께 에스코트 됨을 표시하거나 감지장치(400) 또는 타차량(300)에 의해 주위가 촬영되고 있다는 것을 표시하여 안전 지원을 더욱 강화할 수 있다.
한편, 제어부(140)는 구동제어모듈(141) 및 입출력제어모듈(142)을 포함하여 이루어진다. 우선 구동제어모듈(141)은 메인 ECU로 구성될 수 있는데 자율주행 차량(100)의 구동부(160)를 제어하게 된다. 이때, 구동제어모듈(141)은 파워 트레인 구동 제어 장치, 샤시 구동 제어 장치, 도어/윈도우 구동 제어 장치, 안전 장치 구동 제어 장치, 램프 구동 제어 장치 및 공조 구동 제어 장치를 포함할 수 있다. 파워 트레인 구동 제어 장치는 동력원 구동 제어 장치 및 변속기 구동 제어 장치를 포함할 수 있다. 샤시 구동 제어 장치는, 조향 구동 제어 장치, 브레이크 구동 제어 장치 및 서스펜션 구동 제어 장치를 포함할 수 있다. 한편, 안전 장치 구동 제어 장치는 안전 벨트 제어를 위한 안전 벨트 구동 제어 장치를 포함할 수 있다.
또한 구동제어모듈(141)는 적어도 하나의 전자적 제어 장치(예를 들면, 제어 ECU(Electronic Control Unit))를 포함한다. 특히 수신되는 신호에 기초하여, 차량 구동 장치를 제어할 수 있다. 예를 들면, 구동제어모듈(141)는 감지부(120)에서 수신되는 신호 또는 서버의 구동 신호 또는 안전지원차량의 구동신호에 기초하여, 파워 트레인, 조향 장치 및 브레이크 장치를 제어할 수 있다.
또한, 안전지원차량(100_2)이 운행차량(100_1)과 함께 목적지로 운행하는 경우 안전지원차량(100_2)과 운행차량(100_1) 각각의 구동제어모듈(141)은 군집 주행에 의해 구동이 제어되도록 할 수 있다.
입출력제어모듈(142)는 전술한 출력부(130)를 제어하는데 운행차량의 경우에는 지원차량과 함께 운행하는 경우에 안전지원표시를 함께 출력하도록 제어하고, 지원차량의 경우에는 평상시의 순찰상태를 표시하도록 제어할 수 있다.
또한, 제어부(140)는 경로안전판단모듈(143)을 더 포함할 수 있다. 상기한 운행차량(100_1)의 입력부는 경로 또는 목적지를 입력할 수 있는데 이 경우 경로안전판단모듈(143)은 경로상에 위험요소가 있는지 판단하고 그러한 경우에 입력부(120)가 다시 안전지원차량(100_2)을 호출할 것인지 입력하도록 제어할 수 있다.
통신부(150)는 자율주행 차량(100) 외부에 위치하는 서버(200), 타 차량(300), 사용자단말(미도시) 중 적어도 어느 하나와 신호를 교환할 수 있다. 특히, 운행차량의 통신부(150)는 지원차량의 통신부(150)와 근거리 통신(또는 직접 통신)을 수행할 수도 있다.
통신부(150)는 통신을 수행하기 위해 송신 안테나, 수신 안테나, 각종 통신 프로토콜이 구현 가능한 RF(Radio Frequency) 회로 및 RF 소자 중 적어도 어느 하나를 포함할 수 있다.
예를 들어, 통신 장치는 C-V2X(Cellular V2X) 기술을 기반으로 외부 디바이스와 신호를 교환할 수 있다. 또한, 통신부(150)는 IEEE 802.11p PHY/MAC 계층 기술과 IEEE 1609 Network/Transport 계층 기술 기반의 DSRC(Dedicated Short Range Communications) 기술 또는 WAVE(Wireless Access in Vehicular Environment) 표준을 기반으로 외부 디바이스와 신호를 교환할 수 있다.
한편, 서버(200)는 지원호출수신모듈(210), 지원차량배차모듈(220), 구동신호생성모듈(230), 및 일시지원출력제어모듈(240)을 포함하여 이루어진다.
지원호출수신모듈(210)은 운행차량(100_1)에서 지원차량이 필요하다고 입력되는 경우에 그 정보를 수신하는 역할을 수행한다. 지원차량배차모듈(220)은 인접한 공용 서비스 자율주행 차량을 섭외하여 안전지원차량으로 확정하여 운행차량(100_1)의 위치로 배차하는 역할을 담당한다.
구동신호생성모듈(230)은 안전지원차량(100_2)이 운행차량과 함께 목적지로 운행하는 경우에 안전지원차량과 운행차량이 군집 주행에 의해 구동이 제어되는 경우에는 구동 제어 신호를 안전지원차량에 송신하도록 한다. 이때 운행차량은 안전지원차량에 팔로우되어 운행되게 된다. 다만, 이 경우에는 구동 제어 신호가 안전지원차량 단독으로 발생시켜도 되는 것을 물론이다.
일시적지원출력제어모듈(240)은 운행차량(100_1) 또는 안전지원차량(100_2)의 실시간 운행 경로에 근접하여 운행하는 타 차량(300) 또는 출력장치(400)에 일시적 안전지원표시를 출력하도록 제어한다.
즉, 전술한 출력부(130)의 안전지원표시모듈(132)이 안전지원차량(100_2)과 운행차량(100_1)이 함께 목적지로 운행하는 경우에 안전지원차량(100_2)과 운행차량(100_1) 모두에 구비되어 안전 지원과 관련된 표시를 외부에 출력하는 역할을 수행하는 것에서 나아가, 일시적지원출력제어모듈(240)은 운행차량(100_1) 또는 안전지원차량(100_2)의 실시간 운행 경로에 근접하여 운행하는 타 차량(300) 또는 출력장치(400)에도 동일한 내용이 출력되도록 하여 광범위한 에스코트 또는 안전지원이 이루어지고 있다는 것을 출력할 수 있다.
예를 들어, 운행차량(100_1), 안전지원차량(100_2), 타차량(300) 및 출력장치(400) 모두 같은 색이나 이미지 또는 텍스트가 일시적으로 출력되도록 할 수 있다. 혹은 운행차량(100_1), 안전지원차량(100_2), 타차량(300) 및 출력장치(400)의 하부에 같은 색이 출력되어 보행자로 하여금 도로를 주행하는 특정 부분이 계속 점유된 느낌을 전달할 수 있으므로 안전이 보다 강화된 느낌을 심어 줄 수 있다.
한편, 이렇듯 일시적 안전지원표시에 출력되는 경우에는 상기 안전지원차량과 상기 운행차량이 상기 타 차량 또는 출력장치가 출력하는 일시적 안전지원표시와 동일한 표시를 외부에 출력하는 것이 전체적 통일감을 형성하므로 바람직하다.
또한 이 경우에 구동신호생성모듈(320)은 운행차량, 상기 안전지원차량 및 상기 타 차량을 일시적으로 군집주행되도록 제어 신호를 송출하는 것이 바람직하다. 속도를 일시적으로 일치시키는 경우에는 안전지원표시가 전체적으로 안정적으로 외부에서 열람되기 때문이다.
이하 본 발명의 일 실시예에 따른 자율주행 차량 안전 지원 및 확장시스템의 작용을 설명한다. 도 7 내지 도 10은 본 발명의 일 실시예에 따른 자율주행 차량 안전 지원 및 확장 시스템의 작용을 설명하는 도면이다.
우선 도 7을 참조하면, 안전지원차량은 평상시 순찰 중임을 표시하고 가로등 등이 없는 지역을 순찰하면서 운행할 수 있다. 이후 다른 운행차량에서 안전지원이 요청되는 경우에는 도 8과 같이 서버로부터의 구동 신호에 따라 운행차량으로 접근하고, 도 9와 같이 도로 하부에 조명을 비추면서 에스코트하는 방식으로 운행의 안전을 지원할 수 있다. 한편, 도 10과 같이 지원차량 뿐만 아니라 일시적 지원 차량(타차량)과 주변의 건물 디스플레이를 이용하여 안전 지원이 이루어진다는 인식을 보다 확장시킬 수 있다.
이와 같이, 본 발명이 속하는 기술분야의 당업자는 본 발명이 그 기술적 사상이나 필수적 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다.
본 명세서와 도면에는 본 발명의 바람직한 실시예에 대하여 개시하였으며, 비록 특정 용어들이 사용되었으나, 이는 단지 본 발명의 기술 내용을 쉽게 설명하고 발명의 이해를 돕기 위한 일반적인 의미에서 사용된 것이지, 본 발명의 범위를 한정하고자 하는 것은 아니다. 여기에 개시된 실시예 외에도 본 발명의 기술적 사상에 바탕을 둔 다른 변형 예들이 실시 가능하다는 것은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 자명한 것이다.
1000: 자율주행 차량 안전 지원 및 확장 시스템
100: 자율주행 차량
100_1: 운행차량
100_2: 안전지원차량
110: 입력부
120: 감지부
130: 출력부
140: 제어부
150: 통신부
160: 구동부
200: 서버
300: 타 차량
400: 감지장치
500: 출력장치

Claims (5)

  1. 안전지원을 제어하는 서버;
    자율주행 차량인 운행차량; 및
    또 다른 자율주행 차량인 안전지원차량;
    을 포함하고,
    상기 안전지원차량은 상기 운행차량과 함께 운행하고,
    상기 서버는 운행차량 또는 안전지원차량의 실시간 운행 경로에 근접하여 운행하는 타 차량, 감지장치 및 출력장치 중 적어도 하나와 통신하는 것을 특징으로 하는 자율주행 차량 운행 안전 지원 및 확장 시스템.
  2. 제1항에 있어서,
    상기 운행차량에서 안전지원차량의 지원 여부를 입력한 경우에 상기 안전지원차량은 상기 운행차량과 함께 목적지로 운행하는 것을 특징으로 하는 자율주행 차량 안전 지원 및 확장 시스템.
  3. 제2항에 있어서,
    상기 서버는 상기 운행차량 또는 안전지원차량의 실시간 운행 경로에 근접하여 운행하는 타 차량 또는 출력장치에 일시적 안전지원표시를 출력하도록 제어하는 것을 특징으로 하는 자율주행 차량 안전 지원 및 확장 시스템.
  4. 제3항에 있어서,
    상기 안전지원차량이 상기 운행차량과 함께 목적지로 운행하는 경우에는 상기 안전지원차량과 상기 운행차량이 상기 타 차량 또는 출력장치가 출력하는 일시적 안전지원표시와 동일한 표시를 외부에 출력하는 것을 특징으로 하는 자율주행 차량 안전 지원 및 확장 시스템.
  5. 제4항에 있어서,
    상기 서버는 상기 안전지원차량과 상기 운행차량이 상기 타 차량 또는 출력장치가 출력하는 일시적 안전지원표시와 동일한 표시를 외부에 출력하는 동안 상기 운행차량, 상기 안전지원차량 및 상기 타 차량을 일시적으로 군집주행되도록 제어 신호를 송출하는 것을 특징으로 하는 자율주행 차량 안전 지원 및 확장 시스템.
KR1020210114479A 2021-08-30 2021-08-30 자율주행 차량 안전 지원 및 확장 시스템 KR102658916B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020210114479A KR102658916B1 (ko) 2021-08-30 2021-08-30 자율주행 차량 안전 지원 및 확장 시스템

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020210114479A KR102658916B1 (ko) 2021-08-30 2021-08-30 자율주행 차량 안전 지원 및 확장 시스템

Publications (2)

Publication Number Publication Date
KR20230033151A true KR20230033151A (ko) 2023-03-08
KR102658916B1 KR102658916B1 (ko) 2024-04-19

Family

ID=85508348

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020210114479A KR102658916B1 (ko) 2021-08-30 2021-08-30 자율주행 차량 안전 지원 및 확장 시스템

Country Status (1)

Country Link
KR (1) KR102658916B1 (ko)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20180128793A (ko) * 2017-05-24 2018-12-04 엘지전자 주식회사 차량의 제어방법
EP3412489A1 (de) * 2017-06-01 2018-12-12 MAN Truck & Bus AG Verfahren und anzeigevorrichtung zur signalisierung einer aufforderung zur übernahme einer fahrfunktion eines kraftfahrzeugs
KR20200083683A (ko) * 2018-12-14 2020-07-09 현대자동차주식회사 차량, 그와 통신하는 서버 및 그의 제어 방법
KR20210097235A (ko) * 2020-01-28 2021-08-09 한양대학교 에리카산학협력단 자율주행 차량의 군집 주행 시스템

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20180128793A (ko) * 2017-05-24 2018-12-04 엘지전자 주식회사 차량의 제어방법
EP3412489A1 (de) * 2017-06-01 2018-12-12 MAN Truck & Bus AG Verfahren und anzeigevorrichtung zur signalisierung einer aufforderung zur übernahme einer fahrfunktion eines kraftfahrzeugs
KR20200083683A (ko) * 2018-12-14 2020-07-09 현대자동차주식회사 차량, 그와 통신하는 서버 및 그의 제어 방법
KR20210097235A (ko) * 2020-01-28 2021-08-09 한양대학교 에리카산학협력단 자율주행 차량의 군집 주행 시스템

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
한국공개특허 제10-2020-0116610호(2020. 10. 13.), 발명의 명칭: 안심귀가 에스코트 드론{Relief Home Escort Drones}

Also Published As

Publication number Publication date
KR102658916B1 (ko) 2024-04-19

Similar Documents

Publication Publication Date Title
KR20230114766A (ko) 자율주행 차량 시스템
KR20230033160A (ko) 자율주행 차량의 보복 운전 제어 시스템
KR102658916B1 (ko) 자율주행 차량 안전 지원 및 확장 시스템
KR20230033150A (ko) 자율주행 차량을 이용한 안전 지원 시스템
KR102568294B1 (ko) 자율주행 차량의 긴급 경로 생성 시스템
KR102568270B1 (ko) 자율주행 차량의 보행자 소통 시스템
KR102658906B1 (ko) 자율주행 차량의 응급 제어 시스템
KR102568288B1 (ko) 자율주행 차량 간 통신에 의한 교통 안전 시스템
KR102568277B1 (ko) 자율주행 차량의 구조 시스템
KR102568283B1 (ko) 자율주행 차량의 보행자 커뮤니케이션 시스템
KR20230033148A (ko) 상호 소통에 기반한 자율주행 차량의 주차 및 출차 시스템
KR20230033750A (ko) 자율주행 차량의 경고 시스템
KR20230033144A (ko) 자율주행 차량의 사각지대 경고 시스템
KR20230033749A (ko) 자율주행 차량을 이용한 여행 안내 시스템
KR20230114781A (ko) 군집 배열을 변경하는 자율주행 차량의 군집 주행 시스템
KR20230114764A (ko) 자율주행 차량의 응급 교통 상황 제어 시스템
KR20230114774A (ko) 자율주행 차량의 콘텐츠 전환 시스템
KR20230033149A (ko) 다수 사용자의 동의에 기반한 자율주행 차량의 강제 구동 시스템
KR20230114770A (ko) 전력 공유에 기반한 자율주행 차량의 무선 충전 시스템
KR20230114782A (ko) 직관적으로 군집 주행에 합류하거나 및 군집 주행에서 탈퇴할 수 있는 자율주행 차량의 군집 주행 시스템
KR20230033159A (ko) 순찰 대상물을 표시하는 자율주행 차량의 순찰 시스템
KR20230114776A (ko) 자율주행 차량의 군집 주행 시스템
KR20230114763A (ko) 자율주행 차량의 응급 경로 설정 시스템
KR20230033158A (ko) 경로가 변경되는 자율주행 차량의 순찰 시스템
KR20230114780A (ko) 응급 차량을 위한 자율주행 차량의 차선 변경 시스템

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant