KR100610124B1 - 차량의 이중 후방시계 안전 확보장치 - Google Patents

차량의 이중 후방시계 안전 확보장치 Download PDF

Info

Publication number
KR100610124B1
KR100610124B1 KR1020050004579A KR20050004579A KR100610124B1 KR 100610124 B1 KR100610124 B1 KR 100610124B1 KR 1020050004579 A KR1020050004579 A KR 1020050004579A KR 20050004579 A KR20050004579 A KR 20050004579A KR 100610124 B1 KR100610124 B1 KR 100610124B1
Authority
KR
South Korea
Prior art keywords
vehicle
sensor
parking area
controller
screen
Prior art date
Application number
KR1020050004579A
Other languages
English (en)
Other versions
KR20060083675A (ko
Inventor
김력
이병준
Original Assignee
현대자동차주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 현대자동차주식회사 filed Critical 현대자동차주식회사
Priority to KR1020050004579A priority Critical patent/KR100610124B1/ko
Publication of KR20060083675A publication Critical patent/KR20060083675A/ko
Application granted granted Critical
Publication of KR100610124B1 publication Critical patent/KR100610124B1/ko

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R21/00Arrangements or fittings on vehicles for protecting or preventing injuries to occupants or pedestrians in case of accidents or other traffic risks
    • B60R21/01Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents
    • B60R21/013Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents including means for detecting collisions, impending collisions or roll-over
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B62LAND VEHICLES FOR TRAVELLING OTHERWISE THAN ON RAILS
    • B62DMOTOR VEHICLES; TRAILERS
    • B62D15/00Steering not otherwise provided for
    • B62D15/02Steering position indicators ; Steering position determination; Steering aids
    • B62D15/021Determination of steering angle
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S15/00Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems
    • G01S15/02Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems using reflection of acoustic waves
    • G01S15/04Systems determining presence of a target
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/304Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using merged images, e.g. merging camera image with stored images
    • B60R2300/305Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using merged images, e.g. merging camera image with stored images merging camera image with lines or icons
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/806Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for aiding parking

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Physics & Mathematics (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Transportation (AREA)
  • Acoustics & Sound (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Traffic Control Systems (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

본 발명은 차량의 이중 후방시계 안전 확보장치에 관한 것으로, 후방 주차 영역에 대한 화상과 함께 후방 물체에 대한 위치를 표시하여 운전자가 후방 주차 영역을 정확히 파악하여 후진 주차의 안정성을 확보함에 그 목적이 있다.
상기와 같은 목적을 달성하기 위한 본 발명은, 차량의 이중 후방시계 안전 확보장치가 차량의 후방부위에 장착되어 후방주차영역(P)에 대한 화면을 송출하는 CCD 카메라인 비전센서(1)와, 차량의 후방부위에 장착되어 후방주차영역(P)에 위치된 물체를 감지하여 송출하는 물체판단센서(2), 차량의 후진 여부와 차륜의 조향정도를 알 수 있도록 변속단과 조향각을 각각 측정하는 변속단감지센서(3)와 조향각센서(4)로 이루어진 차량상태센서, 상기 센서(1,2,3,4)들의 신호를 통해 차량의 후진 주차시 후방주차영역(P)에 대한 정보를 운전자에게 알려주는 정보제공수단으로 구성되어진 것을 특징으로 한다.

Description

차량의 이중 후방시계 안전 확보장치{Double rear visual safety established system in vehicle}
도 1은 본 발명에 따른 차량의 이중 후방시계 안전 확보장치의 구성도
도 2는 본 발명에 따른 차량의 이중 후방시계 안전 확보장치의 블록 구성도
도 3은 본 발명에 따른 차량의 이중 후방시계 안전 확보장치의 작동 상태도
<도면의 주요부분에 대한 부호의 설명>
1 : 비전센서 2 : 물체판단기
2a,2b,2c,2d : 제1·2·3·4소자
3 : 변속단감지센서 4 : 조향각센서
5 : 콘트롤러 6 : 화상처리ECU
7 : 물체처리ECU 8 : 디스플레이
9 : 경고기
a,b,c,d : 물체위치영역
본 발명은 차량의 후방시계 안전 확보장치에 관한 것으로, 보다 상세하게는 후진 주차시 후방 주차 영역의 영상 화면에 장애물 위치를 함께 표시하도록 된 차량의 이중 후방시계 안전 확보장치에 관한 것이다.
일반적으로 차량을 후진하면서 좁은 영역으로 주차를 하는 경우 통상, 운전자는 후방의 물체를 감시하기 위해 백미러(또는 룸 미러)를 주시하거나 머리를 뒤로 돌려 육안으로 직접 후방을 확인하게 되는데, 이때 벽이나 다른 차량과 같은 후방 물체를 정확하게 파악하지 못하거나 특히 사각지대에 물체가 존재하면 후진에 따른 접촉 사고나 또는 인명사고를 유발하는 불편이 종종 있게 된다.
이에 따라, 최근에는 좁은 영역의 후진 주차시 편리성과 안전성을 확보하기 위해 초음파나 레이저등을 차량 후방쪽으로 발사해 물체의 존재 여부를 판단하거나, 또는 차량 후방으로 CCD 카메라를 장착해 영상으로 후방 영역을 파악하는 방식을 이용해 후진 주차시 안전을 도모하게 된다.
그러나, 이와 같은 전파를 이용해 물체를 감지하는 경우에는 물체의 위치를 정확히 파악할 수 가 없어 주차 사고의 위험을 다소 낮추는 정도일 뿐이고, 또한 카메라를 이용하는 경우에는 육안으로 확인하는 안정성이 있지만 사각지대나 후방 물체에 대한 거리 판단을 정확히 하는 게 용이하지 않은 한계가 있게 된다.
이에 본 발명은 상기와 같은 점을 감안하여 발명된 것으로, 후방 주차 영역에 대한 화상과 함께 후방 물체에 대한 위치를 표시하여 운전자가 후방 주차 영역 을 정확히 파악하여 후진 주차의 안정성을 확보함에 그 목적이 있다.
상기와 같은 목적을 달성하기 위한 본 발명은, 차량의 후방부위에 장착되어 후방주차영역에 대한 화면을 송출하는 CCD 카메라인 비전센서와;
차량의 후방부위에 다수개로 장착되어 후방주차영역에 위치된 물체를 감지하여 송출하는 물체판단센서;
차량의 후진 여부와 차륜의 조향정도를 알 수 있도록 변속단과 조향각을 각각 측정하는 변속단감지센서와 조향각센서로 이루어진 차량상태센서 및;
상기 각 센서들의 신호를 통해 차량의 후진 주차시 후방주차영역에 대한 정보를 입력받는 콘트롤러와, 상기 콘트롤러를 통해 처리된 신호를 전송받아 후방주차영역에 대한 화면과 감지된 물체의 위치를 화면의 물체위치영역에 표시하여 운전자가 육안으로 확인하도록 하는 디스플레이 및 상기 디스플레이에 표시된 물체위치영역을 통해 나타난 물체에 대한 운전자의 인식을 위해 소리를 발생하는 경고기로 이루어진 정보제공수단;
으로 구성되어진 것을 특징으로 한다.
이하 본 발명의 실시예를 첨부된 예시도면을 참조로 상세히 설명한다.
도 1과 도 2는 본 발명에 따른 차량의 이중 후방시계 안전 확보장치의 구성도를 도시한 것인바, 본 발명에 따른 차량의 이중 후방시계 안전 확보장치는 차량의 후방부위에 장착되어 후방주차영역(P)에 대한 화면을 송출하는 CCD 카메라인 비 전센서(1)와, 차량의 후방부위에 장착되어 후방주차영역(P)에 위치된 물체를 감지하여 송출하는 물체판단센서(2), 차량의 후진 여부와 차륜의 조향정도를 알 수 있도록 변속단과 조향각을 각각 측정하는 변속단감지센서(3)와 조향각센서(4)로 이루어진 차량상태센서, 상기 센서(1,2,3,4)들의 신호를 통해 차량의 후진 주차시 후방주차영역(P)에 대한 정보를 운전자에게 알려주는 정보제공수단으로 구성되어진다.
그리고, 상기 비전센서(1)는 후방주차영역(P)에 대한 전체 화면을 송출하기에 적절한 위치를 갖도록 설치되어진다.
또한, 상기 물체판단센서(2)는 비전센서(1)를 통해 보여지는 후방주차영역(P)에 대한 전체 화면을 다수로 분할하면서 화면 영상에 오버랩(Over Lap)되어 물체의 후방 위치 영역을 판단하도록, 차량의 후방부위에서 범퍼나 그 주변부위에 일정 간격을 두고 다수로 구성된 초음파 송·수신 방식의 제1·2·3·4소자(2a,2b,2c,2d)로 이루어지게 된다.
여기서, 상기 물체판단센서(2)의 제1·2·3·4소자(2a,2b,2c,2d)는 도 3에 도시된 바와 같이, 비전센서(1)를 통해 보여지는 후방주차영역(P)에 대한 전체 화면을 양쪽 측면에 대해 등 간격으로 4곳을 물체위치영역(a,b,c,d)으로 나누어 표시하는 것이 바람직함은 물론이다.
그리고, 상기 정보제공수단은 상기 각 센서(1,2,3,4)들의 신호를 통해 차량의 후진 주차시 후방주차영역(P)에 대한 정보를 입력받는 콘트롤러(5)와, 상기 콘트롤러(5)를 통해 처리된 신호를 전송받아 후방주차영역(P)에 대한 화면과 감지된 물체의 위치를 화면의 물체위치영역(a,b,c,d)에 표시하여 운전자가 육안으로 확인 하도록 하는 디스플레이(8) 및 상기 디스플레이(8)에 표시된 물체위치영역(a,b,c,d)을 통해 나타난 물체에 대한 운전자의 인식을 위해 소리를 발생하는 부저(Buzzer)로 이루어진 경고기(9)로 구성되어진다.
여기서, 상기 콘트롤러(5)는 변속단감지센서(3)와 조향각센서(4)의 신호를 처리함과 더불어, 비전센서(1)를 통해 입력된 화상신호를 처리하는 화상처리ECU(6)와, 물체판단센서(2)를 통해 입력된 신호를 처리하는 물체처리ECU(7)로 이루어지는데, 상기 화상처리ECU(6)와 물체처리ECU(7)는 콘트롤러(5)와 별도의 구성요소로서 될 수도 있지만 콘트롤러(5)내에서 통합되어 구성되는 것이 바람직하게 된다.
한편, 상기 콘트롤러(5)는 변속단감지센서(3)가 후진 상태에 위치되면, 비전센서(1)와 물체판단센서(2)에 배터리의 전원을 통전시켜 후방주차영역(P)에 대한 정보를 전송하도록 함은 물론이다.
이하 본 발명의 작동을 첨부된 도면을 참조로 상세히 설명한다.
본 발명은 차량을 후진하면서 좁은 주차 영역으로 주차하고자 할 때, 운전자는 후방주차영역(P)에 대해 화면과 놓여진 물체 위치 정보를 시각과 청각을 통해 확인하면서 주차할 수 있게 된다.
즉, 차량을 후진시키고자 후진 변속단으로 위치 이동된 변속레버를 변속단감지센서(3)가 감지해 콘트롤러(5)로 전기 신호를 보내게 되면, 상기 콘트롤러(5)는 비전센서(1)와 물체판단센서(2)에 배터리의 전원을 통전시켜 주게 된다.
이어, 도 3에 도시된 바와 같이 상기 비전센서(1)의 카메라는 차량의 후진 영역에 있는 후방주차영역(P)에 대한 화상 정보를 콘트롤러(5)로 보내주게 됨과 더불어, 상기 물체판단센서(2)의 각 제1·2·3·4소자(2a,2b,2c,2d)는 초음파를 후방주차영역(P)으로 발사해 놓여진 물체의존재 여부를 콘트롤러(5)로 보내주게 된다.
이어, 상기 콘트롤러(5)는 비전센서(1)의 화상 정보와 물체판단센서(2)의 각 제1·2·3·4소자(2a,2b,2c,2d)가 각각 보내온 신호에 따라 디스플레이(8)쪽으로 보내게 되고, 이에 따라 상기 디스플레이(8)는 후방주차영역(P)에 대한 화면과 감지된 물체의 위치를 화면의 물체위치영역(a,b,c,d)에 표시하여 운전자가 육안으로 확인하면서 후진시켜 주도록 한다.
이때, 상기 콘트롤러(5)로 입력된 비전센서(1)의 화상신호는 화상처리ECU(6)를 통해 처리됨과 더불어 물체판단센서(2)를 통해 입력된 신호는 물체처리ECU(7)에 의해 처리된 후, 상기 화상처리ECU(6)의 화상 정보에 물체처리ECU(7)의 물체 위치 정보를 오버랩(Over Lap)시켜 디스플레이(8)의 화면으로 표시해 주게 된다.
이후, 상기 물체판단센서(2)의 제1·2·3·4소자(2a,2b,2c,2d)중 한 소자 예를 들어, 제1소자(2a)가 후방주차영역(P)에서 물체를 발견하면 도 3에 도시된 바와 같이 디스플레이(8)의 화면상 제일 좌측부위영역인 물체위치영역(a)에 표시하여주게 된다.
이어, 상기 콘트롤러(5)가 후방주차영역(P)중 제일 좌측부위영역인 물체위치영역(a)에 물체가 감지되면 조향휠의 조타각에 대한 정보를 이용해 만약, 운전자가 차량을 물체가 감지된 부위쪽으로 이동시키려고 하는 경우에는 콘트롤러(5)는 물체판단센서(2)의 제1소자(2a)에서 감지된 신호에 따라 경고기(9)인 부저(Buzzer)를 통해 소리를 발생시켜 물체에 대해 운전자에게 인식시켜 조향휠의 조작에 대한 주의를 주게 된다.
이상 설명한 바와 같이 본 발명에 의하면, 주차 영역에 대한 화면을 보여주면서 주차 영역에 위치된 물체에 대한 위치 표시와 함께 후진 차량의 위치 불안정시 청각적으로 경고를 해, 좁은 주차 영역으로 차량을 후진할 때 발생하는 불안정한 시각과 물체에 대한 미 인식을 완전히 해소하여 항상 안전한 후진 주차를 행할 수 있는 효과가 있게 된다.

Claims (3)

  1. 차량의 후방부위에 장착되어 후방주차영역(P)에 대한 화면을 송출하는 CCD 카메라인 비전센서(1)와;
    차량의 후방부위에 다수개로 장착되어 후방주차영역(P)에 위치된 물체를 감지하여 송출하는 물체판단센서(2);
    차량의 후진 여부와 차륜의 조향정도를 알 수 있도록 변속단과 조향각을 각각 측정하는 변속단감지센서(3)와 조향각센서(4)로 이루어진 차량상태센서 및;
    상기 각 센서(1,2,3,4)들의 신호를 통해 차량의 후진 주차시 후방주차영역(P)에 대한 정보를 입력받는 콘트롤러(5)와, 상기 콘트롤러(5)를 통해 처리된 신호를 전송받아 후방주차영역(P)에 대한 화면과 감지된 물체의 위치를 화면의 물체위치영역(a,b,c,d)에 표시하여 운전자가 육안으로 확인하도록 하는 디스플레이(8) 및 상기 디스플레이(8)에 표시된 물체위치영역(a,b,c,d)을 통해 나타난 물체에 대한 운전자의 인식을 위해 소리를 발생하는 경고기(9)로 이루어진 정보제공수단;
    으로 구성되어진 차량의 이중 후방시계 안전 확보장치.
  2. 제 1항에 있어서, 상기 물체판단센서(2)는 비전센서(1)를 통해 보여지는 후방주차영역(P)에 대한 디스플레이(8)의 전체 화면을 등 간격으로 다수 분할하도록, 차량 후방부위에 일정 간격을 두고 다수로 구성된 초음파 송·수신 방식의 제1·2 ·3·4소자(2a,2b,2c,2d)로 이루어진 것을 특징으로 하는 차량의 이중 후방시계 안전 확보장치.
  3. 제 1항에 있어서, 상기 콘트롤러(5)에는 비전센서(1)를 통해 입력된 화상신호를 처리하는 화상처리ECU(6)와, 물체판단센서(2)를 통해 입력된 신호를 처리하는 물체처리ECU(7)를 별도로 구비한 것을 특징으로 하는 차량의 이중 후방시계 안전 확보장치.
KR1020050004579A 2005-01-18 2005-01-18 차량의 이중 후방시계 안전 확보장치 KR100610124B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020050004579A KR100610124B1 (ko) 2005-01-18 2005-01-18 차량의 이중 후방시계 안전 확보장치

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020050004579A KR100610124B1 (ko) 2005-01-18 2005-01-18 차량의 이중 후방시계 안전 확보장치

Publications (2)

Publication Number Publication Date
KR20060083675A KR20060083675A (ko) 2006-07-21
KR100610124B1 true KR100610124B1 (ko) 2006-08-09

Family

ID=37173982

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020050004579A KR100610124B1 (ko) 2005-01-18 2005-01-18 차량의 이중 후방시계 안전 확보장치

Country Status (1)

Country Link
KR (1) KR100610124B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111942288A (zh) * 2019-05-14 2020-11-17 欧特明电子股份有限公司 车辆影像系统及使用车辆影像的车辆定位方法

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100812236B1 (ko) * 2006-11-24 2008-03-13 주식회사 현대오토넷 후방 모니터링 장치를 이용한 후진 주차 유도 장치 및 그방법
KR100833552B1 (ko) * 2007-01-03 2008-05-29 대성전기공업 주식회사 후방시야 안전확보장치
CN110861587A (zh) * 2019-11-13 2020-03-06 浙江工业大学之江学院 一种车辆后视系统、车辆后视方法以及车辆
CN114319970B (zh) * 2022-01-13 2024-06-21 安徽中云智能科技有限公司 一种私家车泊车机

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1178693A (ja) 1997-09-16 1999-03-23 Niles Parts Co Ltd 車両用監視装置

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1178693A (ja) 1997-09-16 1999-03-23 Niles Parts Co Ltd 車両用監視装置

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111942288A (zh) * 2019-05-14 2020-11-17 欧特明电子股份有限公司 车辆影像系统及使用车辆影像的车辆定位方法
CN111942288B (zh) * 2019-05-14 2022-01-28 欧特明电子股份有限公司 车辆影像系统及使用车辆影像的车辆定位方法

Also Published As

Publication number Publication date
KR20060083675A (ko) 2006-07-21

Similar Documents

Publication Publication Date Title
KR101892763B1 (ko) 장애물 위치를 판단하는 방법과 장애물 위치 판단장치 및 주차 보조 방법과 주차 보조 시스템
US9035760B2 (en) Method and device for assisting a driver of a motor vehicle when he is removing his vehicle from a parking space, and motor vehicle
KR100610124B1 (ko) 차량의 이중 후방시계 안전 확보장치
KR100771276B1 (ko) 차량용 측면 거리감지 시스템 및 그 시스템에 사용되는타이어, 타이어휠 또는 휠커버
US20100253780A1 (en) Vehicle auxiliary device
KR20070041973A (ko) 센서를 이용한 주차 보조 장치 및 방법
KR20120036440A (ko) 자동차의 충돌 방지 장치
KR20070065343A (ko) 주차 공간 측정 및 차량의 주변 감시용 적외선 센서
JP2012126324A (ja) 車両運転者の運転能力判定方法及びシステム
WO2021092158A1 (en) Overhead obstacle detection and avoidance system for vehicles
KR101019608B1 (ko) 자동차의 충돌 경고방법
KR101803745B1 (ko) 사각지대 감지 장치 및 방법
US20150097702A1 (en) Blind spot sensing apparatus and method
KR20140078872A (ko) 차량의 통합제어장치 및 그의 제어방법
KR100976336B1 (ko) 자동차의 좌·우측 방향 위험 감지 및 경보장치
US11135883B2 (en) Vehicular sensing system with ultrasonic sensor at trailer hitch
KR101674592B1 (ko) 차량용 장애물 경보장치
KR101605553B1 (ko) 물체 검출장치 및 그 검출방법
JPS5836741A (ja) 車輛の斜後方障害物警報装置
JP2013242679A (ja) 障害物検知装置
KR101729306B1 (ko) 블랙박스를 이용하는 사각지대 감지 시스템
KR100483275B1 (ko) 차량용 레이더 시스템
KR20180061738A (ko) 차량의 후진 시 주차 안내방법
KR100204775B1 (ko) 자동차 후진시 장애물 경고장치
KR20150012657A (ko) 안전거리가 표시되는 과속 카메라

Legal Events

Date Code Title Description
A201 Request for examination
N231 Notification of change of applicant
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20120731

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20130731

Year of fee payment: 8

LAPS Lapse due to unpaid annual fee