KR102382560B1 - Traffic information combined analysis assistance system based on license plate number recognition - Google Patents

Traffic information combined analysis assistance system based on license plate number recognition Download PDF

Info

Publication number
KR102382560B1
KR102382560B1 KR1020200034703A KR20200034703A KR102382560B1 KR 102382560 B1 KR102382560 B1 KR 102382560B1 KR 1020200034703 A KR1020200034703 A KR 1020200034703A KR 20200034703 A KR20200034703 A KR 20200034703A KR 102382560 B1 KR102382560 B1 KR 102382560B1
Authority
KR
South Korea
Prior art keywords
information
vehicle
analysis
traffic
image
Prior art date
Application number
KR1020200034703A
Other languages
Korean (ko)
Other versions
KR20210117856A (en
Inventor
구성진
Original Assignee
구성진
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 구성진 filed Critical 구성진
Priority to KR1020200034703A priority Critical patent/KR102382560B1/en
Publication of KR20210117856A publication Critical patent/KR20210117856A/en
Application granted granted Critical
Publication of KR102382560B1 publication Critical patent/KR102382560B1/en

Links

Images

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/01Detecting movement of traffic to be counted or controlled
    • G08G1/017Detecting movement of traffic to be counted or controlled identifying vehicles
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/60Type of objects
    • G06V20/62Text, e.g. of license plates, overlay texts or captions on TV images
    • G06V20/625License plates
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/01Detecting movement of traffic to be counted or controlled
    • G08G1/0104Measuring and analyzing of parameters relative to traffic conditions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Chemical & Material Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Theoretical Computer Science (AREA)
  • Traffic Control Systems (AREA)
  • Image Analysis (AREA)

Abstract

본 발명은 차량번호 인식기반 교통정보 통합 분석지원 시스템을 제공한다. 이와 같은 본 발명에 따른 차량번호 인식기반 교통정보 통합 분석지원 시스템은 도로망을 구성하는 단위 차도의 도로영상정보로부터 추출되는 각각의 차량번호/차량객체에 시간정보와 위치식별번호 등의 메타데이터를 연동시킨 교통분석용 차번 정보단위체/교통분석용 차번 정보단위체를 데이터베이스화한 후, 시간/위치/차량번호를 기준으로 교통분석용 차번 정보단위체/교통분석용 차번 정보단위체에 대한 분류와 연산처리를 수행하여 교통분석프로그램용 입력정보나 교통분석정보를 산출함으로써 기본적인 교통정보뿐만 아니라 각종 분석상황에 맞추어진 파생적인 교통정보의 산출이 가능해지고, 하나의 시스템으로 통합적인 교통정보/차량 추적정보의 산출과 활용이 가능해지는 기술적 특징을 갖는다.The present invention provides a vehicle number recognition-based traffic information integrated analysis support system. As described above, the vehicle number recognition-based traffic information integrated analysis support system according to the present invention links metadata such as time information and location identification number to each vehicle number/vehicle object extracted from road image information of a unit road constituting a road network. After converting the vehicle number information unit for traffic analysis / vehicle number information unit for traffic analysis into a database, classification and operation processing are performed on the vehicle number information unit for traffic analysis / vehicle number information unit for traffic analysis based on time / location / vehicle number Thus, by calculating the input information or traffic analysis information for the traffic analysis program, it is possible to calculate not only basic traffic information but also derivative traffic information tailored to various analysis situations, and the calculation of integrated traffic information/vehicle tracking information and It has technical features that make it possible to use it.

Description

차량번호 인식기반 교통정보 통합 분석지원 시스템{Traffic information combined analysis assistance system based on license plate number recognition}Vehicle number recognition-based traffic information combined analysis assistance system based on license plate number recognition}

본 발명은 차량번호 인식기반 교통정보 통합 분석지원 시스템에 관한 것으로, 좀더 구체적으로는 도로망을 구성하는 단위 차도의 도로영상정보로부터 추출되는 각각의 차량번호/차량객체에 시간정보와 위치식별번호 등의 메타데이터를 연동시킨 교통분석용 차번 정보단위체/교통분석용 차번 정보단위체를 데이터베이스화한 후, 시간/위치/차량번호를 기준으로 교통분석용 차번 정보단위체/교통분석용 차번 정보단위체에 대한 분류와 연산처리를 수행하여 교통분석프로그램용 입력정보나 교통분석정보를 산출함으로써 기본적인 교통정보뿐만 아니라 각종 분석상황에 맞추어진 파생적인 교통정보의 산출이 가능해지고, 하나의 시스템으로 통합적인 교통정보/차량 추적정보의 산출과 활용이 가능해지는 차량번호 인식기반 교통정보 통합 분석지원 시스템에 관한 것이다.The present invention relates to a vehicle number recognition-based traffic information integrated analysis support system, and more specifically, to each vehicle number/vehicle object extracted from road image information of a unit road constituting a road network, time information and location identification number, etc. After databaseizing the vehicle number information unit for traffic analysis / vehicle number information unit for traffic analysis linked with metadata, classification and By calculating input information or traffic analysis information for a traffic analysis program by performing calculation processing, it becomes possible to calculate not only basic traffic information but also derivative traffic information tailored to various analysis situations, and integrated traffic information/vehicle tracking in one system It relates to a vehicle number recognition-based traffic information integrated analysis support system that enables calculation and utilization of information.

한정된 공간영역에 구축되어 있는 도로망에서 교통정체를 최소화하고, 합리적인 교통흐름을 유도하기 위해서는 교통정보를 수집하고 분석할 필요가 있다. 이와 같은 교통정보는 실시간으로 수집/분석되면서 도로망 내 교통신호를 실시간 제어하는데 활용되거나, 행정인력에 의한 교통 관리나 통제에 활용될 수 있다. 또한 일정기간 동안의 교통정보에 대한 수집/분석을 통해 도로망의 재구축과 신호체계의 개편을 도모할 수도 있다.It is necessary to collect and analyze traffic information in order to minimize traffic congestion and induce a reasonable traffic flow in the road network built in a limited spatial area. As such traffic information is collected/analyzed in real time, it can be used to control traffic signals in a road network in real time, or can be used for traffic management or control by administrative personnel. In addition, it is possible to reorganize the road network and reorganize the signal system by collecting/analyzing traffic information for a certain period of time.

따라서 교통정보의 수집과 분석을 위한 각종 기술들이 개발되어 사용되고 있는데, 이와 관련하여 대한민국 등록특허공보 등록번호 제10-1995813호 "영상 기반의 교통 정보 제공 시스템 및 그 방법", 등록번호 제10-1297321호 "교통 정보 수집 기능을 갖는 교통량 조사 장비" 등이 안출되어 있다.Accordingly, various technologies for the collection and analysis of traffic information have been developed and used. No. "Traffic volume survey equipment with traffic information collection function" and the like have been devised.

그러나 종래의 교통정보 수집/분석 관련기술의 경우, 기본적인 교통량 정보나 차종 정보 등에 한정하여 정보가 수집되고 분석되는 것임에 따라, 현실에서 발생되는 각종 도로상황, 건축물이나 기반시설물의 신축/변경에 따라 요구되는 다양한 분석상황에 맞추어진 파생적인 교통정보의 산출이 불가능한 단점이 있었다. However, in the case of the conventional traffic information collection/analysis related technology, information is collected and analyzed limited to basic traffic volume information or vehicle type information. There was a disadvantage in that it was impossible to calculate derivative traffic information tailored to the various analysis conditions required.

대한민국 등록특허공보 등록번호 제10-1995813호 "영상 기반의 교통 정보 제공 시스템 및 그 방법"Republic of Korea Patent Publication Registration No. 10-1995813 "Video-based traffic information providing system and method" 대한민국 등록특허공보 등록번호 제10-1297321호 "교통 정보 수집 기능을 갖는 교통량 조사 장비"Republic of Korea Patent Publication Registration No. 10-1297321 "Traffic volume survey equipment with traffic information collection function"

따라서 본 발명은 이와 같은 종래 기술의 문제점을 개선하여, 도로영역 영상프레임 내 차량번호가 추출되면서 메타데이터(시간정보, 위치식별정호)와 연동되어 교통분석용 차번 정보단위체가 산출되고, 차번정보 DB와 차번정보 분석장치에 의해 교통분석용 차번 정보단위체가 시간/위치/차량번호를 기준으로 분류되고 연산처리되면서 특정지점 교통량 정보, 특정지점 이동방향 별 교통량 정보, 특정지점 차종 별 교통량 정보, 특정지점 대기행열 정보, 특정지점 교통량 대 용량비(V/C), 도로구간별 평균 이동속도정보, 도로구간별 회전 교통량 정보 등의 통계정보와 분석정보나 차량 시계열 추적정보가 도출되는 정보처리 프로세스가 제공됨으로써 기본 교통정보와 각종 분석상황에 맞추어진 파생 교통정보가 신속하고 원활하게 산출될 수 있게 되고, 하나의 시스템으로 통합적인 교통정보/차량 추적정보의 산출과 활용이 가능해지는 새로운 형태의 차량번호 인식기반 교통정보 통합 분석지원 시스템을 제공하는 것을 목적으로 한다.Therefore, the present invention improves the problems of the prior art, and as the vehicle number in the image frame of the road area is extracted, it is linked with metadata (time information, location identification code) to calculate the vehicle number information unit for traffic analysis, and the vehicle number information DB And vehicle number information unit for traffic analysis is classified and calculated based on time/location/vehicle number by vehicle number information analysis device. Statistical information such as queue information, traffic volume to capacity ratio (V/C) at a specific point, average moving speed information for each road section, and rotational traffic volume information for each road section, as well as an information processing process from which analysis information or vehicle time series tracking information are derived, are provided. A new type of license plate recognition base that enables the calculation and utilization of basic traffic information and derivative traffic information tailored to various analysis situations quickly and smoothly, and enables the calculation and utilization of integrated traffic information/vehicle tracking information in one system The purpose of this is to provide an integrated traffic information analysis support system.

또한 본 발명은 차량번호의 미인식을 고려하여 도로영역 영상프레임로부터 차량객체도 추출되면서 메타데이터(시간정보, 위치식별정호)와 연동된 교통분석용 차번 정보단위체가 산출되고, 차량번호, 차량객체, 시간, 위치를 기준으로 교통분석용 차번 정보단위체가 분류되고 연산처리되면서 통계정보와 분석정보나 차량 시계열 추적정보가 도출되는 정보처리 프로세스가 제공됨으로써 시스템 오류나 외부환경요인에 의해 차량번호가 미인식된 상황에서도 기본 교통정보와 각종 분석상황에 맞추어진 파생 교통정보가 신속하고 원활하게 산출될 수 있게 되는 새로운 형태의 차량번호 인식기반 교통정보 통합 분석지원 시스템을 제공하는 것을 목적으로 한다.In addition, in the present invention, the vehicle number information unit for traffic analysis linked with metadata (time information, location identification code) is calculated while the vehicle object is also extracted from the road area image frame in consideration of the unrecognized vehicle number, the vehicle number, the vehicle object Vehicle number information units for traffic analysis are classified and calculated based on time and location, and an information processing process that derives statistical information, analysis information, or vehicle time series tracking information is provided. The purpose of this is to provide a new type of vehicle number recognition-based traffic information integrated analysis support system that can quickly and smoothly calculate basic traffic information and derived traffic information tailored to various analysis situations even in the current situation.

그리고 본 발명은 차량번호 분석에 의한 교통량 수치값 산출, 차종 분석에 의한 차종별 교통량 수치값 산출, 차량객체 카운팅에 의한 트랙픽 이미지 산출 등의 다중 분석경로를 통해 교통량 정보가 산출되도록 함으로써 다양한 외부환경조건에서도 교통량 정보가 높은 안정성으로 산출될 수 있게 되고, 다양한 분석상황에 맞추어진 교통량 정보의 제공이 가능해질 수 있는 새로운 형태의 차량번호 인식기반 교통정보 통합 분석지원 시스템을 제공하는 것을 목적으로 한다.In addition, the present invention allows the traffic volume information to be calculated through multiple analysis paths such as calculating the numerical value of the traffic volume by vehicle number analysis, calculating the numerical value of the traffic volume by vehicle type by analyzing the vehicle type, and calculating the traffic image by counting vehicle objects. The purpose of this is to provide a new type of vehicle number recognition-based integrated analysis support system for traffic information that enables traffic volume information to be calculated with high stability and to provide traffic volume information tailored to various analysis situations.

상술한 목적을 달성하기 위한 본 발명의 특징에 의하면, 본 발명은 도로에 설치되고, 화각 범위의 영역촬영으로 도로영역 영상프레임을 생성하며, 상기 도로영역 영상프레임에 메타데이터를 연동시킨 도로영상정보를 산출하되, 상기 메타데이터는 시간정보와 위치식별정보를 포함하는 촬영장치(100); 상기 촬영장치(100)의 도로영상정보를 입력받고, 도로영역 영상프레임에 대한 영상분석으로 차량번호를 추출하며, 추출된 차량번호에 해당 도로영역 영상프레임의 메타데이터를 부여한 교통분석용 차번 정보단위체를 산출하는 영상분석장치(200); 상기 영상분석장치(200)로부터 교통분석용 차번 정보단위체를 전달받아 데이터베이스화시키는 차번정보 DB(300); 상기 차번정보 DB(300)와 연동되어 동작하고, 시간, 위치, 차량번호 군(群) 중에서 선택된 어느 하나 이상의 정보요소를 기준으로 하여 상기 교통분석용 차번 정보단위체에 대한 분류와 연산처리를 수행하면서 교통분석프로그램용 입력정보와 교통분석정보 중에서 선택된 어느 하나를 산출하며, 필요시 동일 차량번호의 교통분석용 차번 정보단위체에 대한 시계열 추적정보를 산출하여 행정절차나 형사사법절차에서 활용할 수 있도록 하는 차번정보 분석장치(400);를 포함하는 것을 특징으로 하는 차량번호 인식기반 교통정보 통합 분석지원 시스템을 제공한다.According to a feature of the present invention for achieving the above object, the present invention is road image information installed on a road, generating a road region image frame by shooting a region of an angle of view, and linking metadata to the road region image frame a photographing apparatus 100 including time information and location identification information; A vehicle number information unit for traffic analysis that receives the road image information of the photographing device 100, extracts a vehicle number through image analysis of the road area image frame, and assigns metadata of the corresponding road area image frame to the extracted vehicle number an image analysis device 200 for calculating ; a vehicle number information DB 300 for receiving the vehicle number information unit for traffic analysis from the image analysis device 200 and converting it into a database; It operates in conjunction with the vehicle number information DB 300, and performs classification and calculation processing for the vehicle number information unit for traffic analysis based on any one or more information elements selected from time, location, and vehicle number group. Vehicle number that calculates any one selected from input information for traffic analysis program and traffic analysis information, and, if necessary, calculates time series tracking information for vehicle number information unit for traffic analysis of the same vehicle number so that it can be utilized in administrative or criminal justice procedures Information analysis device 400; provides a vehicle number recognition-based traffic information integrated analysis support system, characterized in that it includes.

이와 같은 본 발명에 따른 차량번호 인식기반 교통정보 통합 분석지원 시스템에서 상기 촬영장치(100)는 도로망을 구성되는 설정개수의 단위 차도 중에서 선택되는 단위 차도에 각각 할당되어 설치되는 것일 수 있으며, In the vehicle number recognition-based traffic information integrated analysis support system according to the present invention, the photographing device 100 may be installed by being allocated to a unit roadway selected from a set number of unit roadways constituting a road network,

상기 메타데이터의 시간정보는 촬영시각정보, 주야간 구분정보, 요일정보, 계절정보 군(群) 중에서 선택된 어느 하나 이상의 정보로 구성되는 것이고, 상기 메타데이터의 위치식별정보는 상기 촬영장치(100)가 위치한 단위 차도의 수리적 위치값 정보, 촬영장치 ID정보, 단위 차도 ID정보 군(群) 중에서 선택된 어느 하나 이상의 정보로 구성되는 것일 수 있다.The time information of the metadata is composed of at least one information selected from the group of photographing time information, day/night classification information, day information, and season information, and the location identification information of the metadata is provided by the photographing device 100 It may be composed of one or more pieces of information selected from the group of hydraulic position value information of the located unit roadway, photographing device ID information, and the unit roadway ID information group.

이와 같은 본 발명에 따른 차량번호 인식기반 교통정보 통합 분석지원 시스템에서 상기 차번정보 분석장치(400)는 특정지점 교통량 정보, 특정지점 이동방향 별 교통량 정보, 특정지점 차종 별 교통량 정보, 특정지점 대기행열 정보, 특정지점 교통량 대 용량비(V/C), 도로구간별 평균 이동속도정보, 도로구간별 회전 교통량 정보를 포함할 수 있는 통계정보와 분석정보로 이루어지는 교통분석정보로 생성하거나, 해당 교통분석정보의 산출을 위한 교통분석프로그램용 입력정보를 생성할 수 있다.In the vehicle number recognition-based integrated traffic information analysis support system according to the present invention, the vehicle number information analysis device 400 includes traffic volume information at a specific point, traffic volume information by movement direction at a specific point, traffic volume information by vehicle type at a specific point, and queue at a specific point. Information, traffic volume-to-capacity ratio (V/C) at a specific point, average moving speed information for each road section, and traffic analysis information consisting of statistical information and analysis information that can include rotational traffic volume information for each road section, or the traffic analysis information It is possible to create input information for a traffic analysis program for the calculation of

이와 같은 본 발명에 따른 차량번호 인식기반 교통정보 통합 분석지원 시스템에서 상기 차번정보 분석장치(400)는, 동일한 위치식별정보를 가지면서 설정된 시간정보 구간에 소속된 교통분석용 차번 정보단위체의 개수를 하나 이상의 분석항목 별로 카운팅한 차번 계수정보를 교통분석프로그램용 입력정보로 산출하거나, 상기 차번 계수정보로부터 특정지점 교통량 정보를 교통분석정보로 산출하는 교통량정보 분석유닛(410); 동일 차량번호의 시간 경과에 따른 위치식별정보의 변동을 추적하고, 시간적으로 선후 관계에 있는 2개의 위치식별정보 간 시간 간격을 통해 이동속도정보를 산출하되, 동일한 2개의 위치식별정보 간 복수의 동일 차량번호의 이동속도정보의 평균값으로 도로구간별 평균 이동속도정보를 산출하게 되는 이동속도 분석유닛(420); 상기 교통분석용 차번 정보단위체의 차량번호에 포함된 차종식별기호를 추출하고, 상기 차종식별기호로부터 산출되는 차종정보를 교통분석용 차번 정보단위체에 연동시키는 차종정보 분석유닛(430);을 포함하는 구성으로 이루어질 수 있다.In the vehicle number recognition-based traffic information integrated analysis support system according to the present invention, the vehicle number information analysis device 400 includes the same location identification information and the number of vehicle number information units for traffic analysis belonging to the set time information section. a traffic volume information analysis unit 410 for calculating vehicle number counting information counted for each of one or more analysis items as input information for a traffic analysis program, or calculating traffic volume information at a specific point from the vehicle number counting information as traffic analysis information; Track the change of location identification information over time of the same vehicle number, and calculate the movement speed information through the time interval between two location identification information that are temporally precedent, but between the two identical location identification information a moving speed analysis unit 420 that calculates the average moving speed information for each road section as an average value of the moving speed information of the vehicle number; A vehicle model information analysis unit 430 for extracting a vehicle model identification symbol included in the vehicle number of the vehicle number information unit for traffic analysis and linking the vehicle model information calculated from the vehicle model identification symbol to the vehicle number information unit for traffic analysis; including; configuration can be made.

여기서 교통량정보 분석유닛(410)은 상기 차종정보 분석유닛(430)와 연동되어 특정지점 차종 별 교통량 정보를 산출할 수 있다.Here, the traffic volume information analysis unit 410 may be linked with the vehicle model information analysis unit 430 to calculate the traffic volume information for each vehicle type at a specific point.

이와 같은 본 발명에 따른 차량번호 인식기반 교통정보 통합 분석지원 시스템에서 상기 영상분석장치(200)는 도로영역 영상프레임에 대한 영상분석으로 차량 객체와 차량번호를 추출한 후, 추출된 차량 객체의 이동방향 정보를 직전, 우회전, 좌회전으로 구분하여 검출하고, 상기 교통분석용 차번 정보단위체에 차량 객체의 이동방향 정보를 부가하며, In the vehicle number recognition-based traffic information integrated analysis support system according to the present invention, the image analysis device 200 extracts the vehicle object and vehicle number through image analysis of the road area image frame, and then the movement direction of the extracted vehicle object Information is divided into immediately preceding, right turn, and left turn and detected, and movement direction information of the vehicle object is added to the vehicle number information unit for traffic analysis,

상기 차번정보 분석장치(400)는 시간, 위치, 차량번호, 이동방향 군(群) 중에서 선택된 어느 하나 이상의 정보요소를 기준으로 하여 상기 교통분석용 차번 정보단위체에 대한 분류와 연산처리를 수행하면서 교통분석프로그램용 입력정보와 교통분석정보 중에서 선택된 어느 하나를 산출할 수 있다.The vehicle number information analysis device 400 classifies and calculates the vehicle number information unit for traffic analysis on the basis of any one or more information elements selected from time, location, vehicle number, and movement direction group. Any one selected from the input information for the analysis program and the traffic analysis information can be calculated.

이와 같은 본 발명에 따른 차량번호 인식기반 교통정보 통합 분석지원 시스템에서 상기 촬영장치(100)는 동영상 영역촬영으로 설정 fps의 도로영역 영상프레임을 생성할 수 있다.As described above, in the vehicle number recognition-based traffic information integrated analysis support system according to the present invention, the photographing device 100 may generate a road area image frame of a set fps by video area recording.

이와 같은 본 발명에 따른 차량번호 인식기반 교통정보 통합 분석지원 시스템은 상기 촬영장치(100)에 구비되어 상기 도로영상정보를 저장하는 도로영상정보 단위DB(500);를 포함하되, 상기 영상분석장치(200)는 상기 촬영장치(100)와 상기 차번정보 분석장치(400) 중에서 선택된 어느 하나에 구비되어 상기 도로영상정보 단위DB(500)로부터 도로영상정보를 전달받아 교통분석용 차번 정보단위체를 산출하고, 상기 차번정보 DB(300)는 상기 촬영장치(100)와 상기 차번정보 분석장치(400) 중에서 선택된 어느 하나에 구비되어 상기 교통분석용 차번 정보단위체를 전달받게 될 수 있다.The vehicle number recognition-based traffic information integrated analysis support system according to the present invention is provided in the photographing device 100 and includes a road image information unit DB 500 for storing the road image information; including, the image analysis device 200 is provided in any one selected from the photographing device 100 and the vehicle number information analysis apparatus 400 to receive road image information from the road image information unit DB 500 to calculate a vehicle number information unit for traffic analysis In addition, the vehicle number information DB 300 may be provided in any one selected from the photographing device 100 and the vehicle number information analysis device 400 to receive the vehicle number information unit for traffic analysis.

이와 같은 본 발명에 따른 차량번호 인식기반 교통정보 통합 분석지원 시스템은 상기 도로영상정보 단위DB(500)로부터 도로영상정보를 전달받아 데이터베이스화하는 도로영상정보 통합DB(600);를 더 포함하되, 상기 영상분석장치(200)는 상기 도로영상정보 통합DB(600)로부터 도로영상정보를 전달받아 교통분석용 차번 정보단위체를 산출할 수 있다.The vehicle number recognition-based traffic information integrated analysis support system according to the present invention as described above further includes; The image analysis apparatus 200 may receive the road image information from the road image information integrated DB 600 to calculate a vehicle number information unit for traffic analysis.

이와 같은 본 발명에 따른 차량번호 인식기반 교통정보 통합 분석지원 시스템에서 상기 차번정보 분석장치(400)는 상기 도로영상정보 통합DB(600)와 네트워크 통신망으로 연결되어 상기 도로영상정보를 전송받는 서버로 기능할 수 있다.In the vehicle number recognition-based integrated traffic information analysis support system according to the present invention, the vehicle number information analysis device 400 is connected to the road image information integrated DB 600 and a network communication network to a server that receives the road image information. can function

이와 같은 본 발명에 따른 차량번호 인식기반 교통정보 통합 분석지원 시스템에서 상기 촬영장치(100)는, 화각 범위의 영역촬영을 수행하는 카메라(110); 상기 카메라(110)로부터 도로영역 영상프레임를 전달받고, 촬영장치 별로 미리 설정되어 있는 메타데이터를 상기 도로영역 영상프레임에 할당하여 도로영상정보를 산출하는 컨트롤러(120); 상기 도로영상정보 단위DB(500)로 구현되는 저장매체(130);를 포함하는 구성으로 이루어질 수 있다.In the vehicle number recognition-based traffic information integrated analysis support system according to the present invention, the photographing device 100 includes: a camera 110 for photographing an area within an angle of view; a controller 120 that receives the road area image frame from the camera 110 and calculates road image information by allocating metadata preset for each photographing device to the road area image frame; A storage medium 130 implemented as the road image information unit DB 500; may be configured to include.

이와 같은 본 발명에 따른 차량번호 인식기반 교통정보 통합 분석지원 시스템에서 상기 영상분석장치(200)는, 상기 도로영역 영상프레임에 대한 영상분석을 통해 차량 객체를 추출하는 차량인식 알고리즘(211)이 구비되고, 상기 도로영상정보의 입력에 따라 상기 차량인식 알고리즘(211)이 동작하면서 차량 객체 이미지영역을 검출하는 차량객체 검출모듈(210); 차량 객체 이미지영역에 대한 영상분석을 통해 차량번호를 추출하는 차량번호인식 알고리즘(221)이 구비되고, 상기 차량객체 검출모듈(210)로부터 전달되는 차량 객체 이미지영역의 입력에 따라 상기 차량번호인식 알고리즘(221)이 동작하면서 차량번호 텍스트정보를 검출하는 차량번호 검출모듈(220); 상기 도로영상정보에 포함된 메타데이터와 상기 도로영상정보로부터 검출된 차량번호 텍스트정보를 연동시킨 교통분석용 차번 정보단위체를 산출하는 교통분석용 차번 정보단위체 산출모듈;을 포함하는 구성으로 이루어질 수 있다. 여기서 차량객체 검출모듈(210)을 구비하지 않을 수도 있는데, 이 경우 상기 영상분석장치(200)는, 상기 도로영역 영상프레임에 대한 영상분석을 통해 차량번호를 추출하는 차량번호인식 알고리즘(221)이 구비되고, 상기 도로영역 영상프레임의 입력에 따라 상기 차량번호인식 알고리즘(221)이 동작하면서 차량번호 텍스트정보를 검출하는 차량번호 검출모듈(220); 상기 도로영상정보에 포함된 메타데이터와 상기 도로영상정보로부터 검출된 차량번호 텍스트정보를 연동시킨 교통분석용 차번 정보단위체를 산출하는 교통분석용 차번 정보단위체 산출모듈;을 포함하는 구성으로 이루어질 수 있다.In the vehicle number recognition-based traffic information integrated analysis support system according to the present invention, the image analysis apparatus 200 includes a vehicle recognition algorithm 211 for extracting a vehicle object through image analysis of the road area image frame. a vehicle object detection module 210 for detecting a vehicle object image area while the vehicle recognition algorithm 211 operates according to the input of the road image information; A vehicle number recognition algorithm 221 for extracting a vehicle number through image analysis of the vehicle object image area is provided, and the vehicle number recognition algorithm according to the input of the vehicle object image area transmitted from the vehicle object detection module 210 Vehicle number detection module 220 for detecting the vehicle number text information while 221 operates; A vehicle number information unit calculation module for traffic analysis that calculates a vehicle number information unit for traffic analysis in which the metadata included in the road image information and the vehicle number text information detected from the road image information are linked . Here, the vehicle object detection module 210 may not be provided. In this case, the image analysis device 200 has a vehicle number recognition algorithm 221 that extracts a vehicle number through image analysis of the road area image frame. a vehicle number detection module 220 provided and configured to detect vehicle number text information while the vehicle number recognition algorithm 221 operates according to the input of the road area image frame; A vehicle number information unit calculation module for traffic analysis that calculates a vehicle number information unit for traffic analysis in which the metadata included in the road image information and the vehicle number text information detected from the road image information are linked .

상술한 목적을 달성하기 위한 본 발명의 다른 특징에 의하면, 본 발명은 도로에 설치되고, 화각 범위의 영역촬영으로 도로영역 영상프레임을 생성하며, 상기 도로영역 영상프레임에 메타데이터를 연동시킨 도로영상정보를 산출하되, 상기 메타데이터는 시간정보와 위치정보를 포함하는 촬영장치(100); 상기 촬영장치(100)의 도로영상정보를 입력받고, 도로영역 영상프레임에 대한 영상분석으로 차량 객체와 차량번호를 추출하며, 추출된 차량 객체와 차량 번호 중에서 선택된 어느 하나에 해당 도로영역 영상프레임의 메타데이터를 부여한 교통분석용 차번 정보단위체를 산출하는 영상분석장치(200); 상기 영상분석장치(200)로부터 교통분석용 차번 정보단위체를 전달받아 데이터베이스화시키는 교통분석용 차번 정보단위체 DB(300'); 상기 교통분석용 차번 정보단위체 DB(300')와 연동되어 동작하고, 시간, 위치, 차량 객체, 차량번호 군(群) 중에서 선택된 어느 하나 이상의 정보요소를 기준으로 하여 상기 교통분석용 차번 정보단위체에 대한 분류와 연산처리를 수행하면서 교통분석프로그램용 입력정보와 교통분석정보 중에서 선택된 어느 하나를 산출하는 차량 객체/번호 분석장치(400');를 포함하는 것을 특징으로 하는 차량번호 인식기반 교통정보 통합 분석지원 시스템을 제공한다.According to another feature of the present invention for achieving the above object, the present invention is a road image installed on a road, generating a road region image frame by shooting a region of an angle of view, and linking metadata to the road region image frame a photographing apparatus 100 that calculates information, wherein the metadata includes time information and location information; Receives road image information of the photographing device 100, extracts a vehicle object and vehicle number through image analysis on the road area image frame, and selects any one selected from the extracted vehicle object and vehicle number of the corresponding road area image frame. an image analysis device 200 for calculating a vehicle number information unit for traffic analysis to which metadata is assigned; a vehicle number information unit DB (300') for traffic analysis that receives the vehicle number information unit for traffic analysis from the image analysis device 200 and converts it into a database; The vehicle number information unit for traffic analysis operates in conjunction with the DB 300', and based on any one or more information elements selected from time, location, vehicle object, and vehicle number group, the vehicle number information unit for traffic analysis is Vehicle object/number analysis device 400 ′ that calculates any one selected from input information for a traffic analysis program and traffic analysis information while performing classification and calculation processing for vehicle number recognition-based traffic information integration, characterized in that it includes; An analysis support system is provided.

이와 같은 본 발명에 따른 차량번호 인식기반 교통정보 통합 분석지원 시스템에서 상기 영상분석장치(200)는, 상기 도로영역 영상프레임에 대한 영상분석을 통해 차량 객체를 추출하는 차량인식 알고리즘(211)이 구비되고, 상기 도로영상정보의 입력에 따라 상기 차량인식 알고리즘(211)이 동작하면서 차량 객체 이미지영역을 검출하는 차량객체 검출모듈(210); 차량 객체 이미지영역에 대한 영상분석을 통해 차량번호를 추출하는 차량번호인식 알고리즘(221)이 구비되고, 상기 차량객체 검출모듈(210)로부터 전달되는 차량 객체 이미지영역의 입력에 따라 상기 차량번호인식 알고리즘(221)이 동작하면서 차량번호 텍스트정보를 검출하는 차량번호 검출모듈(220); 상기 도로영상정보에 포함된 메타데이터와 상기 도로영상정보로부터 검출된 차량번호 텍스트정보를 연동시킨 교통분석용 차번 정보단위체를 산출하는 교통분석용 차번 정보단위체 산출모듈(250);을 포함하는 구성으로 이루어질 수 있다.In the vehicle number recognition-based traffic information integrated analysis support system according to the present invention, the image analysis apparatus 200 includes a vehicle recognition algorithm 211 for extracting a vehicle object through image analysis of the road area image frame. a vehicle object detection module 210 for detecting a vehicle object image area while the vehicle recognition algorithm 211 operates according to the input of the road image information; A vehicle number recognition algorithm 221 for extracting a vehicle number through image analysis of the vehicle object image area is provided, and the vehicle number recognition algorithm according to the input of the vehicle object image area transmitted from the vehicle object detection module 210 A vehicle number detection module 220 for detecting vehicle number text information while 221 operates; A vehicle number information unit calculation module for traffic analysis 250 for calculating a vehicle number information unit for traffic analysis in which the metadata included in the road image information and the vehicle number text information detected from the road image information are linked can be done

이와 같은 본 발명에 따른 차량번호 인식기반 교통정보 통합 분석지원 시스템에서 상기 영상분석장치(200)는, 상기 도로영역 영상프레임에 대한 영상분석을 통해 차량 객체를 추출하는 차량인식 알고리즘(211)이 구비되고, 상기 도로영상정보의 입력에 따라 상기 차량인식 알고리즘(211)이 동작하면서 차량 객체 이미지영역을 검출하는 차량객체 검출모듈(210); 차량 객체 이미지영역에 영상분석을 통해 차량객체 특성정보를 추출하는 차량특성정보 추출알고리즘(231)이 구비되고, 상기 차량객체 검출모듈(210)로부터 전달되는 차량 객체 이미지영역의 입력에 따라 상기 차량특성정보 추출알고리즘(231)이 동작하면서 차량객체 특성정보를 검출하되, 상기 차량객체 특성정보는 차종정보, 크기정보, 색상정보 군(群) 중에서 선택된 어느 하나 이상을 포함하는 차량특성정보 검출모듈(230); 차량객체 특성정보가 검출된 차량 객체에 객체 식별번호를 부여한 다음, 상기 도로영상정보에 포함된 메타데이터와 상기 도로영상정보로부터 검출된 객체 식별번호를 연동시킨 교통분석용 차번 정보단위체를 산출하는 교통분석용 차번 정보단위체 산출모듈(250);을 포함하고,In the vehicle number recognition-based traffic information integrated analysis support system according to the present invention, the image analysis apparatus 200 includes a vehicle recognition algorithm 211 for extracting a vehicle object through image analysis of the road area image frame. a vehicle object detection module 210 for detecting a vehicle object image area while the vehicle recognition algorithm 211 operates according to the input of the road image information; A vehicle characteristic information extraction algorithm 231 for extracting vehicle object characteristic information through image analysis is provided in the vehicle object image area, and according to the input of the vehicle object image area transmitted from the vehicle object detection module 210, the vehicle characteristics A vehicle characteristic information detection module 230 that detects vehicle object characteristic information while the information extraction algorithm 231 operates, wherein the vehicle object characteristic information includes at least one selected from the group of vehicle model information, size information, and color information ); Traffic that calculates a vehicle number information unit for traffic analysis by assigning an object identification number to a vehicle object in which vehicle object characteristic information is detected, and then linking the metadata included in the road image information and the object identification number detected from the road image information Including a vehicle number information unit calculation module 250 for analysis;

상기 차량 객체/번호 분석장치(400')는 시간, 위치, 차량객체 특성정보, 객체 식별번호, 차량번호 군(群) 중에서 선택된 어느 하나 이상의 정보요소를 기준으로 하여 상기 교통분석용 차번 정보단위체에 대한 분류와 연산처리를 수행하면서 교통분석프로그램용 입력정보와 교통분석정보 중에서 선택된 어느 하나를 산출할 수 있다.The vehicle object / number analysis device 400' is based on any one or more information elements selected from time, location, vehicle object characteristic information, object identification number, and vehicle number group to the vehicle number information unit for traffic analysis. It is possible to calculate any one selected from input information for a traffic analysis program and traffic analysis information while performing classification and calculation processing for the data.

이와 같은 본 발명에 따른 차량번호 인식기반 교통정보 통합 분석지원 시스템에서 상기 영상분석장치(200)는, 상기 도로영역 영상프레임에 대한 영상분석을 통해 차량 객체를 추출하는 차량인식 알고리즘(211)이 구비되고, 상기 도로영상정보의 입력에 따라 상기 차량인식 알고리즘(211)이 동작하면서 차량 객체 이미지영역을 검출하는 차량객체 검출모듈(210); 상기 차량객체 검출모듈(210)에 의한 차량 객체 이미지영역 검출시 차량객체 카운팅정보를 산출하는 차량카운팅정보 산출알고리즘(241)이 구비되고, 상기 차량객체 검출모듈(210)로부터 전달되는 차량 객체 이미지영역의 입력에 따라 상기 차량카운팅정보 산출알고리즘(241)이 동작하면서 차량객체 카운팅정보를 산출하는 차량카운팅정보 산출모듈(240); 차량객체 카운팅정보가 검출된 차량 객체에 객체 식별번호를 부여한 다음, 상기 도로영상정보에 포함된 메타데이터와 상기 도로영상정보로부터 검출된 객체 식별번호를 연동시킨 교통분석용 차번 정보단위체를 산출하는 교통분석용 차번 정보단위체 산출모듈(250);을 포함하고,In the vehicle number recognition-based traffic information integrated analysis support system according to the present invention, the image analysis apparatus 200 includes a vehicle recognition algorithm 211 for extracting a vehicle object through image analysis of the road area image frame. a vehicle object detection module 210 for detecting a vehicle object image area while the vehicle recognition algorithm 211 operates according to the input of the road image information; A vehicle counting information calculation algorithm 241 for calculating vehicle object counting information when the vehicle object image area is detected by the vehicle object detection module 210 is provided, and the vehicle object image area transmitted from the vehicle object detection module 210 is provided. a vehicle counting information calculation module 240 for calculating vehicle object counting information while the vehicle counting information calculation algorithm 241 operates according to the input of; Traffic that calculates a vehicle number information unit for traffic analysis by assigning an object identification number to a vehicle object in which vehicle object counting information is detected, and then linking the metadata included in the road image information and the object identification number detected from the road image information Including a vehicle number information unit calculation module 250 for analysis;

상기 차량 객체/번호 분석장치(400')는 시간, 위치, 차량객체 카운팅정보, 객체 식별번호, 차량번호 군(群) 중에서 선택된 어느 하나 이상의 정보요소를 기준으로 하여 상기 교통분석용 차번 정보단위체에 대한 분류와 연산처리를 수행하면서 교통분석프로그램용 입력정보와 교통분석정보 중에서 선택된 어느 하나를 산출할 수 있다.The vehicle object / number analysis device 400' is based on any one or more information elements selected from time, location, vehicle object counting information, object identification number, and vehicle number group to the vehicle number information unit for traffic analysis. It is possible to calculate any one selected from input information for a traffic analysis program and traffic analysis information while performing classification and calculation processing for the data.

이와 같은 본 발명에 따른 차량번호 인식기반 교통정보 통합 분석지원 시스템에서 상기 영상분석장치(200)는, 상기 도로영역 영상프레임에 대한 영상분석을 통해 차량 객체를 추출하는 차량인식 알고리즘(211)이 구비되고, 상기 도로영상정보의 입력에 따라 상기 차량인식 알고리즘(211)이 동작하면서 차량 객체 이미지영역을 검출하는 차량객체 검출모듈(210); 차량 객체 이미지영역에 대한 영상분석을 통해 차량번호를 추출하는 차량번호인식 알고리즘(221)이 구비되고, 상기 차량객체 검출모듈(210)로부터 전달되는 차량 객체 이미지영역의 입력에 따라 상기 차량번호인식 알고리즘(221)이 동작하면서 차량번호 텍스트정보를 검출하는 차량번호 검출모듈(220); 상기 차량번호 검출모듈(220)의 차량번호인식 알고리즘(221)에 의한 차량번호 추출이 불가능한 번호미인식 차량 객체 이미지영역에 영상분석을 통해 차량객체 특성정보를 추출하는 차량특성정보 추출알고리즘(231)이 구비되고, 상기 차량번호 검출모듈(220)로부터 전달되는 상기 번호미인식 차량 객체 이미지영역의 입력에 따라 상기 차량특성정보 추출알고리즘(231)이 동작하면서 차량객체 특성정보를 검출하되, 상기 차량객체 특성정보는 차종정보, 크기정보, 색상정보 군(群) 중에서 선택된 어느 하나 이상을 포함하는 차량특성정보 검출모듈(230); 상기 차량특성정보 검출모듈(230)의 차량특성정보 추출알고리즘(231)에 의한 차량객체 특성정보 추출이 불가능한 특성미인식 차량 객체 이미지영역 발생시 차량객체 카운팅정보를 산출하는 차량카운팅정보 산출알고리즘(241)이 구비되고, 상기 차량특성정보 검출모듈(230)로부터 전달되는 상기 특성미인식 차량 객체 이미지영역의 입력에 따라 상기 차량카운팅정보 산출알고리즘(241)이 동작하면서 차량객체 카운팅정보를 산출하는 차량카운팅정보 산출모듈(240); 차량객체 특성정보나 차량객체 카운팅정보가 검출된 차량 객체에 객체 식별번호를 부여하고, 상기 도로영상정보로부터 검출된 차량번호 텍스트정보나 객체 식별번호를 상기 도로영상정보에 포함된 메타데이터와 연동시켜 교통분석용 차번 정보단위체를 산출하는 교통분석용 차번 정보단위체 산출모듈(250);을 포함하고,In the vehicle number recognition-based traffic information integrated analysis support system according to the present invention, the image analysis apparatus 200 includes a vehicle recognition algorithm 211 for extracting a vehicle object through image analysis of the road area image frame. a vehicle object detection module 210 for detecting a vehicle object image area while the vehicle recognition algorithm 211 operates according to the input of the road image information; A vehicle number recognition algorithm 221 for extracting a vehicle number through image analysis of the vehicle object image area is provided, and the vehicle number recognition algorithm according to the input of the vehicle object image area transmitted from the vehicle object detection module 210 A vehicle number detection module 220 for detecting vehicle number text information while 221 operates; Vehicle characteristic information extraction algorithm (231) for extracting vehicle object characteristic information through image analysis in the number unrecognized vehicle object image area where vehicle number extraction is impossible by the vehicle number recognition algorithm 221 of the vehicle number detection module 220 is provided, and the vehicle characteristic information extraction algorithm 231 operates according to the input of the number unrecognized vehicle object image area transmitted from the vehicle number detection module 220 to detect vehicle object characteristic information, but the vehicle object The characteristic information includes: a vehicle characteristic information detection module 230 including at least one selected from vehicle model information, size information, and color information group; Vehicle counting information calculation algorithm (241) for calculating vehicle object counting information when a characteristic unrecognized vehicle object image region that cannot extract vehicle object characteristic information by the vehicle characteristic information extraction algorithm 231 of the vehicle characteristic information detection module 230 occurs vehicle counting information for calculating vehicle object counting information while the vehicle counting information calculation algorithm 241 operates according to the input of the characteristic unrecognized vehicle object image area transmitted from the vehicle characteristic information detection module 230 calculation module 240; An object identification number is assigned to a vehicle object in which vehicle object characteristic information or vehicle object counting information is detected, and the vehicle number text information or object identification number detected from the road image information is linked with metadata included in the road image information. A vehicle number information unit calculation module 250 for traffic analysis for calculating a vehicle number information unit for traffic analysis;

상기 차량 객체/번호 분석장치(400')는 시간, 위치, 차량객체 특성정보, 차량객체 카운팅정보, 객체 식별번호, 차량번호 군(群) 중에서 선택된 어느 하나 이상의 정보요소를 기준으로 상기 교통분석용 차번 정보단위체에 대한 분류와 연산처리를 통해 교통분석정보를 산출할 수 있다.The vehicle object/number analysis device 400' is for the traffic analysis based on any one or more information elements selected from time, location, vehicle object characteristic information, vehicle object counting information, object identification number, and vehicle number group. Traffic analysis information can be calculated through classification and calculation processing for vehicle number information units.

이와 같은 본 발명에 따른 차량번호 인식기반 교통정보 통합 분석지원 시스템에서 상기 차량 객체/번호 분석장치(400')는, 차량번호 분석프로세스, 차량객체 특성정보 분석프로세스, 차량객체 카운팅 프로세스를 수행하여 특정지점 교통량 정보, 특정지점 차종 별 교통량 정보를 산출하는 교통량정보 분석유닛(410);을 포함하되,In the vehicle number recognition-based traffic information integrated analysis support system according to the present invention, the vehicle object/number analysis device 400 ′ performs a vehicle number analysis process, a vehicle object characteristic information analysis process, and a vehicle object counting process to specify A traffic volume information analysis unit 410 for calculating the point traffic information, the specific point traffic volume information for each vehicle type;

상기 교통량정보 분석유닛(410)은, 동일한 위치식별정보를 가지면서 설정된 시간정보 구간에 소속된 교통분석용 차번 정보단위체의 개수를 하나 이상의 분석항목 별로 카운팅한 교통량 계수정보를 교통분석프로그램용 입력정보로 산출하거나, 상기 교통량 계수정보로부터 특정지점 교통량 정보를 교통분석정보로 산출하는 교통량 수치값 산출유닛(411); 동일한 위치식별정보를 가지면서 설정된 시간정보 구간에 소속된 교통분석용 차번 정보단위체의 개수를 하나 이상의 분석항목 별로 카운팅한 교통량 계수정보에 대응하는 교통량 트래픽 색상정보를 교통분석정보로 산출하는 트래픽 이미지 산출유닛(412);을 포함하는 구성으로 이루어질 수 있다.The traffic volume information analysis unit 410 counts the number of vehicle number information units for traffic analysis belonging to a set time information section while having the same location identification information for each one or more analysis items. or a traffic volume numerical value calculation unit 411 for calculating traffic volume information at a specific point from the traffic volume coefficient information as traffic analysis information; Traffic image calculation that calculates the traffic color information corresponding to the traffic volume coefficient information, which counts the number of vehicle number information units for traffic analysis belonging to the set time information section while having the same location identification information for one or more analysis items, as traffic analysis information unit 412; may be configured to include.

이와 같은 본 발명에 따른 차량번호 인식기반 교통정보 통합 분석지원 시스템에서 상기 영상분석장치(200)는 도로영역 영상프레임에 대한 영상분석으로 차량 객체와 차량번호를 추출한 후, 추출된 차량 객체의 이동방향 정보를 직전, 우회전, 좌회전으로 구분하여 검출하고, 상기 교통분석용 차번 정보단위체에 차량 객체의 이동방향 정보를 부가하며, 상기 차량 객체/번호 분석장치(400')는 시간, 위치, 차량객체, 차량번호, 이동방향 군(群) 중에서 선택된 어느 하나 이상의 정보요소를 기준으로 하여 상기 교통분석용 차번 정보단위체에 대한 분류와 연산처리를 수행하면서 교통분석프로그램용 입력정보와 교통분석정보 중에서 선택된 어느 하나를 산출할 수 있다.In the vehicle number recognition-based traffic information integrated analysis support system according to the present invention, the image analysis device 200 extracts the vehicle object and vehicle number through image analysis of the road area image frame, and then the movement direction of the extracted vehicle object The information is divided into immediately preceding, right turn, and left turn and is detected, and movement direction information of the vehicle object is added to the vehicle number information unit for traffic analysis, and the vehicle object/number analysis device 400 'is the time, location, vehicle object, Any one selected from input information for a traffic analysis program and traffic analysis information while performing classification and calculation processing for the vehicle number information unit for traffic analysis based on any one or more information elements selected from the vehicle number and movement direction group can be calculated.

이와 같은 본 발명에 따른 차량번호 인식기반 교통정보 통합 분석지원 시스템은 상기 촬영장치(100)에 구비되어 상기 도로영상정보를 저장하는 도로영상정보 단위DB(500); 상기 차량 객체/번호 분석장치(400')에 구비되고, 상기 도로영상정보 단위DB(500)로부터 도로영상정보를 전달받아 데이터베이스화하는 도로영상정보 통합DB(600);를 더 포함하되,The vehicle number recognition-based traffic information integrated analysis support system according to the present invention includes: a road image information unit DB 500 provided in the photographing device 100 to store the road image information; It is provided in the vehicle object / number analysis device 400 ', the road image information unit DB 500 receives the road image information from the road image information integrated DB (600) to make a database; further including,

상기 영상분석장치(200)는 상기 차량 객체/번호 분석장치(400')에 구비되어 상기 도로영상정보 통합DB(600)로부터 도로영상정보를 전달받아 교통분석용 차번 정보단위체를 산출하고, 상기 교통분석용 차번 정보단위체 DB(300')는 상기 차번정보 분석장치(400)에 구비되어 상기 교통분석용 차번 정보단위체를 전달받게 될 수 있다.The image analysis device 200 is provided in the vehicle object/number analysis device 400' to receive road image information from the road image information integration DB 600, calculate a vehicle number information unit for traffic analysis, and The vehicle number information unit DB 300' for analysis may be provided in the vehicle number information analysis device 400 to receive the vehicle number information unit for traffic analysis.

이와 같은 본 발명에 따른 차량번호 인식기반 교통정보 통합 분석지원 시스템에서 상기 도로영상정보 통합DB(600)는, 상기 도로영상정보를 동영상으로 저장하는 동영상 DB(610); 상기 영상분석장치(200)에 의해 추출되는 차량 객체 정지화면이미지를 차량객체 사진정보로 저장하는 차량객체 사진DB(620);를 포함하는 구성으로 이루어질 수 있다.In the vehicle number recognition-based traffic information integrated analysis support system according to the present invention, the integrated road image information DB 600 includes: a moving image DB 610 for storing the road image information as a moving image; The vehicle object photo DB 620 for storing the vehicle object still image extracted by the image analysis device 200 as vehicle object photo information; may be configured to include.

본 발명에 의한 차량번호 인식기반 교통정보 통합 분석지원 시스템에 의하면, 기본적인 교통정보뿐만 아니라 각종 분석상황에 맞추어진 파생적인 교통정보의 산출이 가능해질 뿐만 아니라, 기본 교통정보와 각종 분석상황에 맞추어진 파생 교통정보가 신속하고 원활하게 산출되는 효과가 있다. 그리고 본 발명은 하나의 시스템으로 통합적인 교통정보/차량 추적정보의 산출과 활용이 가능해지는 효과가 있다.According to the vehicle number recognition-based traffic information integrated analysis support system according to the present invention, it is possible to calculate not only basic traffic information but also derivative traffic information tailored to various analysis situations, as well as basic traffic information and various analysis situations. Derived traffic information has the effect of being quickly and smoothly calculated. In addition, the present invention has the effect of enabling the calculation and utilization of integrated traffic information/vehicle tracking information in one system.

또한 본 발명에 의한 차량번호 인식기반 교통정보 통합 분석지원 시스템에 의하면, 시스템 오류나 외부환경요인에 의해 차량번호가 미인식된 상황에서도 기본 교통정보와 파생 교통정보를 신속하고 원활하게 산출할 수 있게 된다. 특히 본 발명은 차량번호 분석에 의한 교통량 수치값 산출, 차종 분석에 의한 차종별 교통량 수치값 산출, 차량객체 카운팅에 의한 트랙픽 이미지 산출 등의 다중 분석경로를 통해 교통량 정보가 산출되도록 하므로, 다양한 외부환경조건에서도 교통량 정보가 높은 안정성으로 산출되고, 다양한 분석상황에 맞추어진 교통량 정보의 제공이 가능해지는 효과가 있다.In addition, according to the vehicle number recognition-based traffic information integrated analysis support system according to the present invention, basic traffic information and derived traffic information can be quickly and smoothly calculated even in a situation where the vehicle number is not recognized due to system errors or external environmental factors. . In particular, the present invention allows the traffic volume information to be calculated through multiple analysis paths such as calculating the numerical value of the traffic volume by vehicle number analysis, calculating the numerical value of the traffic volume by vehicle type by analyzing the vehicle type, and calculating the traffic image by counting the vehicle object. Also, traffic volume information is calculated with high stability, and it has the effect of enabling the provision of traffic volume information tailored to various analysis situations.

도 1은 본 발명의 제1실시예에 따른 차량번호 인식기반 교통정보 통합 분석지원 시스템의 기본구성 블록도;
도 2는 촬영장치의 도로망 배치 예시도;
도 3은 교통분석용 차번 정보단위체의 생성구조을 보여주기 위한 도면;
도 4는 본 발명의 제1실시예에 따른 차번정보 분석장치의 구성 블록도;
도 5와 도 6은 본 발명의 제1실시예에 따른 차량번호 인식기반 교통정보 통합 분석지원 시스템의 세부 구성배치 예시도;
도 7은 본 발명의 제1실시예에 따른 촬영장치의 구성 블록도;
도 8과 도 9는 본 발명의 제1실시예에 따른 영상분석장치의 구성 블록도;
도 10은 본 발명의 제2실시예에 따른 차량번호 인식기반 교통정보 통합 분석지원 시스템의 기본구성 블록도;
도 11과 도 12는 본 발명의 제2실시예에 따른 영상분석장치의 구성 블록도;
도 13은 본 발명의 제2실시예에 따른 차량 객체/번호 분석장치의 주요부 구성 블록도;
도 14는 본 발명의 제2실시예에 따른 차량번호 인식기반 교통정보 통합 분석지원 시스템의 세부 구성배치 예시도;
도 15는 본 발명의 제2실시예에 따른 차량번호 인식기반 교통정보 통합 분석지원 시스템의 데이터베이스 배치구조를 보여주기 위한 블록도이다.
1 is a block diagram of a basic configuration of a vehicle number recognition-based traffic information integrated analysis support system according to a first embodiment of the present invention;
Figure 2 is an exemplary diagram of the arrangement of the road network of the photographing device;
3 is a diagram showing the generation structure of a vehicle number information unit for traffic analysis;
4 is a block diagram of a vehicle number information analyzing apparatus according to a first embodiment of the present invention;
5 and 6 are diagrams illustrating detailed configuration and arrangement of the vehicle number recognition-based traffic information integrated analysis support system according to the first embodiment of the present invention;
7 is a block diagram of the photographing apparatus according to the first embodiment of the present invention;
8 and 9 are block diagrams of the image analysis apparatus according to the first embodiment of the present invention;
10 is a block diagram of a basic configuration of a vehicle number recognition-based traffic information integrated analysis support system according to a second embodiment of the present invention;
11 and 12 are block diagrams of an image analysis apparatus according to a second embodiment of the present invention;
13 is a block diagram of a main part of a vehicle object/number analysis apparatus according to a second embodiment of the present invention;
14 is an exemplary diagram of detailed configuration and arrangement of a vehicle number recognition-based traffic information integrated analysis support system according to a second embodiment of the present invention;
15 is a block diagram illustrating a database arrangement structure of a vehicle number recognition-based integrated traffic information analysis support system according to a second embodiment of the present invention.

이하, 본 발명의 실시예를 첨부된 도면 도 1 내지 도 15에 의거하여 상세히 설명한다. 한편, 도면과 상세한 설명에서 일반적인 교통정보 분석시스템, 교통정보 분석지원 시스템, 촬영장치, 영상분석장치, 데이터베이스(DB) 등으로부터 이 분야의 종사자들이 용이하게 알 수 있는 구성 및 작용에 대한 도시 및 언급은 간략히 하거나 생략하였다. 특히 도면의 도시 및 상세한 설명에 있어서 본 발명의 기술적 특징과 직접적으로 연관되지 않는 요소의 구체적인 기술적 구성 및 작용에 대한 상세한 설명 및 도시는 생략하고, 본 발명과 관련되는 기술적 구성만을 간략하게 도시하거나 설명하였다.Hereinafter, an embodiment of the present invention will be described in detail with reference to the accompanying drawings 1 to 15. On the other hand, in the drawings and detailed descriptions, the general traffic information analysis system, traffic information analysis support system, filming device, image analysis device, database (DB), etc. show and mention the configuration and action that can be easily known by those working in this field is abbreviated or omitted. In particular, in the drawings and detailed descriptions, detailed descriptions and illustrations of specific technical configurations and actions of elements not directly related to the technical features of the present invention are omitted, and only the technical configurations related to the present invention are briefly illustrated or described. did

본 발명의 제1실시예에 따른 차량번호 인식기반 교통정보 통합 분석지원 시스템은 도 1에서와 같이 촬영장치(100), 영상분석장치(200), 차번정보 DB(300), 차번정보 분석장치(400)를 포함하는 구성으로 이루어진다.The vehicle number recognition-based traffic information integrated analysis support system according to the first embodiment of the present invention includes a photographing device 100, an image analysis device 200, a vehicle number information DB 300, and a vehicle number information analysis device as shown in FIG. 400).

촬영장치(100)는 도로에 설치되는 것으로, 화각 범위의 영역촬영으로 도로영역 영상프레임을 생성하게 된다. 여기서 촬영장치(100)는 도로에 배치되는 각종 기둥체(신호등 지지대, 가로등 지지대 등) 상단에 고정되어 전방의 넓은 영역에 대한 도로영역 영상프레임을 생성하게 된다. 특히 본 발명의 제1실시예에 따른 차량번호 인식기반 교통정보 통합 분석지원 시스템은 도 2에서와 같이 도로망을 구성되는 설정개수의 단위 차도에 각각 할당되어 설치되는 복수의 촬영장치(100)를 구성요소로 하여 도로망의 복수영역에 대한 교통정보의 산출이 가능해지도록 한다.The photographing apparatus 100 is installed on a road, and generates an image frame in the road area by photographing the area of the angle of view. Here, the photographing apparatus 100 is fixed to the top of various pillars (traffic light support, street light support, etc.) disposed on the road to generate a road area image frame for a wide area in front. In particular, the vehicle number recognition-based traffic information integrated analysis support system according to the first embodiment of the present invention configures a plurality of photographing devices 100 that are respectively allocated and installed in a set number of unit roadways constituting a road network as shown in FIG. It makes it possible to calculate traffic information for multiple areas of the road network.

촬영장치(100)는 차량번호인식 카메라(LPR Camera), 방범용 디지털 CCTV, 아날로그 CCTV, IOT 디바이스 등이 될 수 있으며, 동영상 영역촬영으로 설정 fps의 도로영역 영상프레임을 생성할 수 있다.The photographing apparatus 100 may be a vehicle number recognition camera (LPR Camera), a crime prevention digital CCTV, an analog CCTV, an IOT device, and the like, and may generate a road area image frame of a set fps by video area shooting.

이와 같은 촬영장치(100)는 도로영역 영상프레임에 메타데이터를 연동시킨 도로영상정보를 산출하게 되는데, 메타데이터에는 시간정보와 위치식별정보가 포함된다. 여기서 메타데이터의 시간정보에는 촬영시각정보, 주야간 구분정보, 요일정보, 계절정보 등이 포함될 수 있으며, 메타데이터의 위치식별정보에는 촬영장치(100)가 위치한 단위 차도의 수리적 위치값 정보, 촬영장치 ID정보, 단위 차도 ID정보 등이 포함될 수 있다. 한편 메타데이터에는 촬영장치 기기정보를 포함하여 다른 종류의 촬영장치(100)로부터 생성되는 도로영역 영상프레임이 표준규격의 영상프레임으로 변환되는 프로세스에 활용될 수 있도록 할 수 있다.The photographing apparatus 100 as described above calculates road image information in which metadata is linked to the road area image frame, and the metadata includes time information and location identification information. Here, the time information of the metadata may include photographing time information, day/night classification information, day information, season information, etc., and the location identification information of the metadata includes information on the hydraulic position value of the unit road in which the photographing device 100 is located, the photographing device ID information, unit road ID information, etc. may be included. On the other hand, the metadata may include the device information of the photographing device so that it can be utilized in a process of converting a road area image frame generated from a different type of photographing apparatus 100 into an image frame of a standard standard.

영상분석장치(200)는 촬영장치(100)의 도로영상정보를 입력받는 것으로, 도로영역 영상프레임에 대한 영상분석으로 차량번호를 추출하게 된다. 또한 영상분석장치(200)는 도 3에서와 같이 추출된 차량번호에 해당 도로영역 영상프레임의 메타데이터를 부여한 교통분석용 차번 정보단위체를 산출하게 된다. The image analysis apparatus 200 receives road image information of the photographing apparatus 100, and extracts the vehicle number through image analysis of the road area image frame. In addition, the image analysis apparatus 200 calculates a vehicle number information unit for traffic analysis in which metadata of a corresponding road area image frame is assigned to the extracted vehicle number as shown in FIG. 3 .

여기서 영상분석장치(200)는 도로영역 영상프레임에 대한 영상분석으로 차량 객체와 차량번호를 추출한 후, 추출된 차량 객체의 이동방향 정보를 직전, 우회전, 좌회전으로 구분하여 검출하고, 도 3에서와 같이 교통분석용 차번 정보단위체에 차량 객체의 이동방향 정보를 부가할 수 있다. Here, the image analysis apparatus 200 extracts the vehicle object and the vehicle number through image analysis for the road area image frame, and then divides and detects the movement direction information of the extracted vehicle object into immediately preceding, right turn, and left turn, and as shown in FIG. Similarly, the movement direction information of the vehicle object can be added to the vehicle number information unit for traffic analysis.

한편 영상분석장치(200)는 도 8에서와 같이 차량객체 검출모듈(210), 차량번호 검출모듈(220), 교통분석용 차번 정보단위체 산출모듈을 포함하는 구성으로 이루어질 수 있다.Meanwhile, the image analysis apparatus 200 may be configured to include a vehicle object detection module 210 , a vehicle number detection module 220 , and a vehicle number information unit calculation module for traffic analysis as shown in FIG. 8 .

차량객체 검출모듈(210)은 도로영역 영상프레임에 대한 영상분석을 통해 차량 객체를 추출하는 차량인식 알고리즘(211)이 구비되는 모듈로서, 도로영상정보의 입력에 따라 차량인식 알고리즘(211)이 동작하면서 차량 객체 이미지영역을 검출하게 된다. 차량번호 검출모듈(220)은 차량 객체 이미지영역에 대한 영상분석을 통해 차량번호를 추출하는 차량번호인식 알고리즘(221)이 구비되는 모듈로서, 차량객체 검출모듈(210)로부터 전달되는 차량 객체 이미지영역의 입력에 따라 차량번호인식 알고리즘(221)이 동작하면서 차량번호 텍스트정보를 검출하게 된다. 교통분석용 차번 정보단위체 산출모듈은 도로영상정보에 포함된 메타데이터와 도로영상정보로부터 검출된 차량번호 텍스트정보를 연동시킨 교통분석용 차번 정보단위체를 산출하는 모듈이다. The vehicle object detection module 210 is a module provided with a vehicle recognition algorithm 211 for extracting a vehicle object through image analysis of a road area image frame, and the vehicle recognition algorithm 211 operates according to input of road image information. while detecting the vehicle object image area. The vehicle number detection module 220 is a module provided with a vehicle number recognition algorithm 221 for extracting a vehicle number through image analysis of the vehicle object image area, and the vehicle object image area transmitted from the vehicle object detection module 210 . According to the input of the vehicle number recognition algorithm 221 is operated to detect the vehicle number text information. The vehicle number information unit calculation module for traffic analysis is a module for calculating the vehicle number information unit for traffic analysis in which the metadata included in the road image information and the vehicle number text information detected from the road image information are linked.

이와 달리 영상분석장치(200)는 도 9에서와 같이 차량번호 검출모듈(220), 교통분석용 차번 정보단위체 산출모듈을 포함하는 구성으로 이루어질 수 있다.In contrast, the image analysis apparatus 200 may be configured to include a vehicle number detection module 220 and a vehicle number information unit calculation module for traffic analysis as shown in FIG. 9 .

차량번호 검출모듈(220)은 도로영역 영상프레임에 대한 영상분석을 통해 차량번호를 추출하는 차량번호인식 알고리즘(221)이 구비되는 모듈롯, 도로영역 영상프레임의 입력에 따라 차량번호인식 알고리즘(221)이 동작하면서 차량번호 텍스트정보를 검출하게 된다. 교통분석용 차번 정보단위체 산출모듈은 도로영상정보에 포함된 메타데이터와 도로영상정보로부터 검출된 차량번호 텍스트정보를 연동시킨 교통분석용 차번 정보단위체를 산출하는 모듈이다.The vehicle number detection module 220 is a module equipped with a vehicle number recognition algorithm 221 for extracting a vehicle number through image analysis of the road area image frame, and a vehicle number recognition algorithm 221 according to the input of the road area image frame. ) operates to detect vehicle number text information. The vehicle number information unit calculation module for traffic analysis is a module for calculating the vehicle number information unit for traffic analysis in which the metadata included in the road image information and the vehicle number text information detected from the road image information are linked.

차번정보 DB(300)는 영상분석장치(200)로부터 교통분석용 차번 정보단위체를 전달받아 데이터베이스화시키게 된다. The vehicle number information DB 300 receives the vehicle number information unit for traffic analysis from the image analysis device 200 and converts it into a database.

차번정보 분석장치(400)는 차번정보 DB(300)와 연동되어 동작하는 것으로, 시간, 위치, 차량번호 중 하나 이상의 정보요소를 기준으로 하여 교통분석용 차번 정보단위체에 대한 분류와 연산처리를 수행하면서 교통분석프로그램용 입력정보나 교통분석정보를 산출하게 된다. 여기서 영상분석장치(200)가 차량 객체의 이동방향 정보(직전, 우회전, 좌회전)를 검출하는 경우, 차번정보 분석장치(400)는 시간, 위치, 차량번호, 이동방향 중 하나 이상의 정보요소를 기준으로 하여 교통분석용 차번 정보단위체에 대한 분류와 연산처리를 수행하면서 교통분석프로그램용 입력정보와 교통분석정보 중에서 선택된 어느 하나를 산출하게 된다.The vehicle number information analysis device 400 operates in conjunction with the vehicle number information DB 300, and performs classification and calculation processing on vehicle number information units for traffic analysis based on one or more information elements among time, location, and vehicle number. In doing so, input information for a traffic analysis program or traffic analysis information is calculated. Here, when the image analysis device 200 detects the movement direction information (right, right, left) of the vehicle object, the vehicle number information analysis device 400 is based on one or more information elements among time, location, vehicle number, and movement direction. Thus, any one selected from the input information for the traffic analysis program and the traffic analysis information is calculated while classifying and calculating the vehicle number information unit for traffic analysis.

즉 차번정보 분석장치(400)는 특정지점 교통량 정보, 특정지점 이동방향 별 교통량 정보, 특정지점 차종 별 교통량 정보, 특정지점 대기행열 정보, 특정지점 교통량 대 용량비(V/C), 도로구간별 평균 이동속도정보, 도로구간별 회전 교통량 정보 등의 통계정보와 분석정보로 이루어지는 교통분석정보로 생성하거나, 해당 교통분석정보의 산출을 위한 교통분석프로그램용 입력정보를 생성하게 된다.That is, the vehicle number information analysis device 400 includes traffic volume information at a specific point, traffic volume information by movement direction at a specific point, traffic volume information by vehicle type at a specific point, queue information at a specific point, traffic volume to capacity ratio (V/C) at a specific point, average for each road section Traffic analysis information consisting of statistical information and analysis information such as movement speed information and rotational traffic volume information for each road section is generated, or input information for a traffic analysis program for calculating the traffic analysis information is generated.

또한 차번정보 분석장치(400)는 필요시 동일 차량번호의 교통분석용 차번 정보단위체에 대한 시계열 추적정보를 산출하여 행정절차나 형사사법절차에서 활용할 수 있도록 한다. In addition, the vehicle number information analysis device 400 calculates time-series tracking information for the vehicle number information unit for traffic analysis of the same vehicle number when necessary so that it can be utilized in administrative procedures or criminal justice procedures.

이를 위한 본 발명의 제1실시예에 따른 차번정보 분석장치(400)는 도 4에서와 같이 교통량정보 분석유닛(410), 이동속도 분석유닛(420), 차종정보 분석유닛(430), 차량추적 분석유닛(440)을 포함하는 구성으로 이루어진다.For this purpose, the vehicle number information analysis device 400 according to the first embodiment of the present invention includes a traffic volume information analysis unit 410, a moving speed analysis unit 420, a vehicle model information analysis unit 430, and a vehicle tracking unit as shown in FIG. Consists of a configuration including an analysis unit (440).

교통량정보 분석유닛(410)은 동일한 위치식별정보를 가지면서 설정된 시간정보 구간에 소속된 교통분석용 차번 정보단위체의 개수를 하나 이상의 분석항목 별로 카운팅한 차번 계수정보를 교통분석프로그램용 입력정보로 산출하거나, 차번 계수정보로부터 특정지점 교통량 정보를 교통분석정보로 산출하게 된다.The traffic volume information analysis unit 410 counts the number of vehicle number information units for traffic analysis belonging to the set time information section while having the same location identification information for each one or more analysis items. Calculates the vehicle number coefficient information as input information for the traffic analysis program. Alternatively, traffic volume information at a specific point is calculated from the vehicle number coefficient information as traffic analysis information.

이동속도 분석유닛(420)은 동일 차량번호의 시간 경과에 따른 위치식별정보의 변동을 추적하고, 시간적으로 선후 관계에 있는 2개의 위치식별정보 간 시간 간격을 통해 이동속도정보를 산출하게 되는데, 동일한 2개의 위치식별정보 간 복수의 동일 차량번호의 이동속도정보의 평균값으로 도로구간별 평균 이동속도정보를 산출하게 된다.The movement speed analysis unit 420 tracks the change of the location identification information over time of the same vehicle number, and calculates the movement speed information through the time interval between the two location identification information in a temporal relationship, the same Average moving speed information for each road section is calculated as an average value of moving speed information of a plurality of identical vehicle numbers between two pieces of location identification information.

차종정보 분석유닛(430)은 교통분석용 차번 정보단위체의 차량번호에 포함된 차종식별기호를 추출하고, 차종식별기호로부터 산출되는 차종정보를 교통분석용 차번 정보단위체에 연동시키게 된다. 교통량정보 분석유닛(410)은 차종정보 분석유닛(430)와 연동되어 특정지점 차종 별 교통량 정보를 산출할 수 있게 된다.The vehicle model information analysis unit 430 extracts the vehicle model identification symbol included in the vehicle number of the vehicle number information unit for traffic analysis, and links the vehicle model information calculated from the vehicle model identification symbol to the vehicle number information unit for traffic analysis. The traffic volume information analysis unit 410 is interlocked with the vehicle model information analysis unit 430 to calculate the traffic volume information for each vehicle type at a specific point.

차량추적 분석유닛(440)은 동일 차량번호의 교통분석용 차번 정보단위체에 대한 시계열 추적정보를 산출하게 되는데, 이와 같은 차량 시계열 추적정보는 행정절차나 형사사법절차에 활용될 수 있다. The vehicle tracking analysis unit 440 calculates time series tracking information for the vehicle number information unit for traffic analysis of the same vehicle number, and such vehicle time series tracking information may be utilized in administrative procedures or criminal justice procedures.

한편 본 발명의 제1실시예에 따른 차량번호 인식기반 교통정보 통합 분석지원 시스템은 도 5의 (a) 내지 (c)에서와 같이 촬영장치(100)에 구비되어 도로영상정보를 저장하는 도로영상정보 단위DB(500)를 가질 수 있는데, 이에 대응하여 영상분석장치(200)는 촬영장치(100)나 차번정보 분석장치(400)에 구비되어 도로영상정보 단위DB(500)로부터 도로영상정보를 전달받아 교통분석용 차번 정보단위체를 산출하게 되고, 차번정보 DB(300)는 촬영장치(100)나 차번정보 분석장치(400)에 구비되어 교통분석용 차번 정보단위체를 전달받을 수 있다. 또한 촬영장치(100)는 도 7에서와 같이 카메라(110), 컨트롤러(120), 저장매체(130)를 포함하는 구성으로 이루어질 수 있는데, 카메라(110)는 화각 범위의 영역촬영을 수행하는 것이고, 컨트롤러(120)는 카메라(110)로부터 도로영역 영상프레임를 전달받아 촬영장치 별로 미리 설정되어 있는 메타데이터를 도로영역 영상프레임에 할당하여 도로영상정보를 산출하는 것이며, 저장매체(130)는 도로영상정보 단위DB(500)로 구현되는 것이다.On the other hand, the vehicle number recognition-based traffic information integrated analysis support system according to the first embodiment of the present invention is provided in the photographing device 100 as shown in (a) to (c) of FIG. 5 to store road image information. It may have an information unit DB 500 , and in response to this, the image analysis device 200 is provided in the photographing device 100 or the vehicle number information analysis device 400 to obtain road image information from the road image information unit DB 500 . The vehicle number information unit for traffic analysis is calculated by receiving the information, and the vehicle number information DB 300 is provided in the photographing device 100 or the vehicle number information analysis device 400 to receive the vehicle number information unit for traffic analysis. In addition, the photographing apparatus 100 may be configured to include a camera 110, a controller 120, and a storage medium 130 as shown in FIG. , the controller 120 receives the road area image frame from the camera 110 and allocates metadata preset for each photographing device to the road area image frame to calculate road image information, and the storage medium 130 stores the road image It is implemented as an information unit DB (500).

또한 본 발명의 제1실시예에 따른 차량번호 인식기반 교통정보 통합 분석지원 시스템은 도 6의 (a)와 (b)에서와 같이 도로영상정보 단위DB(500)로부터 도로영상정보를 전달받아 데이터베이스화하는 도로영상정보 통합DB(600)를 가질 수 있는데, 이에 대응하여 영상분석장치(200)는 도로영상정보 통합DB(600)로부터 도로영상정보를 전달받아 교통분석용 차번 정보단위체를 산출하게 된다. 그리고 차번정보 분석장치(400)는 도로영상정보 통합DB(600)와 네트워크 통신망으로 연결되어 도로영상정보를 전송받는 서버로 기능할 수도 있고, 도로영상정보 통합DB(600)를 내장하고 있는 서버로 가능할 수도 있다.In addition, the vehicle number recognition-based traffic information integrated analysis support system according to the first embodiment of the present invention receives the road image information from the road image information unit DB 500 as shown in (a) and (b) of FIG. 6 and receives the database It may have an integrated road image information DB 600 to be converted, and in response to this, the image analysis device 200 receives road image information from the integrated road image information DB 600 and calculates a vehicle number information unit for traffic analysis. . And the vehicle number information analysis device 400 is connected to the road image information integrated DB 600 and a network communication network to function as a server to receive road image information, and is a server having a built-in road image information integrated DB 600 . It might be possible.

본 발명의 제2실시예에 따른 차량번호 인식기반 교통정보 통합 분석지원 시스템은 도 10에서와 같이 촬영장치(100), 영상분석장치(200), 교통분석용 차번 정보단위체 DB(300'), 차량 객체/번호 분석장치(400')를 포함하는 구성으로 이루어진다The vehicle number recognition-based traffic information integrated analysis support system according to the second embodiment of the present invention includes a photographing device 100, an image analysis device 200, a vehicle number information unit DB 300' for traffic analysis, as shown in FIG. It consists of a configuration including a vehicle object / number analysis device (400')

촬영장치(100)는 도로에 설치되는 것으로, 화각 범위의 영역촬영으로 도로영역 영상프레임을 생성하게 된다. 여기서 촬영장치(100)는 도로에 배치되는 각종 기둥체(신호등 지지대, 가로등 지지대 등) 상단에 고정되어 전방의 넓은 영역에 대한 도로영역 영상프레임을 생성하게 된다. 특히 본 발명의 제2실시예에 따른 차량번호 인식기반 교통정보 통합 분석지원 시스템은 도로망을 구성되는 설정개수의 단위 차도에 각각 할당되어 설치되는 복수의 촬영장치(100)를 구성요소로 하여 도로망의 복수영역에 대한 교통정보의 산출이 가능해지도록 한다.The photographing apparatus 100 is installed on a road, and generates an image frame in the road area by photographing the area of the angle of view. Here, the photographing apparatus 100 is fixed to the top of various pillars (traffic light support, street light support, etc.) disposed on the road to generate a road area image frame for a wide area in front. In particular, the vehicle number recognition-based traffic information integrated analysis support system according to the second embodiment of the present invention includes a plurality of photographing devices 100 allocated and installed to a set number of unit roadways constituting the road network as a component of the road network. Make it possible to calculate traffic information for multiple areas.

촬영장치(100)는 차량번호인식 카메라(LPR Camera), 방범용 디지털 CCTV, 아날로그 CCTV, IOT 디바이스 등이 될 수 있으며, 동영상 영역촬영으로 설정 fps의 도로영역 영상프레임을 생성할 수 있다.The photographing apparatus 100 may be a vehicle number recognition camera (LPR Camera), a crime prevention digital CCTV, an analog CCTV, an IOT device, and the like, and may generate a road area image frame of a set fps by video area shooting.

이와 같은 촬영장치(100)는 도로영역 영상프레임에 메타데이터를 연동시킨 도로영상정보를 산출하게 되는데, 메타데이터에는 시간정보와 위치식별정보가 포함된다. 여기서 메타데이터의 시간정보에는 촬영시각정보, 주야간 구분정보, 요일정보, 계절정보 등이 포함될 수 있으며, 메타데이터의 위치식별정보에는 촬영장치(100)가 위치한 단위 차도의 수리적 위치값 정보, 촬영장치 ID정보, 단위 차도 ID정보 등이 포함될 수 있다. 한편 메타데이터에는 촬영장치 기기정보를 포함하여 다른 종류의 촬영장치(100)로부터 생성되는 도로영역 영상프레임이 표준규격의 영상프레임으로 변환되는 프로세스에 활용될 수 있도록 할 수 있다.The photographing apparatus 100 as described above calculates road image information in which metadata is linked to the road area image frame, and the metadata includes time information and location identification information. Here, the time information of the metadata may include photographing time information, day/night classification information, day information, season information, etc., and the location identification information of the metadata includes information on the hydraulic position value of the unit road in which the photographing device 100 is located, the photographing device ID information, unit road ID information, etc. may be included. On the other hand, the metadata may include the device information of the photographing device so that it can be utilized in a process of converting a road area image frame generated from a different type of photographing apparatus 100 into an image frame of a standard standard.

영상분석장치(200)는 촬영장치(100)의 도로영상정보를 입력받는 것으로, 도로영역 영상프레임에 대한 영상분석으로 차량 객체와 차량번호를 추출하게 된다. 또한 영상분석장치(200)는 추출된 차량 객체와 차량 번호에 해당 도로영역 영상프레임의 메타데이터를 부여한 교통분석용 차번 정보단위체를 산출하게 된다. 그리고 영상분석장치(200)는 도로영역 영상프레임에 대한 영상분석으로 차량 객체와 차량번호를 추출한 후, 추출된 차량 객체의 이동방향 정보를 직전, 우회전, 좌회전으로 구분하여 검출하고, 도 3에서와 같이 교통분석용 차번 정보단위체에 차량 객체의 이동방향 정보를 부가할 수 있다. The image analysis apparatus 200 receives road image information of the photographing apparatus 100, and extracts a vehicle object and a vehicle number through image analysis of the road area image frame. In addition, the image analysis apparatus 200 calculates a vehicle number information unit for traffic analysis in which metadata of a corresponding road area image frame is assigned to the extracted vehicle object and vehicle number. And the image analysis device 200 extracts the vehicle object and the vehicle number through image analysis for the road area image frame, and then divides and detects the movement direction information of the extracted vehicle object into immediately preceding, right turn, and left turn, and as shown in FIG. Similarly, the movement direction information of the vehicle object can be added to the vehicle number information unit for traffic analysis.

여기서 본 발명의 제2실시예에 따른 영상분석장치(200)는 도 11에서와 같이 차량객체 검출모듈(210)과 교통분석용 차번 정보단위체 산출모듈(250)을 필수 구성으로 구비하고, 차량번호 검출모듈(220), 차량특성정보 검출모듈(230), 차량카운팅정보 산출모듈(240) 중에서 하나 이상을 구비할 수 있다.Here, the image analysis apparatus 200 according to the second embodiment of the present invention includes a vehicle object detection module 210 and a vehicle number information unit calculation module 250 for traffic analysis as essential components, as shown in FIG. 11 , and the vehicle number At least one of a detection module 220 , a vehicle characteristic information detection module 230 , and a vehicle counting information calculation module 240 may be provided.

차량객체 검출모듈(210)은 도로영역 영상프레임에 대한 영상분석을 통해 차량 객체를 추출하는 차량인식 알고리즘(211)이 구비되는 모듈로서, 도로영상정보의 입력에 따라 차량인식 알고리즘(211)이 동작하면서 차량 객체 이미지영역을 검출하게 된다. The vehicle object detection module 210 is a module provided with a vehicle recognition algorithm 211 for extracting a vehicle object through image analysis of a road area image frame, and the vehicle recognition algorithm 211 operates according to input of road image information. while detecting the vehicle object image area.

차량번호 검출모듈(220)은 차량 객체 이미지영역에 대한 영상분석을 통해 차량번호를 추출하는 차량번호인식 알고리즘(221)이 구비되는 모듈로서, 차량객체 검출모듈(210)로부터 전달되는 차량 객체 이미지영역의 입력에 따라 차량번호인식 알고리즘(221)이 동작하면서 차량번호 텍스트정보를 검출하게 된다. The vehicle number detection module 220 is a module provided with a vehicle number recognition algorithm 221 for extracting a vehicle number through image analysis of the vehicle object image area, and the vehicle object image area transmitted from the vehicle object detection module 210 . According to the input of the vehicle number recognition algorithm 221 is operated to detect the vehicle number text information.

차량특성정보 검출모듈(230)은 차량 객체 이미지영역에 영상분석을 통해 차량객체 특성정보를 추출하는 차량특성정보 추출알고리즘(231)이 구비되는 모듈로서, 차량객체 검출모듈(210)로부터 전달되는 차량 객체 이미지영역의 입력에 따라 차량특성정보 추출알고리즘(231)이 동작하면서 차량객체 특성정보를 검출하게 되는데, 차량객체 특성정보에는 차종정보, 크기정보, 색상정보 등이 포함될 수 있다. The vehicle characteristic information detection module 230 is a module provided with a vehicle characteristic information extraction algorithm 231 for extracting vehicle object characteristic information through image analysis in the vehicle object image region, and the vehicle transmitted from the vehicle object detection module 210 . The vehicle characteristic information extraction algorithm 231 operates according to the input of the object image region to detect vehicle object characteristic information. The vehicle object characteristic information may include vehicle model information, size information, color information, and the like.

차량카운팅정보 산출모듈(240)은 차량객체 검출모듈(210)에 의한 차량 객체 이미지영역 검출시 차량객체 카운팅정보를 산출하는 차량카운팅정보 산출알고리즘(241)이 구비되는 모듈로서, 차량객체 검출모듈(210)로부터 전달되는 차량 객체 이미지영역의 입력에 따라 차량카운팅정보 산출알고리즘(241)이 동작하면서 차량객체 카운팅정보를 산출하게 된다.The vehicle counting information calculation module 240 is a module provided with a vehicle counting information calculation algorithm 241 for calculating vehicle object counting information when the vehicle object image region is detected by the vehicle object detection module 210, and the vehicle object detection module ( According to the input of the vehicle object image area transmitted from 210, the vehicle counting information calculation algorithm 241 operates to calculate vehicle object counting information.

교통분석용 차번 정보단위체 산출모듈(250)은 도로영상정보에 포함된 메타데이터와 상기 도로영상정보로부터 검출된 차량번호 텍스트정보를 연동시킨 교통분석용 차번 정보단위체를 산출할 수 있다. 또한 교통분석용 차번 정보단위체 산출모듈(250)은 차량객체 특성정보가 검출된 차량 객체에 객체 식별번호를 부여한 다음, 도로영상정보에 포함된 메타데이터와 도로영상정보로부터 검출된 객체 식별번호를 연동시킨 교통분석용 차번 정보단위체를 산출할 수 있다.The vehicle number information unit calculation module for traffic analysis 250 may calculate the vehicle number information unit for traffic analysis in which metadata included in the road image information and the vehicle number text information detected from the road image information are linked. In addition, the vehicle number information unit calculation module 250 for traffic analysis assigns an object identification number to the vehicle object in which the vehicle object characteristic information is detected, and then links the metadata included in the road image information with the object identification number detected from the road image information The vehicle number information unit for traffic analysis can be calculated.

이와 달리 본 발명의 제2실시예에 따른 영상분석장치(200)는 도 12에서와 같이 차량객체 검출모듈(210), 차량번호 검출모듈(220), 차량특성정보 검출모듈(230), 차량카운팅정보 산출모듈(240), 교통분석용 차번 정보단위체 산출모듈(250)을 필수 구성으로 구비할 수 있다.In contrast, the image analysis apparatus 200 according to the second embodiment of the present invention includes a vehicle object detection module 210 , a vehicle number detection module 220 , a vehicle characteristic information detection module 230 , and vehicle counting as shown in FIG. 12 . An information calculation module 240 and a vehicle number information unit calculation module 250 for traffic analysis may be provided as essential components.

차량객체 검출모듈(210)은 도로영역 영상프레임에 대한 영상분석을 통해 차량 객체를 추출하는 차량인식 알고리즘(211)이 구비되는 모듈로서, 도로영상정보의 입력에 따라 차량인식 알고리즘(211)이 동작하면서 차량 객체 이미지영역을 검출하게 된다. The vehicle object detection module 210 is a module provided with a vehicle recognition algorithm 211 for extracting a vehicle object through image analysis of a road area image frame, and the vehicle recognition algorithm 211 operates according to input of road image information. while detecting the vehicle object image area.

차량번호 검출모듈(220)은 차량 객체 이미지영역에 대한 영상분석을 통해 차량번호를 추출하는 차량번호인식 알고리즘(221)이 구비되는 모듈로서, 차량객체 검출모듈(210)로부터 전달되는 차량 객체 이미지영역의 입력에 따라 차량번호인식 알고리즘(221)이 동작하면서 차량번호 텍스트정보를 검출하게 된다.The vehicle number detection module 220 is a module provided with a vehicle number recognition algorithm 221 for extracting a vehicle number through image analysis of the vehicle object image area, and the vehicle object image area transmitted from the vehicle object detection module 210 . According to the input of the vehicle number recognition algorithm 221 is operated to detect the vehicle number text information.

차량특성정보 검출모듈(230)은 차량번호 검출모듈(220)의 차량번호인식 알고리즘(221)에 의한 차량번호 추출이 불가능한 번호미인식 차량 객체 이미지영역에 영상분석을 통해 차량객체 특성정보를 추출하는 차량특성정보 추출알고리즘(231)이 구비되는 모듈로서, 차량번호 검출모듈(220)로부터 전달되는 번호미인식 차량 객체 이미지영역의 입력에 따라 차량특성정보 추출알고리즘(231)이 동작하면서 차량객체 특성정보를 검출하게 된다.The vehicle characteristic information detection module 230 extracts vehicle object characteristic information through image analysis in the number unrecognized vehicle object image area in which the vehicle number extraction is impossible by the vehicle number recognition algorithm 221 of the vehicle number detection module 220. As a module provided with the vehicle characteristic information extraction algorithm 231, the vehicle characteristic information extraction algorithm 231 operates according to the input of the number unrecognized vehicle object image area transmitted from the vehicle number detection module 220, vehicle object characteristic information will detect

차량카운팅정보 산출모듈(240)은 차량특성정보 검출모듈(230)의 차량특성정보 추출알고리즘(231)에 의한 차량객체 특성정보 추출이 불가능한 특성미인식 차량 객체 이미지영역 발생시 차량객체 카운팅정보를 산출하는 차량카운팅정보 산출알고리즘(241)이 구비되는 모듈로서, 차량특성정보 검출모듈(230)로부터 전달되는 특성미인식 차량 객체 이미지영역의 입력에 따라 차량카운팅정보 산출알고리즘(241)이 동작하면서 차량객체 카운팅정보를 산출하게 된다.The vehicle counting information calculation module 240 calculates vehicle object counting information when a characteristic unrecognized vehicle object image area in which vehicle object characteristic information extraction is impossible by the vehicle characteristic information extraction algorithm 231 of the vehicle characteristic information detection module 230 is generated. As a module provided with a vehicle counting information calculation algorithm 241, the vehicle object counting while the vehicle counting information calculation algorithm 241 operates according to the input of the characteristic unrecognized vehicle object image area transmitted from the vehicle characteristic information detection module 230 information will be produced.

교통분석용 차번 정보단위체 산출모듈(250)은 차량객체 특성정보나 차량객체 카운팅정보가 검출된 차량 객체에 객체 식별번호를 부여하고, 도로영상정보로부터 검출된 차량번호 텍스트정보나 객체 식별번호를 도로영상정보에 포함된 메타데이터와 연동시켜 교통분석용 차번 정보단위체를 산출하게 된다. The vehicle number information unit calculation module 250 for traffic analysis gives an object identification number to a vehicle object in which vehicle object characteristic information or vehicle object counting information is detected, and converts vehicle number text information or object identification number detected from road image information to the road By linking with the metadata included in the image information, the vehicle number information unit for traffic analysis is calculated.

교통분석용 차번 정보단위체 DB(300')는 영상분석장치(200)로부터 교통분석용 차번 정보단위체를 전달받아 데이터베이스화시키게 된다.The vehicle number information unit DB for traffic analysis 300 ′ receives the vehicle number information unit for traffic analysis from the image analysis device 200 and converts it into a database.

차량 객체/번호 분석장치(400')는 교통분석용 차번 정보단위체 DB(300')와 연동되어 동작하는 것으로, 시간, 위치, 차량 객체, 차량번호 중 하나 이상의 정보요소를 기준으로 하여 교통분석용 차번 정보단위체에 대한 분류와 연산처리를 수행하면서 교통분석프로그램용 입력정보나 교통분석정보를 산출하게 된다. 여기서 영상분석장치(200)가 차량 객체의 이동방향 정보(직전, 우회전, 좌회전)를 검출하는 경우, 차번정보 분석장치(400)는 시간, 위치, 차량번호, 이동방향 중 하나 이상의 정보요소를 기준으로 하여 교통분석용 차번 정보단위체에 대한 분류와 연산처리를 수행하면서 교통분석프로그램용 입력정보와 교통분석정보 중에서 선택된 어느 하나를 산출하게 된다.The vehicle object/number analysis device 400' operates in conjunction with the vehicle number information unit DB 300' for traffic analysis, and is used for traffic analysis based on one or more information elements among time, location, vehicle object, and vehicle number. Input information for traffic analysis program or traffic analysis information is calculated while classifying and calculating the vehicle number information unit. Here, when the image analysis apparatus 200 detects movement direction information (right, right, left) of the vehicle object, the vehicle number information analysis apparatus 400 is based on one or more information elements among time, location, vehicle number, and movement direction. Thus, any one selected from the input information for the traffic analysis program and the traffic analysis information is calculated while classifying and calculating the vehicle number information unit for traffic analysis.

즉 차번정보 분석장치(400)는 특정지점 교통량 정보, 특정지점 이동방향 별 교통량 정보, 특정지점 차종 별 교통량 정보, 특정지점 대기행열 정보, 특정지점 교통량 대 용량비(V/C), 도로구간별 평균 이동속도정보, 도로구간별 회전 교통량 정보 등의 통계정보와 분석정보로 이루어지는 교통분석정보로 생성하거나, 해당 교통분석정보의 산출을 위한 교통분석프로그램용 입력정보를 생성하게 된다. 또한 차번정보 분석장치(400)는 필요시 동일 차량번호의 교통분석용 차번 정보단위체에 대한 시계열 추적정보를 산출하여 행정절차나 형사사법절차에서 활용할 수 있도록 한다. That is, the vehicle number information analysis device 400 includes traffic volume information at a specific point, traffic volume information by movement direction at a specific point, traffic volume information by vehicle type at a specific point, queue information at a specific point, traffic volume to capacity ratio (V/C) at a specific point, average for each road section Traffic analysis information consisting of statistical information and analysis information such as movement speed information and rotational traffic volume information for each road section is generated, or input information for a traffic analysis program for calculating the traffic analysis information is generated. In addition, the vehicle number information analysis device 400 calculates time-series tracking information for the vehicle number information unit for traffic analysis of the same vehicle number when necessary so that it can be utilized in administrative procedures or criminal justice procedures.

특히 본 발명의 제2실시예에 따른 차량 객체/번호 분석장치(400')에는 도 13에서와 같이 교통량정보 분석유닛(410)이 구비되는데, 교통량정보 분석유닛(410)은 차량번호 분석프로세스, 차량객체 특성정보 분석프로세스, 차량객체 카운팅 프로세스를 수행하여 특정지점 교통량 정보, 특정지점 차종 별 교통량 정보를 산출하게 된다. 이를 위하여 교통량정보 분석유닛(410)에는 교통량 수치값 산출유닛(411)과 트래픽 이미지 산출유닛(412)이 포함될 수 있다.In particular, the vehicle object / number analysis device 400 ' according to the second embodiment of the present invention is provided with a traffic volume information analysis unit 410 as shown in FIG. 13, and the traffic volume information analysis unit 410 includes a vehicle number analysis process, Vehicle object characteristic information analysis process and vehicle object counting process are performed to calculate specific point traffic volume information and specific point traffic volume information for each vehicle type. To this end, the traffic volume information analysis unit 410 may include a traffic volume numerical value calculation unit 411 and a traffic image calculation unit 412 .

교통량 수치값 산출유닛(411)은 동일한 위치식별정보를 가지면서 설정된 시간정보 구간에 소속된 교통분석용 차번 정보단위체의 개수를 하나 이상의 분석항목 별로 카운팅한 교통량 계수정보를 교통분석프로그램용 입력정보로 산출하거나, 상기 교통량 계수정보로부터 특정지점 교통량 정보를 교통분석정보로 산출하는 유닛이다. The traffic volume numerical value calculation unit 411 counts the number of vehicle number information units for traffic analysis belonging to the set time information section while having the same location identification information for each one or more analysis items. It is a unit for calculating or calculating traffic volume information at a specific point from the traffic volume coefficient information as traffic analysis information.

트래픽 이미지 산출유닛(412)은 동일한 위치식별정보를 가지면서 설정된 시간정보 구간에 소속된 교통분석용 차번 정보단위체의 개수를 하나 이상의 분석항목 별로 카운팅한 교통량 계수정보에 대응하는 교통량 트래픽 색상정보를 교통분석정보로 산출하는 유닛이다.The traffic image calculation unit 412 transmits the traffic volume traffic color information corresponding to the traffic volume coefficient information counting the number of vehicle number information units for traffic analysis belonging to the set time information section while having the same location identification information for each one or more analysis items. It is a unit that calculates with analysis information.

한편 본 발명의 제2실시예에 따른 차량번호 인식기반 교통정보 통합 분석지원 시스템은 도 14와 도 15에서와 같이 도로영상정보 단위DB(500)와 도로영상정보 통합DB(600)를 구비할 수 있는데, 도로영상정보 단위DB(500)은 촬영장치(100)에 구비되어 상기 도로영상정보를 저장하는 DB이고, 도로영상정보 통합DB(600)은 차량 객체/번호 분석장치(400')에 구비되거나 차량 객체/번호 분석장치(400')에 연동되는 것으로 도로영상정보 단위DB(500)로부터 도로영상정보를 전달받아 데이터베이스화하는 DB이다.Meanwhile, the vehicle number recognition-based traffic information integrated analysis support system according to the second embodiment of the present invention may include a road image information unit DB 500 and an integrated road image information DB 600 as shown in FIGS. 14 and 15 . There, the road image information unit DB 500 is provided in the photographing device 100 to store the road image information, and the road image information integrated DB 600 is provided in the vehicle object/number analysis device 400 ′. It is a DB that receives road image information from the road image information unit DB 500 and converts it into a database by interworking with the vehicle object/number analysis device 400 ′.

이에 대응하여 영상분석장치(200)는 차량 객체/번호 분석장치(400')에 구비되어 도로영상정보 통합DB(600)로부터 도로영상정보를 전달받아 교통분석용 차번 정보단위체를 산출하게 되고, 교통분석용 차번 정보단위체 DB(300')는 차번정보 분석장치(400)에 구비되어 교통분석용 차번 정보단위체를 전달받게 된다.Correspondingly, the image analysis device 200 is provided in the vehicle object/number analysis device 400' to receive road image information from the road image information integration DB 600 to calculate the vehicle number information unit for traffic analysis, The vehicle number information unit DB 300' for analysis is provided in the vehicle number information analysis device 400 to receive the vehicle number information unit for traffic analysis.

여기서 도로영상정보 통합DB(600)는 도 15에서와 같이 도로영상정보를 동영상으로 저장하는 동영상 DB(610), 영상분석장치(200)에 의해 추출되는 차량 객체 정지화면이미지를 차량객체 사진정보로 저장하는 차량객체 사진DB(620)를 포함하는 구성으로 이루어져 필요에 따라 동영상이나 차량객체 사진정보를 활용하여 교통분석정보가 산출되도록 할 수 있다.Here, the road image information integration DB 600 converts the vehicle object still image extracted by the moving image DB 610 for storing the road image information as a moving image, and the image analysis device 200 as vehicle object photo information, as shown in FIG. 15 . It is configured to include a vehicle object photo DB 620 to store, so that traffic analysis information can be calculated by using video or vehicle object photo information as needed.

상기와 같이 구성된 본 발명의 실시예에 따른 차량번호 인식기반 교통정보 통합 분석지원 시스템은 도로영역 영상프레임 내 차량번호가 추출되면서 메타데이터(시간정보, 위치식별정호)와 연동되어 교통분석용 차번 정보단위체가 산출되고, 차번정보 DB와 차번정보 분석장치에 의해 교통분석용 차번 정보단위체가 시간/위치/차량번호를 기준으로 분류되고 연산처리되면서 특정지점 교통량 정보, 특정지점 이동방향 별 교통량 정보, 특정지점 차종 별 교통량 정보, 특정지점 대기행열 정보, 특정지점 교통량 대 용량비(V/C), 도로구간별 평균 이동속도정보, 도로구간별 회전 교통량 정보 등의 통계정보와 분석정보나 차량 시계열 추적정보가 도출되는 정보처리 프로세스가 제공되므로, 기본 교통정보와 각종 분석상황에 맞추어진 파생 교통정보가 신속하고 원활하게 산출될 수 있게 되고, 하나의 시스템으로 통합적인 교통정보/차량 추적정보의 산출과 활용이 가능해지게 된다. The vehicle number recognition-based traffic information integrated analysis support system according to the embodiment of the present invention configured as described above is interlocked with metadata (time information, location identification code) while the vehicle number in the image frame of the road area is extracted, vehicle number information for traffic analysis The unit is calculated, and the vehicle number information unit for traffic analysis is classified and calculated based on time/location/vehicle number by the vehicle number information DB and vehicle number information analysis device. Statistical information and analysis information or vehicle time series tracking information such as traffic volume information by vehicle type at a specific point, queue information at a specific point, traffic volume to capacity ratio (V/C) at a specific point, average moving speed information by road section, and rotational traffic volume information by road section As the derived information processing process is provided, basic traffic information and derived traffic information tailored to various analysis situations can be quickly and smoothly calculated, and the calculation and utilization of integrated traffic information/vehicle tracking information in one system it becomes possible

또한 본 발명의 실시예에 따른 차량번호 인식기반 교통정보 통합 분석지원 시스템은 차량번호의 미인식을 고려하여 도로영역 영상프레임로부터 차량객체도 추출되면서 메타데이터(시간정보, 위치식별정호)와 연동된 교통분석용 차번 정보단위체가 산출되고, 차량번호, 차량객체, 시간, 위치를 기준으로 교통분석용 차번 정보단위체가 분류되고 연산처리되면서 통계정보와 분석정보나 차량 시계열 추적정보가 도출되는 정보처리 프로세스가 제공되므로, 시스템 오류나 외부환경요인에 의해 차량번호가 미인식된 상황에서도 기본 교통정보와 각종 분석상황에 맞추어진 파생 교통정보가 신속하고 원활하게 산출될 수 있게 된다. In addition, the vehicle number recognition-based traffic information integrated analysis support system according to an embodiment of the present invention is linked with metadata (time information, location identification code) while also extracting vehicle objects from the road area image frame in consideration of the unrecognized vehicle number. An information processing process in which a vehicle number information unit for traffic analysis is calculated, and statistical information and analysis information or vehicle time series tracking information is derived as the vehicle number information unit for traffic analysis is classified and calculated based on the vehicle number, vehicle object, time, and location. is provided, so that even when the vehicle number is not recognized due to system errors or external environmental factors, basic traffic information and derived traffic information tailored to various analysis situations can be quickly and smoothly calculated.

그리고 본 발명의 실시예에 따른 차량번호 인식기반 교통정보 통합 분석지원 시스템은 차량번호 분석에 의한 교통량 수치값 산출, 차종 분석에 의한 차종별 교통량 수치값 산출, 차량객체 카운팅에 의한 트랙픽 이미지 산출 등의 다중 분석경로를 통해 교통량 정보가 산출되도록 하므로, 다양한 외부환경조건에서도 교통량 정보가 높은 안정성으로 산출될 수 있게 되고, 다양한 분석상황에 맞추어진 교통량 정보의 제공이 가능해질 수 있다.And the vehicle number recognition-based traffic information integrated analysis support system according to an embodiment of the present invention is a multi-purpose calculation of traffic volume numerical value by vehicle number analysis, traffic volume numerical value calculation by vehicle type by vehicle model analysis, and traffic image calculation by vehicle object counting Since traffic volume information is calculated through the analysis path, traffic volume information can be calculated with high stability even under various external environmental conditions, and traffic volume information tailored to various analysis situations can be provided.

상술한 바와 같은, 본 발명의 실시예에 따른 차량번호 인식기반 교통정보 통합 분석지원 시스템을 상기한 설명 및 도면에 따라 도시하였지만, 이는 예를 들어 설명한 것에 불과하며 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 다양한 변화 및 변경이 가능하다는 것을 이 분야의 통상적인 기술자들은 잘 이해할 수 있을 것이다.As described above, although the vehicle number recognition-based integrated traffic information analysis support system according to the embodiment of the present invention has been illustrated according to the above description and drawings, this is merely an example and does not depart from the technical spirit of the present invention. It will be appreciated by those skilled in the art that various changes and modifications are possible therein.

100 : 촬영장치
110 : 카메라
120 : 컨트롤러
130 : 저장매체
200 : 영상분석장치
210 : 차량객체 검출모듈
211 : 차량인식 알고리즘
220 : 차량번호 검출모듈
221 : 차량번호인식 알고리즘
230 : 차량특성정보 검출모듈
231 : 차량특성정보 추출알고리즘
240 : 차량카운팅정보 산출모듈
241 : 차량카운팅정보 산출알고리즘
250 : 교통분석용 차번 정보단위체 산출모듈
300 : 차번정보 DB
300' : 교통분석용 차번 정보단위체 DB
400 : 차번정보 분석장치
400' : 차량 객체/번호 분석장치
410 : 교통량정보 분석유닛
411 : 교통량 수치값 산출유닛
412 : 트래픽 이미지 산출유닛
420 : 이동속도 분석유닛
430 : 차종정보 분석유닛
440 : 차량추적 분석유닛
500 : 도로영상정보 단위DB
600 : 도로영상정보 통합DB
610 : 동영상 DB
620 : 차량객체 사진DB
100: shooting device
110: camera
120: controller
130: storage medium
200: image analysis device
210: vehicle object detection module
211: vehicle recognition algorithm
220: vehicle number detection module
221: vehicle number recognition algorithm
230: vehicle characteristic information detection module
231: vehicle characteristic information extraction algorithm
240: vehicle counting information calculation module
241: vehicle counting information calculation algorithm
250: Vehicle number information unit calculation module for traffic analysis
300: Vehicle number information DB
300': Vehicle number information unit DB for traffic analysis
400: vehicle number information analysis device
400': Vehicle object/number analysis device
410: traffic volume information analysis unit
411: traffic volume numerical value calculation unit
412: traffic image calculation unit
420: movement speed analysis unit
430: vehicle model information analysis unit
440: vehicle tracking analysis unit
500: road image information unit DB
600: road image information integrated DB
610: video DB
620: vehicle object photo DB

Claims (22)

삭제delete 삭제delete 삭제delete 삭제delete 삭제delete 삭제delete 삭제delete 삭제delete 삭제delete 삭제delete 삭제delete 삭제delete 삭제delete 삭제delete 삭제delete 삭제delete 삭제delete 도로에 설치되고, 화각 범위의 영역촬영으로 도로영역 영상프레임을 생성하며, 상기 도로영역 영상프레임에 메타데이터를 연동시킨 도로영상정보를 산출하되, 상기 메타데이터는 시간정보와 위치정보를 포함하는 촬영장치(100);
상기 촬영장치(100)의 도로영상정보를 입력받고, 도로영역 영상프레임에 대한 영상분석으로 차량 객체와 차량번호를 추출하며, 추출된 차량 객체와 차량 번호 중에서 선택된 어느 하나에 해당 도로영역 영상프레임의 메타데이터를 부여한 교통분석용 차번 정보단위체를 산출하는 영상분석장치(200);
상기 영상분석장치(200)로부터 교통분석용 차번 정보단위체를 전달받아 데이터베이스화시키는 교통분석용 차번 정보단위체 DB(300');
상기 교통분석용 차번 정보단위체 DB(300')와 연동되어 동작하고, 시간, 위치, 차량 객체, 차량번호 군(群) 중에서 선택된 어느 하나 이상의 정보요소를 기준으로 하여 상기 교통분석용 차번 정보단위체에 대한 분류와 연산처리를 수행하면서 교통분석프로그램용 입력정보와 교통분석정보 중에서 선택된 어느 하나를 산출하는 차량 객체/번호 분석장치(400');를 포함하며,
상기 영상분석장치(200)는,
상기 도로영역 영상프레임에 대한 영상분석을 통해 차량 객체를 추출하는 차량인식 알고리즘(211)이 구비되고, 상기 도로영상정보의 입력에 따라 상기 차량인식 알고리즘(211)이 동작하면서 차량 객체 이미지영역을 검출하는 차량객체 검출모듈(210);
차량 객체 이미지영역에 대한 영상분석을 통해 차량번호를 추출하는 차량번호인식 알고리즘(221)이 구비되고, 상기 차량객체 검출모듈(210)로부터 전달되는 차량 객체 이미지영역의 입력에 따라 상기 차량번호인식 알고리즘(221)이 동작하면서 차량번호 텍스트정보를 검출하는 차량번호 검출모듈(220);
상기 차량번호 검출모듈(220)의 차량번호인식 알고리즘(221)에 의한 차량번호 추출이 불가능한 번호미인식 차량 객체 이미지영역에 영상분석을 통해 차량객체 특성정보를 추출하는 차량특성정보 추출알고리즘(231)이 구비되고, 상기 차량번호 검출모듈(220)로부터 전달되는 상기 번호미인식 차량 객체 이미지영역의 입력에 따라 상기 차량특성정보 추출알고리즘(231)이 동작하면서 차량객체 특성정보를 검출하되, 상기 차량객체 특성정보는 차종정보, 크기정보, 색상정보 군(群) 중에서 선택된 어느 하나 이상을 포함하는 차량특성정보 검출모듈(230);
상기 차량특성정보 검출모듈(230)의 차량특성정보 추출알고리즘(231)에 의한 차량객체 특성정보 추출이 불가능한 특성미인식 차량 객체 이미지영역 발생시 차량객체 카운팅정보를 산출하는 차량카운팅정보 산출알고리즘(241)이 구비되고, 상기 차량특성정보 검출모듈(230)로부터 전달되는 상기 특성미인식 차량 객체 이미지영역의 입력에 따라 상기 차량카운팅정보 산출알고리즘(241)이 동작하면서 차량객체 카운팅정보를 산출하는 차량카운팅정보 산출모듈(240);
차량객체 특성정보나 차량객체 카운팅정보가 검출된 차량 객체에 객체 식별번호를 부여하고, 상기 도로영상정보로부터 검출된 차량번호 텍스트정보나 객체 식별번호를 상기 도로영상정보에 포함된 메타데이터와 연동시켜 교통분석용 차번 정보단위체를 산출하는 교통분석용 차번 정보단위체 산출모듈(250);을 포함하고,
상기 차량 객체/번호 분석장치(400')는 시간, 위치, 차량객체 특성정보, 차량객체 카운팅정보, 객체 식별번호, 차량번호 군(群) 중에서 선택된 어느 하나 이상의 정보요소를 기준으로 상기 교통분석용 차번 정보단위체에 대한 분류와 연산처리를 통해 교통분석정보를 산출하는 것을 특징으로 하는 차량번호 인식기반 교통정보 통합 분석지원 시스템.
It is installed on a road, generates a road region image frame by shooting a region of an angle of view, and calculates road image information in which metadata is linked to the road region image frame, wherein the metadata includes time information and location information. device 100;
Receives road image information of the photographing device 100, extracts a vehicle object and vehicle number through image analysis on the road area image frame, and selects any one selected from the extracted vehicle object and vehicle number of the corresponding road area image frame. an image analysis device 200 for calculating a vehicle number information unit for traffic analysis to which metadata is assigned;
a vehicle number information unit DB (300') for traffic analysis that receives the vehicle number information unit for traffic analysis from the image analysis device 200 and converts it into a database;
The vehicle number information unit for traffic analysis operates in conjunction with the DB 300', and based on any one or more information elements selected from time, location, vehicle object, and vehicle number group, the vehicle number information unit for traffic analysis is and a vehicle object/number analysis device 400' that calculates any one selected from input information for a traffic analysis program and traffic analysis information while performing classification and calculation processing for
The image analysis device 200,
A vehicle recognition algorithm 211 for extracting a vehicle object through image analysis of the road area image frame is provided, and the vehicle recognition algorithm 211 operates according to the input of the road image information to detect a vehicle object image area a vehicle object detection module 210;
A vehicle number recognition algorithm 221 for extracting a vehicle number through image analysis of the vehicle object image area is provided, and the vehicle number recognition algorithm according to the input of the vehicle object image area transmitted from the vehicle object detection module 210 A vehicle number detection module 220 for detecting vehicle number text information while 221 operates;
Vehicle characteristic information extraction algorithm (231) for extracting vehicle object characteristic information through image analysis in the number unrecognized vehicle object image area where vehicle number extraction is impossible by the vehicle number recognition algorithm 221 of the vehicle number detection module 220 is provided, and the vehicle characteristic information extraction algorithm 231 operates according to the input of the number unrecognized vehicle object image area transmitted from the vehicle number detection module 220 to detect vehicle object characteristic information, but the vehicle object The characteristic information includes: a vehicle characteristic information detection module 230 including at least one selected from vehicle model information, size information, and color information group;
Vehicle counting information calculation algorithm 241 for calculating vehicle object counting information when a characteristic unrecognized vehicle object image area in which vehicle object characteristic information extraction is impossible by the vehicle characteristic information extraction algorithm 231 of the vehicle characteristic information detection module 230 is generated vehicle counting information for calculating vehicle object counting information while the vehicle counting information calculation algorithm 241 operates according to the input of the characteristic unrecognized vehicle object image region transmitted from the vehicle characteristic information detection module 230 calculation module 240;
By giving an object identification number to a vehicle object in which vehicle object characteristic information or vehicle object counting information is detected, the vehicle number text information or object identification number detected from the road image information is linked with metadata included in the road image information It includes; a vehicle number information unit calculation module 250 for traffic analysis that calculates a vehicle number information unit for traffic analysis;
The vehicle object/number analysis device 400' is for the traffic analysis based on any one or more information elements selected from time, location, vehicle object characteristic information, vehicle object counting information, object identification number, and vehicle number group. Vehicle number recognition-based traffic information integrated analysis support system, characterized in that it calculates traffic analysis information through classification and calculation processing for vehicle number information units.
제 18항에 있어서,
상기 차량 객체/번호 분석장치(400')는,
차량번호 분석프로세스, 차량객체 특성정보 분석프로세스, 차량객체 카운팅 프로세스를 수행하여 특정지점 교통량 정보, 특정지점 차종 별 교통량 정보를 산출하는 교통량정보 분석유닛(410);을 포함하되,
상기 교통량정보 분석유닛(410)은,
동일한 위치식별정보를 가지면서 설정된 시간정보 구간에 소속된 교통분석용 차번 정보단위체의 개수를 하나 이상의 분석항목 별로 카운팅한 교통량 계수정보를 교통분석프로그램용 입력정보로 산출하거나, 상기 교통량 계수정보로부터 특정지점 교통량 정보를 교통분석정보로 산출하는 교통량 수치값 산출유닛(411);
동일한 위치식별정보를 가지면서 설정된 시간정보 구간에 소속된 교통분석용 차번 정보단위체의 개수를 하나 이상의 분석항목 별로 카운팅한 교통량 계수정보에 대응하는 교통량 트래픽 색상정보를 교통분석정보로 산출하는 트래픽 이미지 산출유닛(412);을 포함하는 것을 특징으로 하는 차량번호 인식기반 교통정보 통합 분석지원 시스템.
19. The method of claim 18,
The vehicle object / number analysis device 400 'is,
A vehicle number analysis process, a vehicle object characteristic information analysis process, and a vehicle object counting process to perform a specific point traffic volume information and a traffic volume information analysis unit 410 for calculating traffic volume information for each vehicle type at a specific point; including;
The traffic information analysis unit 410,
Calculating traffic volume coefficient information that counts the number of vehicle number information units for traffic analysis belonging to a set time information section while having the same location identification information for each one or more analysis items as input information for a traffic analysis program, or specifying from the traffic volume coefficient information a traffic volume numerical value calculation unit 411 for calculating the point traffic volume information as traffic analysis information;
Calculating a traffic image that calculates traffic color information corresponding to traffic volume coefficient information by counting the number of vehicle number information units for traffic analysis belonging to a set time information section while having the same location identification information for one or more analysis items as traffic analysis information Unit 412; Vehicle number recognition-based traffic information integrated analysis support system, characterized in that it includes.
제 18항에 있어서,
상기 영상분석장치(200)는 도로영역 영상프레임에 대한 영상분석으로 차량 객체와 차량번호를 추출한 후, 추출된 차량 객체의 이동방향 정보를 직전, 우회전, 좌회전으로 구분하여 검출하고, 상기 교통분석용 차번 정보단위체에 차량 객체의 이동방향 정보를 부가하며,
상기 차량 객체/번호 분석장치(400')는 시간, 위치, 차량객체, 차량번호, 이동방향 군(群) 중에서 선택된 어느 하나 이상의 정보요소를 기준으로 하여 상기 교통분석용 차번 정보단위체에 대한 분류와 연산처리를 수행하면서 교통분석프로그램용 입력정보와 교통분석정보 중에서 선택된 어느 하나를 산출하는 것을 특징으로 하는 차량번호 인식기반 교통정보 통합 분석지원 시스템.
19. The method of claim 18,
The image analysis device 200 extracts the vehicle object and vehicle number through image analysis of the road area image frame, and then divides and detects movement direction information of the extracted vehicle object into immediately preceding, right turn, and left turn, and for the traffic analysis Adds movement direction information of vehicle object to vehicle number information unit,
The vehicle object/number analysis device 400 ′ classifies the vehicle number information unit for traffic analysis based on any one or more information elements selected from time, location, vehicle object, vehicle number, and movement direction group, and Vehicle number recognition-based integrated analysis support system for traffic information, characterized in that one selected from input information for a traffic analysis program and traffic analysis information is calculated while performing calculation processing.
제 18항에 있어서,
상기 촬영장치(100)에 구비되어 상기 도로영상정보를 저장하는 도로영상정보 단위DB(500);
상기 차량 객체/번호 분석장치(400')에 구비되고, 상기 도로영상정보 단위DB(500)로부터 도로영상정보를 전달받아 데이터베이스화하는 도로영상정보 통합DB(600);를 더 포함하되,
상기 영상분석장치(200)는 상기 차량 객체/번호 분석장치(400')에 구비되어 상기 도로영상정보 통합DB(600)로부터 도로영상정보를 전달받아 교통분석용 차번 정보단위체를 산출하고,
상기 교통분석용 차번 정보단위체 DB(300')는 상기 차량 객체/번호 분석장치(400')에 구비되어 상기 교통분석용 차번 정보단위체를 전달받게 되는 것을 특징으로 하는 차량번호 인식기반 교통정보 통합 분석지원 시스템.
19. The method of claim 18,
a road image information unit DB 500 provided in the photographing device 100 to store the road image information;
It is provided in the vehicle object / number analysis device (400'), the road image information unit DB (500) to receive the road image information received from the road image information integrated DB (600) to make a database; further comprising,
The image analysis device 200 is provided in the vehicle object/number analysis device 400' to receive road image information from the road image information integration DB 600 and calculate a vehicle number information unit for traffic analysis,
The vehicle number information unit DB for traffic analysis (300') is provided in the vehicle object/number analysis device (400') to receive the vehicle number information unit for traffic analysis. support system.
제 21항에 있어서,
상기 도로영상정보 통합DB(600)는,
상기 도로영상정보를 동영상으로 저장하는 동영상 DB(610);
상기 영상분석장치(200)에 의해 추출되는 차량 객체 정지화면이미지를 차량객체 사진정보로 저장하는 차량객체 사진DB(620);를 포함하는 구성으로 이루어지는 것을 특징으로 하는 차량번호 인식기반 교통정보 통합 분석지원 시스템.
22. The method of claim 21,
The road image information integrated DB 600,
a video DB (610) for storing the road image information as a video;
Vehicle object photo DB (620) for storing the vehicle object still image extracted by the image analysis device 200 as vehicle object photo information; Vehicle number recognition-based traffic information integrated analysis, characterized in that it comprises a configuration including: support system.
KR1020200034703A 2020-03-20 2020-03-20 Traffic information combined analysis assistance system based on license plate number recognition KR102382560B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020200034703A KR102382560B1 (en) 2020-03-20 2020-03-20 Traffic information combined analysis assistance system based on license plate number recognition

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200034703A KR102382560B1 (en) 2020-03-20 2020-03-20 Traffic information combined analysis assistance system based on license plate number recognition

Publications (2)

Publication Number Publication Date
KR20210117856A KR20210117856A (en) 2021-09-29
KR102382560B1 true KR102382560B1 (en) 2022-04-01

Family

ID=77924914

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200034703A KR102382560B1 (en) 2020-03-20 2020-03-20 Traffic information combined analysis assistance system based on license plate number recognition

Country Status (1)

Country Link
KR (1) KR102382560B1 (en)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101034486B1 (en) * 2010-10-25 2011-05-23 주식회사 디아이랩 System and method for crackdown on traffic signal violations
KR101297321B1 (en) * 2013-04-02 2013-08-14 주식회사 스마트비전 Equipment for surveying traffic volume with function of collecting traffic information
KR101889085B1 (en) * 2017-12-07 2018-08-16 렉스젠(주) Apparatus for generating traffic information using vehicle trajectory and method thereof
KR101995813B1 (en) * 2018-12-31 2019-07-03 렉스젠(주) Apparatus for providing traffic information based on image and method thereof

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101834838B1 (en) * 2016-02-16 2018-03-06 충북대학교 산학협력단 System and method for providing traffic information using image processing
KR101997031B1 (en) * 2017-12-15 2019-10-17 (주)엔토스정보통신 Enforcement module integrated camera

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101034486B1 (en) * 2010-10-25 2011-05-23 주식회사 디아이랩 System and method for crackdown on traffic signal violations
KR101297321B1 (en) * 2013-04-02 2013-08-14 주식회사 스마트비전 Equipment for surveying traffic volume with function of collecting traffic information
KR101889085B1 (en) * 2017-12-07 2018-08-16 렉스젠(주) Apparatus for generating traffic information using vehicle trajectory and method thereof
KR101995813B1 (en) * 2018-12-31 2019-07-03 렉스젠(주) Apparatus for providing traffic information based on image and method thereof

Also Published As

Publication number Publication date
KR20210117856A (en) 2021-09-29

Similar Documents

Publication Publication Date Title
Siebel et al. The advisor visual surveillance system
KR101178878B1 (en) Object recognition and situation video search system and the image tractability system which uses this
KR20200071799A (en) object recognition and counting method using deep learning artificial intelligence technology
Zabłocki et al. Intelligent video surveillance systems for public spaces–a survey
CN105164695A (en) System and method for detection of high-interest events in video data
CN101371275A (en) Video signal analysis
KR100983777B1 (en) Image capture system for object recognitions and method for controlling the same
CN111325954B (en) Personnel loss early warning method, device, system and server
US11172168B2 (en) Movement or topology prediction for a camera network
KR20200103194A (en) Method and system for abnormal situation monitoring based on video
GB2562018A (en) A method and system for analyzing the movement of bodies in a traffic system
CN116824859B (en) Intelligent traffic big data analysis system based on Internet of things
KR20110035662A (en) Intelligent image search method and system using surveillance camera
CN110738366B (en) Outdoor blind zone behavior prediction method
Seidenari et al. Dense spatio-temporal features for non-parametric anomaly detection and localization
Feris et al. Case study: IBM smart surveillance system
KR101736431B1 (en) System and Method for Smart Traffic Monitoring Using Multiple Image
KR102382560B1 (en) Traffic information combined analysis assistance system based on license plate number recognition
KR101686851B1 (en) Integrated control system using cctv camera
KR102030736B1 (en) Apparatus for analyzing Multi-Distributed Video Data
Neto et al. Computer-vision-based surveillance of intelligent transportation systems
Sreekumar et al. TPCAM: Real-time traffic pattern collection and analysis model based on deep learning
Tsai et al. Multi-lane detection and road traffic congestion classification for intelligent transportation system
CN111898434B (en) Video detection and analysis system
KR102122853B1 (en) Monitoring system to control external devices

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant