KR102308193B1 - Outdoor advertisement measuring equipment using OCR and operating system linked with it - Google Patents
Outdoor advertisement measuring equipment using OCR and operating system linked with it Download PDFInfo
- Publication number
- KR102308193B1 KR102308193B1 KR1020190151127A KR20190151127A KR102308193B1 KR 102308193 B1 KR102308193 B1 KR 102308193B1 KR 1020190151127 A KR1020190151127 A KR 1020190151127A KR 20190151127 A KR20190151127 A KR 20190151127A KR 102308193 B1 KR102308193 B1 KR 102308193B1
- Authority
- KR
- South Korea
- Prior art keywords
- advertisement
- ocr
- outdoor
- data
- advertisements
- Prior art date
Links
- 238000004458 analytical method Methods 0.000 claims abstract description 44
- 238000005516 engineering process Methods 0.000 claims abstract description 37
- 238000004891 communication Methods 0.000 claims abstract description 28
- 238000005259 measurement Methods 0.000 claims abstract description 17
- 238000000034 method Methods 0.000 claims description 25
- 230000008569 process Effects 0.000 claims description 12
- 238000001514 detection method Methods 0.000 claims description 6
- 238000007667 floating Methods 0.000 claims description 5
- 230000000007 visual effect Effects 0.000 claims description 4
- 230000014509 gene expression Effects 0.000 claims description 2
- 230000007935 neutral effect Effects 0.000 claims description 2
- 101000957815 Culex pipiens Alpha-glucosidase Proteins 0.000 claims 2
- 238000004457 water analysis Methods 0.000 claims 1
- 238000012015 optical character recognition Methods 0.000 description 37
- 230000000694 effects Effects 0.000 description 8
- NIXOWILDQLNWCW-UHFFFAOYSA-N acrylic acid group Chemical group C(C=C)(=O)O NIXOWILDQLNWCW-UHFFFAOYSA-N 0.000 description 6
- 230000006870 function Effects 0.000 description 6
- 239000002184 metal Substances 0.000 description 6
- 238000013135 deep learning Methods 0.000 description 5
- 239000000463 material Substances 0.000 description 5
- 230000003190 augmentative effect Effects 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 238000012545 processing Methods 0.000 description 3
- 238000013473 artificial intelligence Methods 0.000 description 2
- 239000004744 fabric Substances 0.000 description 2
- 238000009434 installation Methods 0.000 description 2
- 229910052754 neon Inorganic materials 0.000 description 2
- GKAOGPIIYCISHV-UHFFFAOYSA-N neon atom Chemical compound [Ne] GKAOGPIIYCISHV-UHFFFAOYSA-N 0.000 description 2
- 239000003973 paint Substances 0.000 description 2
- 125000000391 vinyl group Chemical group [H]C([*])=C([H])[H] 0.000 description 2
- 229920002554 vinyl polymer Polymers 0.000 description 2
- 239000002023 wood Substances 0.000 description 2
- 238000004873 anchoring Methods 0.000 description 1
- 230000003796 beauty Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- OWZREIFADZCYQD-NSHGMRRFSA-N deltamethrin Chemical compound CC1(C)[C@@H](C=C(Br)Br)[C@H]1C(=O)O[C@H](C#N)C1=CC=CC(OC=2C=CC=CC=2)=C1 OWZREIFADZCYQD-NSHGMRRFSA-N 0.000 description 1
- 230000004941 influx Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 238000011835 investigation Methods 0.000 description 1
- 230000004807 localization Effects 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000001105 regulatory effect Effects 0.000 description 1
- 238000012549 training Methods 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
- G06Q50/26—Government or public services
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B64—AIRCRAFT; AVIATION; COSMONAUTICS
- B64C—AEROPLANES; HELICOPTERS
- B64C39/00—Aircraft not otherwise provided for
- B64C39/02—Aircraft not otherwise provided for characterised by special use
- B64C39/024—Aircraft not otherwise provided for characterised by special use of the remote controlled vehicle type, i.e. RPV
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B64—AIRCRAFT; AVIATION; COSMONAUTICS
- B64D—EQUIPMENT FOR FITTING IN OR TO AIRCRAFT; FLIGHT SUITS; PARACHUTES; ARRANGEMENT OR MOUNTING OF POWER PLANTS OR PROPULSION TRANSMISSIONS IN AIRCRAFT
- B64D47/00—Equipment not otherwise provided for
- B64D47/08—Arrangements of cameras
-
- G06K9/2054—
-
- G06K9/3258—
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/08—Learning methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/22—Image preprocessing by selection of a specific region containing or referencing a pattern; Locating or processing of specific regions to guide the detection or recognition
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/10—Terrestrial scenes
- G06V20/17—Terrestrial scenes taken from planes or by drones
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/60—Type of objects
- G06V20/62—Text, e.g. of license plates, overlay texts or captions on TV images
- G06V20/63—Scene text, e.g. street names
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
- G06V30/10—Character recognition
-
- B64C2201/127—
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B64—AIRCRAFT; AVIATION; COSMONAUTICS
- B64U—UNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
- B64U2101/00—UAVs specially adapted for particular uses or applications
- B64U2101/30—UAVs specially adapted for particular uses or applications for imaging, photography or videography
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B64—AIRCRAFT; AVIATION; COSMONAUTICS
- B64U—UNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
- B64U2201/00—UAVs characterised by their flight controls
- B64U2201/20—Remote controls
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Business, Economics & Management (AREA)
- General Health & Medical Sciences (AREA)
- Multimedia (AREA)
- Health & Medical Sciences (AREA)
- Tourism & Hospitality (AREA)
- General Engineering & Computer Science (AREA)
- Development Economics (AREA)
- Data Mining & Analysis (AREA)
- Evolutionary Computation (AREA)
- Biophysics (AREA)
- Molecular Biology (AREA)
- Computing Systems (AREA)
- Biomedical Technology (AREA)
- Mathematical Physics (AREA)
- Software Systems (AREA)
- Artificial Intelligence (AREA)
- Computational Linguistics (AREA)
- Educational Administration (AREA)
- Life Sciences & Earth Sciences (AREA)
- Economics (AREA)
- Human Resources & Organizations (AREA)
- Marketing (AREA)
- Primary Health Care (AREA)
- Strategic Management (AREA)
- General Business, Economics & Management (AREA)
- Aviation & Aerospace Engineering (AREA)
- Remote Sensing (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
본 발명에 따른 OCR기술을 적용한 옥외광고물 측정기기는, 옥외광고물을 촬영하기 위한 카메라(100); 5G 데이터 통신이 가능한 통신부(200); 데이터를 저장하기 위한 보조기억장치(300); 상기 카메라(100)가 촬영한 사진이나 동영상으로부터 광고물의 문자를 인식하는 OCR 인식부(400)를 포함하는 것을 특징으로 하고, 상기 측정기기와 연동하여 사용하는 5G 통신을 기반으로하며 광고물을 AI가 데이터화하여 분석하는 광고물 분석 시스템(10)은, 카메라(100) 및 상기 카메라(100)로 촬영한 사진, 동영상을 전송할 수 있도록 5G 데이터 통신이 가능한 통신부(200)를 포함하는 옥외광고물 측정기기(20); 상기 측정기기(20)로부터 전송받은 광고물 사진, 동영상을 분석하는 광고물 분석 AI(11) 및 상기 광고물 분석 AI(11)가 분석한 광고물 정보를 저장하는 광고물 저장 DB(12)를 포함하는 것을 특징으로 한다.The outdoor advertisement measuring device to which the OCR technology according to the present invention is applied includes: a camera 100 for photographing an outdoor advertisement; Communication unit 200 capable of 5G data communication; Auxiliary storage device 300 for storing data; It characterized in that it comprises an OCR recognition unit 400 for recognizing the text of the advertisement from the photo or video taken by the camera 100, based on 5G communication used in conjunction with the measuring device, and AI Advertisement analysis system 10, which is analyzed by converting it into data, measures outdoor advertisement including a camera 100 and a communication unit 200 capable of 5G data communication so as to transmit photos and videos taken with the camera 100 device 20; Advertisement analysis AI 11 that analyzes advertisement photos and videos transmitted from the measurement device 20 and advertisement storage DB 12 that stores advertisement information analyzed by the advertisement analysis AI 11 characterized by including.
Description
본 발명은 디바이스(측정기기)에 설치된 어플리케이션을 이용하여 옥외 광고물을 촬영하여 촬영된 사진 속 광고물을 OCR 기술을 적용하여 인식한 후, 연동되는 운영시스템의 AI가 데이터화 하여 DB에 저장된 데이터를 바탕으로 광고물을 분석하는 OCR기술을 활용한 옥외광고물 측정기기 및 그와 연동되는 운영시스템에 관한 것이다.The present invention uses an application installed on a device (measuring device) to photograph an outdoor advertisement and recognizes an advertisement in the photographed picture by applying OCR technology, and then converts the data stored in the DB into data by the AI of the interlocking operating system. It relates to an outdoor advertisement measurement device using OCR technology that analyzes advertisements based on the background and an operating system linked thereto.
일반적으로 광고를 소비자들에게 전달하기 위해 사용되는 매개수단으로서 광고매체가 사용되고 있다. 광고매체는 제품 판매와 밀접하게 연관되어 있기 때문에 광고효과를 극대화하기 위한 수단으로서 그 중요성이 나날이 증가하고 있으며, 그 유형으로는 크게 인쇄광고, 전파광고, 옥외광고, 교통광고 및 온라인광고 등으로 다양하다.In general, an advertisement medium is used as a medium used to deliver advertisements to consumers. As advertising media is closely related to product sales, its importance as a means to maximize advertising effects is increasing day by day. do.
이러한 다양한 유형의 광고매체는 그 자체만으로 소비자의 시선을 이끄는데 제한적일 수밖에 없다. 이에 따라 광고 효과를 극대화하기 위해서 근래에는 광고매체를 대중화된 스포츠에 접목한 광고 마케팅이 개발되어 널리 사용되고 있다. 예를 들어, 스포츠 종목에 따라 경기장 안의 펜스, 플로어 또는 스코어보드를 광고매체로 사용하거나, 더 나아가서는 스포츠 용품을 광고매체로 사용한 마케팅이 이루어지고 있다.These various types of advertising media are inevitably limited in attracting the attention of consumers by themselves. Accordingly, in order to maximize the advertising effect, in recent years, advertising marketing that combines advertising media with popular sports has been developed and widely used. For example, depending on the sport, a fence, a floor, or a scoreboard in a stadium is used as an advertising medium, or further, a marketing using sporting goods as an advertising medium is being performed.
또한, 간판의 경우 도시 미관 및 안전을 고려하여 건물에 대해 설치할 수 있는 개수, 위치 및 크기를 규제하고 있다. 그런데, 이러한 간판 설치 규제안을 무시하고, 불법으로 시설된 간판이 많이 있고, 이를 단속하기 위해서는 단속자가 관할 구역을 수시로 돌아다니면서 등록 여부를 간판 등록 대장과 일일이 비교하면서 확인하여야 하기 때문에 현실적으로 관리 및 규제가 쉽지 않은 문제점이 있다.In addition, in the case of signage, the number, location, and size that can be installed on a building are regulated in consideration of city aesthetics and safety. However, there are many signboards installed illegally by ignoring these billboard installation regulations, and in order to crack down on them, the enforcement officers must visit the jurisdiction frequently and check whether they are registered by comparing them with the signboard registration ledger. There is a problem that is not easy.
이러한 문제점을 개선하고자 국내 공개특허 제2006-0013342호에는 RFID태그를 이용한 간판 정보 관리 시스템이 개시되어 있다. 그런데, 상기 간판정보 관리시스템은 단속자가 간판에 부착되어 있는 RFID태그에 근접되게 단말기를 갖다 대야만 등록 여부를 확인할 수 있기 때문에 간판마다 일일이 단말기를 근접시켜야 하는 불편함이 있고, 특히 단속자의 키보다 높게 설치된 간판의 경우 RFID태그에 단말기를 현실적으로 근접시키기가 어려운 문제점이 있다.In order to improve this problem, Korean Patent Laid-Open No. 2006-0013342 discloses a signboard information management system using an RFID tag. However, the sign information management system is inconvenient to have to bring the terminals one by one for each signboard because the administrator can check whether the registration is registered only by holding the terminal close to the RFID tag attached to the signboard. In the case of a signboard installed high, there is a problem in that it is difficult to realistically bring the terminal to the RFID tag.
또한, RFID태그를 이용하여 등록 여부를 확인한다 하더라도, 개조 여부를 확인하기 위해서는 등록된 규격과 실제 현장에 설치된 간판의 규격이 일치하는 지를 검사하여야 하는데 간판이 지상으로부터 높게 설치되어 줄자 등을 이용해서는 규격측정이 불가능한 경우 변조 여부를 판단하기 어려운 문제점이 있다. In addition, even if the registration is checked using the RFID tag, it is necessary to check whether the registered standard matches the standard of the signboard installed on the site to check whether or not it is modified. If standard measurement is not possible, there is a problem in that it is difficult to determine whether or not there is modulation.
한편, 이와 같은 옥외 광고물을 분석하는 기술인 국내 등록특허 제10-0755431호에는 '피디에이를 이용한 옥외광고물 전수조사 시스템'이 제안된 바 있다.On the other hand, in Korean Patent Registration No. 10-0755431, which is a technology for analyzing such outdoor advertisements, a 'outdoor advertisement material survey system using PDA' has been proposed.
상기한 선행기술은 피디에이를 이용한 옥외광고물 전수조사 시스템에 관한 것으로, 피디에이에 새주소의 건물번호를 입력하여 입력된 건물번호에 따른 사업자정보와 옥외광고물관리정보를 동시에 검색하여 표시함으로 한번에 건물번호에 해당하는 허가 또는 신고된 간판과 무허가 불법간판을 식별할 수 있는 시스템에 관한 것이다.The above-mentioned prior art relates to a complete outdoor advertisement survey system using PDA, and by entering the building number of the new address in the PDA, business information and outdoor advertisement management information according to the entered building number are simultaneously searched and displayed to display a building at once. It relates to a system that can identify licensed or reported signs corresponding to numbers and illegal signs without permission.
그러나, 상기한 선행기술은 광고물에 대한 전수조사를 소수의 인력으로 신속하고 투명하게 실시할 수 있게 되어 세외수입증대는 물론 인건비 절감효과를 얻을 수 있지만, 광고물의 주소정보, 사업자 정보를 수집하는 것에 불과하며 광고물에 대한 더 많은 정보를 수집하는데 한계가 있다. 또한, 단순히 시스템의 통합으로 구성된 것으로 실시간으로 정보를 받지 못하는 등의 문제가 발생하였다.However, the above-mentioned prior art enables a full investigation of advertisements to be conducted quickly and transparently with a small number of manpower, thereby increasing non-tax revenue as well as reducing labor costs, but it is possible to obtain address information and business information of advertisements. There is a limit to collecting more information about advertisements. In addition, problems such as not being able to receive information in real time because it is simply composed of system integration occurred.
또한, 종래의 OCR 기술에서 인식률이 높은 라틴계열의 언어들은 한음운이 한 글자로 되어있어 구조가 단순하고 글자의 경우의 수가 적다. 그에 비하여 한글은 한음운이 자음과 모음을 이용해 초, 중, 종성을 조합한 구조로 되어있어 복잡하고 글자의 경우의 수가 많다.In addition, the Latin-based languages with a high recognition rate in the conventional OCR technology have a simple structure and a small number of letters because the phonum consists of one letter. On the other hand, Hangeul is complex and contains many letters, as the syllables are structured by combining the beginning, middle, and final consonants using consonants and vowels.
따라서, 본 발명은 상술한 문제점을 해결하기 위한 것으로, 옥외 광고물 측정기기로 옥외 광고물을 촬영 시, 촬영된 사진 속 광고물을 OCR 기술을 적용하여 인식한 후, AI가 데이터화 하여 5G 통신을 통해 광고물 분석 시스템(운영시스템)의 DB에 자동으로 실시간 입력하여, 딥러닝을 통해 AI가 인식하여 실시간으로 옥외 광고물 분석 정보를 받을 수 있는 OCR기술을 활용한 옥외광고물 측정기기 및 그와 연동되는 운영시스템을 제공함에 있다.Therefore, the present invention is to solve the above-mentioned problems, and when shooting an outdoor advertisement with an outdoor advertisement measuring device, after recognizing the advertisement in the photographed picture by applying OCR technology, AI converts it into data to perform 5G communication An outdoor advertisement measuring device using OCR technology that automatically inputs in real-time to the DB of the advertisement analysis system (operating system) through deep learning, AI recognizes it through deep learning, and receives outdoor advertisement analysis information in real time. It is to provide an operating system that is interlocked.
상기의 목적을 이루기 위한 본 발명에 따른 OCR기술을 적용한 옥외광고물 측정기기는, 옥외광고물을 촬영하기 위한 카메라(100); 5G 데이터 통신이 가능한 통신부(200); 데이터를 저장하기 위한 보조기억장치(300); 상기 카메라(100)가 촬영한 사진이나 동영상으로부터 광고물의 문자를 인식하는 OCR 인식부(400)를 포함하는 것을 특징으로 하고, 상기 측정기기와 연동하여 사용하는 5G 통신을 기반으로하며 광고물을 AI가 데이터화하여 분석하는 광고물 분석 시스템(10)은, 카메라(100) 및 상기 카메라(100)로 촬영한 사진, 동영상을 전송할 수 있도록 5G 데이터 통신이 가능한 통신부(200)를 포함하는 옥외광고물 측정기기(20); 상기 측정기기(20)로부터 전송받은 광고물 사진, 동영상을 분석하는 광고물 분석 AI(11) 및 상기 광고물 분석 AI(11)가 분석한 광고물 정보를 저장하는 광고물 저장 DB(12)를 포함하는 것을 특징으로 한다.An outdoor advertisement measuring device to which OCR technology is applied according to the present invention for achieving the above object includes: a
본 발명은 드론과 측정기기의 서버 통신을 통해 드론에 장착된 카메라에 보이는 화면을 스마트폰으로 보며 촬영 버튼을 클릭하여 드론에 장착된 카메라가 촬영하도록 하여 고층 건물과 같이 광고물이 촬영되기 힘든 곳에 있는 경우에도 광고물을 분석할 수 있다.The present invention allows the camera mounted on the drone to take pictures by clicking the shooting button while viewing the screen displayed on the camera mounted on the drone with a smartphone through server communication between the drone and the measuring device, so that advertisements are difficult to be photographed, such as in high-rise buildings. Advertisements can be analyzed even if there is.
또한, 촬영한 사진이나 영상을 OCR 인식부를 통해 광고물의 문자를 인식하고, 증강 현실(AR)을 이용한 딥러닝을 통하여 AI가 광고물을 인식하여 광고물로 판단되는 물체에 태그가 생기고 그 태그를 클릭 시 광고물에 관한 데이터가 화면에 디스플레이되며 잘못 측정된 데이터를 사용자가 따로 수정하거나 잘못 측정된 데이터가 없을 시 데이터를 데이터베이스에 바로 저장하는 효과를 갖는다.In addition, the captured photo or image is recognized by the OCR recognition unit, and the text of the advertisement is recognized, and the AI recognizes the advertisement through deep learning using augmented reality (AR). When clicked, data on advertisements is displayed on the screen, and when the wrongly measured data is separately corrected by the user or there is no wrongly measured data, the data is directly stored in the database.
도 1은 본 발명에 따른 OCR기술을 활용한 옥외광고물 측정기기 및 그와 연동되는 운영시스템의 개념도이다.
도 2는 본 발명에 따른 OCR기술을 활용한 옥외광고물 측정기기 및 그와 연동되는 운영시스템의 구성도이다.
도 3은 본 발명에 따른 OCR기술을 활용한 옥외광고물 측정기기 및 그와 연동되는 운영시스템의 어플리케이션 동작 화면이다.
도 4는 본 발명에 따른 OCR기술을 활용한 옥외광고물 측정기기 및 그와 연동되는 운영시스템의 동작 흐름도이다.
도 5는 본 발명에 따른 OCR기술을 활용한 옥외광고물 측정기기 및 그와 연동되는 운영시스템의 향상된 OCR 인식 방법을 설명하기 위한 실시 예의 텍스트 파일이다.
도 6은 본 발명에 따른 OCR기술을 활용한 옥외광고물 측정기기 및 그와 연동되는 운영시스템의 향상된 OCR 인식 방법을 설명하기 위한 실시 예의 학습 이미지이다.1 is a conceptual diagram of an outdoor advertisement measuring device using OCR technology according to the present invention and an operating system interworking therewith.
2 is a block diagram of an outdoor advertisement measuring device using OCR technology according to the present invention and an operating system interworking therewith.
3 is an application operation screen of an outdoor advertisement measuring device using OCR technology according to the present invention and an operating system interworking therewith.
4 is an operation flowchart of an outdoor advertisement measuring device using OCR technology according to the present invention and an operating system interworking therewith.
5 is a text file of an embodiment for explaining an improved OCR recognition method of an outdoor advertisement measuring device using OCR technology according to the present invention and an operating system interworking therewith.
6 is a learning image of an embodiment for explaining an improved OCR recognition method of an outdoor advertisement measuring device using OCR technology according to the present invention and an operating system interworking therewith.
이하에서는, 본 발명의 실시 예에 따른 도면을 참조하여 설명하지만, 이는 본 발명의 더욱 용이한 이해를 위한 것으로, 본 발명의 범주가 그것에 의해 한정되는 것은 아니다.Hereinafter, although described with reference to the drawings according to an embodiment of the present invention, this is for easier understanding of the present invention, and the scope of the present invention is not limited thereto.
명세서 전체에서 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있음을 의미한다. 또한, 명세서에 기재된 "... 부", "모듈" 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미하며, 이는 하드웨어 또는 소프트웨어로 구현되거나 하드웨어와 소프트웨어의 결합으로 구현될 수 있다.When a part "includes" a certain element throughout the specification, this means that other elements may be further included, rather than excluding other elements, unless otherwise stated. In addition, terms such as "... unit" and "module" described in the specification mean a unit that processes at least one function or operation, which may be implemented as hardware or software, or a combination of hardware and software. .
본 명세서에 있어서는 어느 하나의 구성요소가 다른 구성요소로 데이터 또는 신호를 '전송'하는 경우에는 구성요소는 다른 구성요소로 직접 상기 데이터 또는 신호를 전송할 수 있고, 적어도 하나의 또 다른 구성요소를 통하여 데이터 또는 신호를 다른 구성요소로 전송할 수 있음을 의미한다.In the present specification, when one component 'transmits' data or signal to another component, the component may directly transmit the data or signal to another component, and through at least one other component This means that data or signals can be transmitted to other components.
설명에 앞서 본 명세서에는 다수의 양태 및 실시양태가 기술되며, 이들은 단순히 예시적인 것으로서 한정하는 것이 아니다.Prior to the description, a number of aspects and embodiments are described herein, which are merely illustrative and not limiting.
본 명세서를 읽은 후에, 숙련자는 다른 양태 및 실시예가 본 발명의 범주로부터 벗어남이 없이 가능함을 이해할 것이다.After reading this specification, those skilled in the art will understand that other aspects and embodiments are possible without departing from the scope of the invention.
이하에서 설명되는 실시양태의 상세 사항을 다루기 전에, 몇몇 용어를 정의하거나 또는 명확히 하기로 한다Before going into the details of the embodiments described below, some terms are defined or clarified.
AI는 artificial intelligence의 약자로 혹은 machine intelligence라고도 불리며, 인공지능이라 한다. AI는 일반적으로 시스템에 의해 만들어지며 기계를 지능적으로 만드며, 기계가 환경을 파악하고 예측하여 적절하게 기능하도록 하는 것을 의미한다.AI is an abbreviation for artificial intelligence or is also called machine intelligence, or artificial intelligence. AI is generally created by systems and refers to making machines intelligent, allowing machines to understand and predict their environment to function properly.
AR은 augmented reality의 약자로 증강현실이라고 불린다. AR은 가상현실(VR)의 한 분야로 실제로 존재하는 환경에 가상의 사물이나 정보를 합성하여 마치 원래의 환경에 존재하는 사물처럼 보이도록 하는 컴퓨터 그래픽 기법이다. 디지털 미디어에서 빈번하게 사용된다.AR is an abbreviation of augmented reality and is called augmented reality. AR is a field of virtual reality (VR) and is a computer graphic technique that synthesizes virtual objects or information in an actual environment to make them appear as if they exist in the original environment. It is frequently used in digital media.
컴퓨터 비전 알고리즘은 카메라나 스캐너 등의 영상 입출력 매체를 통하여 입력 받은 이미지나 영상에서 물체 (Object), 전경 (Foreground), 배경 (Background) 등 물체와 주변 환경에 대한 데이터를 분석하여 유의미한 정보를 생성하는 기술로, Image Processing을 통하여 필요한 정보를 생성합니다. 즉, 컴퓨터의 시각적인 능력에 판단 능력을 부여하여 데이터 (이미지, 동영상)를 가공 및 해석하는데 사용된다.Computer vision algorithms generate meaningful information by analyzing data about objects and the surrounding environment, such as objects, foregrounds, and backgrounds, from images or images input through image input/output media such as cameras or scanners. technology to generate the necessary information through Image Processing. That is, it is used to process and interpret data (images, moving pictures) by giving judgment ability to the visual ability of the computer.
DEC란 광고를 접하는 사람수를 의미한다.DEC refers to the number of people who encounter an advertisement.
OCR이란 Optical Character Reader(or Recognition)의 약자로 광학 문자 인식이라고도 하며, 이미지에서 글자를 인지하여 텍스트 데이터로 치환하는 것을 의미한다.OCR is an abbreviation of Optical Character Reader (or Recognition), also called optical character recognition, and means recognizing characters in an image and replacing them with text data.
도 1은 본 발명에 따른 OCR기술을 활용한 옥외광고물 측정기기 및 그와 연동되는 운영시스템의 개념도이고, 도 2는 본 발명에 따른 OCR기술을 활용한 옥외광고물 측정기기 및 그와 연동되는 운영시스템의 구성도이고, 도 3은 본 발명에 따른 OCR기술을 활용한 옥외광고물 측정기기 및 그와 연동되는 운영시스템의 어플리케이션 동작 화면이고, 도 4는 본 발명에 따른 OCR기술을 활용한 옥외광고물 측정기기 및 그와 연동되는 운영시스템의 동작 흐름도이고, 도 5는 본 발명에 따른 OCR기술을 활용한 옥외광고물 측정기기 및 그와 연동되는 운영시스템의 향상된 OCR 인식 방법을 설명하기 위한 실시 예의 텍스트 파일이고, 도 6은 본 발명에 따른 OCR기술을 활용한 옥외광고물 측정기기 및 그와 연동되는 운영시스템의 향상된 OCR 인식 방법을 설명하기 위한 실시 예의 학습 이미지이다.1 is a conceptual diagram of an outdoor advertisement measuring device using OCR technology according to the present invention and an operating system interlocked therewith, and FIG. 2 is an outdoor advertisement measuring device using OCR technology according to the present invention and interworking therewith. It is a configuration diagram of an operating system, and FIG. 3 is an application operation screen of an outdoor advertisement measuring device using the OCR technology according to the present invention and an operating system interworking therewith, and FIG. 4 is an outdoor advertisement using the OCR technology according to the present invention. It is an operation flowchart of an advertisement measuring device and an operating system interlocked therewith, and FIG. 5 is an implementation for explaining an improved OCR recognition method of an outdoor advertisement measuring device using OCR technology according to the present invention and an operating system interworking therewith It is an example text file, and FIG. 6 is a learning image of an embodiment for explaining an improved OCR recognition method of an outdoor advertisement measuring device using OCR technology according to the present invention and an operating system interworking therewith.
다음은 도 1 내지 도 6을 참조하여 본 발명에 따른 OCR기술을 활용한 옥외광고물 측정기기 및 그와 연동되는 운영시스템에 대해 상세히 설명하도록 한다.Next, an outdoor advertisement measuring device using the OCR technology according to the present invention and an operating system interworking therewith will be described in detail with reference to FIGS. 1 to 6 .
5G 통신을 기반으로하며 광고물을 AI가 데이터화하여 분석하는 광고물 분석 시스템(10)과 연동하여 사용하는 OCR기술을 적용한 옥외광고물 측정기기(20)는 옥외광고물을 촬영하기 위한 카메라(100); 5G 데이터 통신이 가능한 통신부(200); 데이터를 저장하기 위한 보조기억장치(300); 상기 카메라(100)가 촬영한 사진이나 동영상으로부터 광고물의 문자를 인식하는 OCR 인식부(400)를 포함하는 것을 특징으로 한다.The outdoor
또한, 상기 측정기기(20)는 AR 기능 및 GPS 기능을 갖는다.In addition, the
또한, 데이터를 시각적으로 확인할 수 있도록 출력하는 디스플레이(500)를 더 포함할 수 있다.In addition, it may further include a display 500 for outputting the data to be visually confirmed.
5G 통신을 기반으로하며 광고물을 AI가 데이터화하여 분석하는 광고물 분석 시스템(10)은, 카메라(100) 및 상기 카메라(100)로 촬영한 사진, 동영상을 전송할 수 있도록 5G 데이터 통신이 가능한 통신부(200)를 포함하는 옥외광고물 측정기기(20); 상기 측정기기(20)로부터 전송받은 광고물 사진, 동영상을 분석하는 광고물 분석 AI(11) 및 상기 광고물 분석 AI(11)가 분석한 광고물 정보를 저장하는 광고물 저장 DB(12)를 포함하는 것을 특징으로 한다.The
또한, 고층 건물의 광고물을 촬영하기 위한 카메라를 포함한 드론(13)을 더 포함할 수 있다.In addition, it may further include a
또한, 상기 광고물 분석 AI(11)가 분석한 상기 광고물 정보는 가게명, 가게 전화번호, 간판 규격, 해당 광고물 매장 소재지, 간판 사진인 것을 특징으로 한다.In addition, the advertisement information analyzed by the
본 발명에 따른 5G 기반 AI 옥외 광고물 분석 시스템은 사용자가 스마트폰을 사용하여 광고물을 분석할 수 있도록 스마트폰 전용 어플리케이션을 더 포함할 수 있다. 도 3과 같이 상기 어플리케이션은 사용자가 광고물을 촬영할 시, 촬영한 사진 속 광고물을 광고물 분석 AI(11)가 데이터화하여 5G 통신을 통해 광고물 저장 DB(12)에 자동으로 저장할 수 있도록 편의를 제공한다.5G-based AI outdoor advertisement analysis system according to the present invention may further include a smartphone-only application so that a user can analyze advertisements using a smartphone. As shown in Figure 3, the application is convenient so that when the user shoots an advertisement, the
상기 광고물 분석 AI(11)가 데이터화하여 상기 광고물 저장 DB(12)에 저장하는 광고물 정보는 크게 가게명, 가게 전화번호, 간판 규격, 간판 해당 매장 소재지(GPS), 간판 사진 등이 된다. 가게명, 가게 전화번호 등은 AI의 텍스트 분석 기능을 활용하여 읽어오며, 영어나 숫자에 비해 한글의 경우 인식이 잘 안될 가능성이 있기 때문에 상기 어플리케이션에서 수정이 가능하게끔 수정 항목을 따로 두는 것을 권장한다. 간판 규격은 AR기능을 이용하여 화면상에 들어온 간판의 거리를 인지하여 간판의 가로, 세로, 두께를 측정한다. 가게 소재지 정보는 촬영 당시 스마트폰의 GPS위치를 상기 광고물 저장 DB(12)에 저장한다.The advertisement information that the
고층이라 광고물이 잘 찍히지 않는 곳에 있는 경우 드론(13)과 통신부(200) 혹은 스마트폰과의 서버 통신을 통해 드론에 장착된 카메라에 보이는 화면을 스마트폰으로 보며 촬영 버튼을 클릭하여 드론에 장착된 카메라가 촬영하게 되고 그때 찍힌 사진과 드론의 GPS 정보를 통신을 통해 IoT 플랫폼에 전달되고 IoT 플랫폼을 이용하여 스마트 폰의 어플리케이션으로 전달, 광고물을 데이터화 시킨 후 어플리케이션에서 저장 버튼을 클릭하여 광고물 저장 DB(12)에 저장하도록 한다.If you are in a place where advertisements cannot be taken because of high floors, you can view the screen on the camera mounted on the drone with a smartphone through server communication between the
광고물 분석 AI(11)를 통해 상기 어플리케이션 내의 변수에 저장하여 저장된 데이터를 화면에 디스플레이하여 한 번 확인 시켜준 후 상기 광고물 분석 AI(11)에 의해 추출된 데이터에 오류가 있을 시(오탈자 등) 수정 버튼을 눌러 사용자가 직접 수정할 수 있으며, 오류가 없는 경우 저장 버튼을 눌러 광고물 저장 DB(12)에 저장한다.When there is an error in the data extracted by the
또한, 사용자 스마트폰의 GPS기능을 이용하여 데이터화된 광고물의 위치가 어디인지를 데이터화하여 광고물 저장 DB(12)에 저장할 수 있으며, 촬영 위치는 건물의 높이, 위치, 주변 환경에 따라 다를 수 있으므로, GPS 저장 시 그 광고물이 존재하는 도로명을 GPS 데이터로 불러오도록 한다. 정확한 건물위치 필요 시 사용자가 수정 버튼을 눌러 입력되어 있는 도로명 뒤에 건물번호, 건물이름, 층수 등을 자세히 기술할 수 있도록 한다.In addition, by using the GPS function of the user's smartphone, the location of the data-formatted advertisement can be converted into data and stored in the
한편, 광고물 분석 AI(11)를 딥러닝을 통해 간판의 형태(일반 간판, 네온 간판, 애드벌룬 등)를 학습시킨 후 간판의 형태를 구분 짓는 데이터도 광고물 저장 DB(12)에 저장한다. 일반간판, 네온간판, 애드벌룬 등의 이미지 데이터들을 대량으로 학습시켜 각각의 특징을 구분 지을 수 있게끔 한다.On the other hand, after the
또한, AR(증강 현실)을 이용하여, 카메라(100)로부터 광고물까지의 거리를 광고물 분석 AI(11)가 인식한 후 거리에 비례하여 화면상에 보이는 광고물 앞면의 세로, 가로 길이, 광고물의 두께를 측정하여 데이터화하여 광고물 저장 DB(12)에 저장한다.In addition, using AR (augmented reality), after the
다음은 도 4를 참조하여 본 발명에 따른 5G 기반 OCR기술을 활용한 옥외광고물 측정기기 및 그와 연동되는 운영시스템의 동작 흐름에 대해 상세히 설명하도록 한다.Next, with reference to FIG. 4, the operation flow of the outdoor advertisement measuring device using the 5G-based OCR technology according to the present invention and the operating system interworking therewith will be described in detail.
측정기기(스마트폰)에 설치된 어플리케이션을 실행하고(S100), 측정기기의 카메라로 광고물을 촬영한다(S200). 그리고 통신부(200)를 통해 광고물 분석 AI(11)로 전송하여, 어플리케이션을 통해 분석 결과물을 확인할 수 있도록 분석 결과물을 출력한다(S400). 이후 통신부(110)에서 분석 결과물을 광고물 저장 DB(12)로 전송한다(S500). 또한, 상기 단계(S200)는 촬영대상이 고층건물에 위치하여 촬영이 어려울 시 카메라를 포함한 드론(13)으로 촬영하는 것을 포함한다.The application installed on the measuring device (smartphone) is executed (S100), and the advertisement is photographed with the camera of the measuring device (S200). Then, it is transmitted to the
다음은 본 발명에 따른 5G 기반 AI 옥외 광고물 분석 시스템의 광고물 분석 AI(11)에 적용할 수 있는 SLAM(Simultaneous Localization And Mapping, 동시적 위치추정과 지도작성) 기술에 대해 좀 더 상세히 설명하도록 한다.Next, to describe in more detail the SLAM (Simultaneous Localization And Mapping) technology that can be applied to the
SLAM 기술은 VIO(Visual Inertial Odometry, 시각적 관성 거리계)를 기반으로 하며, VIO의 구현에 있어서는 칼만 필터 기반의 방식으로 하는 것을 권장한다. 이는 카메라(100)로부터 들어오는 영상을 광고물 분석 AI(11)가 컴퓨터 비전 알고리즘을 이용하여 분석하여 특징점을 찾고, 이를 칼만 필터에서 활용하여 오차를 보정한다. 이를 통해 공간상의 특정한 점에 가상 물체를 놓을 수 있는 앵커링 기능이 가능한 것이다.SLAM technology is based on VIO (Visual Inertial Odometry), and it is recommended to implement VIO in a Kalman filter-based method. In this case, the
다음은 본 발명에 따른 OCR기술을 활용한 옥외광고물 측정기기 및 그와 연동되는 운영시스템의 광고물 분석 AI(11)가 구분하는 광고물 유형에 대해 좀 더 상세히 설명하도록 한다.Next, the advertisement types classified by the outdoor advertisement measurement device using the OCR technology according to the present invention and the
광고물 유형은 크게 가로형 간판, 세로형 간판, 돌출 간판, 공연 간판, 옥상 간판, 창문 광고물, 현수막, 지주 이용 광고물, 공공시설물 이용 광고물로 구분한다.Advertisement types are broadly classified into horizontal signage, vertical signage, protruding signage, performance signage, rooftop signage, window advertisement, banner, propagation advertisement, and public facility use advertisement.
다음은 광고물 유형에 따라 좀 더 상세히 설명하도록 한다.The following will be described in more detail according to the type of advertisement.
가로형 간판은 문자·도형 등을 목재·아크릴·금속재 등의 판에 표시하거나 입체형으로 제작되어 건물의 벽면에 가로로 길게 붙이거나 벽면 등에 직접 도료로 표시하는 광고물을 의미한다. 또한, 주유소나 가스충전소 등의 주유기나 충전기시설의 차양면에 상호, 정유사 등의 명칭을 표시하거나 상호를 현수식으로 표시하는 광고물을 뜻한다.Horizontal signage refers to advertisements in which characters and figures are displayed on wooden, acrylic, or metal boards, or are produced in a three-dimensional form and placed horizontally on the wall of a building or displayed directly on the wall with paint. In addition, it refers to advertisements that display the name of a trade name, oil refinery, etc. or display the trade name in a suspended form on the awning of a gas station or charging station, such as a gas station or gas filling station.
세로형 간판은 문자·도형 등을 목재·아크릴·금속재 등의 판에 표시하거나 입체형으로 제작되어 건물의 벽면 또는 기둥에 세로로 길게 붙이거나 벽면 등에 직접 도료로 표시하는 광고물을 의미한다.Vertical signage refers to advertisements in which characters and figures are displayed on wooden, acrylic, or metal boards, or produced in a three-dimensional form and attached vertically to the wall or column of a building or displayed directly on the wall with paint.
돌출 간판은 문자, 도형 등을 목재, 아크릴, 금속재 등의 판이나 이용업소, 미용업소의 표지와 같이 건물의 벽면에 튀어나오게 붙이는 광고물을 의미한다.A protruding signage means an advertisement that sticks characters, figures, etc., on the wall of a building, such as a board made of wood, acrylic, or metal, or a sign of a business or beauty salon.
공연 간판은 공연, 영화를 알리기 위한 문자, 그림 등을 목재, 아크릴, 금속재 등의 판에 표시하거나 실물의 모형 등을 제작하여 해당 공연 건물의 벽면에 표시하는 광고물을 의미한다.A signboard for a performance refers to an advertisement displayed on the wall of the performance building by displaying characters, pictures, etc. to announce a performance or movie on a board made of wood, acrylic, metal, etc., or by making a real model.
옥상 간판은 건물의 옥상에 따로 삼각형·사각형 또는 원형 등의 게시시설을 설치하여 문자·도형 등을 표시하거나 승강기탑·계단탑·망루·장식탑·옥탑 등 건물의 옥상구조물에 문자·도형 등을 직접 표시하는 광고물을 의미한다.For rooftop signage, a separate triangular, square, or circular bulletin board is installed on the roof of the building to display text and figures, or to display text and figures on the roof structures of buildings, such as elevator towers, stair towers, watchtowers, decorative towers, and rooftops. Advertisements that are displayed directly.
창문 이용 광고물은 천·종이·비닐 등에 문자·도형 등을 표시하여 창문 또는 출입문에 직접 붙이거나 문자·도형 등을 목재·아크릴·금속재 등의 판이나 입체형으로 제작하여 창문 또는 출입문을 이용하여 표시하는 광고물을 의미한다.For advertisements using windows, characters and figures are marked on cloth, paper, vinyl, etc. and placed directly on a window or door, or characters and figures are produced in a wooden, acrylic, or metal plate or three-dimensional form and displayed using a window or door. means advertising.
현수막은 천·종이·비닐 등에 문자·도형 등을 표시하여 건물 등의 벽면, 지주, 게시시설 또는 그 밖의 시설물 등에 매달아 표시하는 광고물을 의미한다.A placard refers to an advertisement displayed on the wall of a building, post, notice board, or other facilities by displaying characters, figures, etc. on cloth, paper, vinyl, etc.
지주 이용 광고물은 문자·도형 등을 표시한 목재·아크릴·금속재 등의 판을 지면에 따로 설치한 지주에 붙이거나, 문자·도형 등을 따로 설치한 삼각기둥·사각기둥·원기둥 등의 게시시설 기둥면에 직접 표시하거나, 군사시설, 철도의 주요 경계시설, 공사 현장 등을 가리기 위하여 지주에 표시하는 광고물을 의미한다.For advertisements using props, wooden, acrylic, or metal plates marked with letters and figures, etc. are attached to posts installed separately on the ground, or posting facilities such as triangles, squares, and cylinders with letters and figures separately installed. Advertisements that are displayed directly on the pillar surface or displayed on the posts to cover military facilities, major boundary facilities of railways, construction sites, etc.
공공시설물 이용광고물은 공공의 목적을 위하여 설치하는 인공구조물 또는 편익시설물에 표시하는 광고물을 의미한다.Public facility use advertisement means advertisement displayed on artificial structures or convenience facilities installed for public purposes.
다음은, 본 발명에 따른 옥외 광고물 분석을 위한 어플리케이션에 적용할 수 있는 옥외광고 효과측정 모델에 대해 상세히 설명하도록 한다.Next, the outdoor advertisement effect measurement model applicable to the application for analyzing outdoor advertisements according to the present invention will be described in detail.
옥외광고를 크게 야립광고와 옥상광고로 구분하여 그에 따른 효과측정 모델에 대해 설명하도록 한다.Outdoor advertising is largely divided into outdoor advertising and rooftop advertising, and the effect measurement model will be explained accordingly.
야립광고 효과측정 모델은 야립광고물의 효과분석을 위해 야립광고의 효과에 영향을 미치는 본원적 요인으로 DEC를 규정하였다. 야립광고의 DEC1는 야립광고물의 설치지역을 중심으로 해당지역을 통과하는 교통량만을 측정하도록 한다.DEC was defined as the primary factor influencing the effectiveness of the outdoor advertisement for the effect analysis of the side advertisement effect measurement model. DEC 1 of street advertisements measures only the amount of traffic passing through the area centered on the area where the street advertisement is installed.
DEC는 야립광고물에 노출될 가능성이 있는 1일 통행량을 기준으로 측정하며, 시간을 아침, 오전, 오후, 저녁, 시간대별로 측정하며, 교통수단의 특성을 고려하여 버스에는 15의 가중치를 자동차의 경우 1.3의 가중치를 적용하도록 한다.DEC measures the daily traffic that is likely to be exposed to public advertisements, and measures the time by morning, morning, afternoon, evening, and time zone. In this case, the weight of 1.3 should be applied.
야립광고의 실제적 노출을 고려한 항목으로 가시각도와 노출시간, 차량정체도(평균주행속도)가 포함되며, 또한 DEC 측정 지수를 통해 야립광고의 매체효율성을 측정할 수 있는 지표로서 하기 수학식과 같이 CPM1을 도출할 수 있다.The items that consider the actual exposure of the outdoor advertisement include the visibility angle, exposure time, and vehicle congestion (average driving speed). Also, as an index that can measure the media efficiency of the outdoor advertisement through the DEC measurement index, CPM 1 as shown in the following equation can be derived.
<수학식1. 야립광고 총 노출량에 관한 식><
<수학식2. 야립광고 DEC에 관한 식><Equation 2. Expressions about the side advertisement DEC>
<수학식3. 야립광고의 CPM에 관한 식><Equation 3. Equation for CPM of Side Advertisements>
Y1은 야립광고 총 노출량을 의미하며, DEC1은 야립광고 모델에서 차량유동인구를 의미한다.Y 1 means the total exposure to street advertising, and DEC 1 means the floating population of vehicles in the street advertising model.
다음은 옥상광고 효과측정 모델에 관해 상세히 설명하도록 한다.The following describes the rooftop advertising effectiveness measurement model in detail.
본 모델은 옥상광고물의 효과분석을 위해 옥상광고의 효과에 영향을 미치는 본원적 요인으로 DEC를 규정하였다. 옥상광고의 DEC는 옥상광고물의 설치지역을 중심으로 해당지역을 통과하는 교통량(차량유동인구)과 도보유동인구를 측정하도록 한다.This model stipulated DEC as a fundamental factor affecting the effectiveness of rooftop advertisements for the purpose of analyzing the effects of rooftop advertisements. The DEC of rooftop advertisements measures the amount of traffic (vehicle floating population) and walking population that pass through the area centered on the installation area of the rooftop advertisement.
DEC는 옥상광고물에 노출될 가능성이 있는 1일 차량통행량을 기준으로 측정시간을 아침, 오전, 오후, 저녁, 시간대별로 측정하며, 교통수단의 특성을 고려하여 버스에는 15의 가중치를 자동차의 경우 1.3의 가중치를 적용한다.DEC measures the measurement time for each morning, morning, afternoon, evening, and time zone based on the daily vehicle traffic that is likely to be exposed to rooftop advertisements. A weight of 1.3 is applied.
도보유동인구의 경우, 옥상광고에 노출될 가능성이 있는 지하철 출구와 버스승하차장을 고려하여 측정지점이 각각의 유입인구를 포함시킬 수 있도록 유의하여, 하차이후 보행자 이동선이 옥외광고를 향하고 있는 곳을 중심으로 측정지점을 선정하여 측정하며, 옥상광고의 실제적 노출을 고려한 항목으로 가시각도, 가시거리, 차량정체도(평균주행속도) 등이 포함된다. 또한 CPM을 도출하는 방법은 야립광고 모델과 같다.In the case of floating population on foot, taking into consideration subway exits and bus alighting points that are likely to be exposed to rooftop advertisements, take care to include each influx of people at the measurement point, and focus on the place where the pedestrian movement line is facing the outdoor advertisement after getting off. The measurement point is selected and measured by using the metric, and the items that consider the actual exposure of rooftop advertisements include visibility angle, visible distance, and vehicle congestion (average driving speed). In addition, the method of deriving the CPM is the same as the advertising model.
<수학식4. 옥상광고 총 노출량에 관한 식><Equation 4. Equation for total exposure to rooftop advertising>
<수학식5. 옥상광고 DEC에 관한 식><Equation 5. Equation for Rooftop Advertising DEC>
<수학식6. 옥상광고의 CPM에 관한 식><Equation 6. Equation for CPM of Rooftop Advertising>
Y2은 옥상광고 총 노출량을 의미하며, DEC2은 옥상광고 모델에서 차량유동인구를 의미한다.Y 2 means the total exposure to rooftop advertisements, and DEC 2 means the floating population of vehicles in the rooftop advertisement model.
또한, 야립광고, 옥상광고 효과측정 모델에서 공통적으로, 가시각도란 광고물이 식별 가능한 영역을 말하는 것으로 광고물의 위치에 따라 노출될 수 있는 영역(각도)이 넓거나 좁을 수 있기 때문에 이를 반영하여 노출될 가능성에 대한 가중치를 주기 위한 것이다.In addition, in common in the outdoor advertisement and rooftop advertisement effect measurement model, the visible angle refers to the area where advertisements can be identified. This is to give weight to the possibilities.
노출시간은 광고물에 노출될 가능성이 있는 시간을 말하는 것으로, 주변 환경에 방해받지 않고 지속적으로 노출될 수 있는 시간을 의미한다.Exposure time refers to the time period during which the advertisement material is likely to be exposed.
차량정체도는 광고지점의 허용속도와 평균속도의 비를 통하여 쉽게 도출해낼 수 있고, 이를 가중치로 부여함. 예를 들어 허용속도가 70km/h 인 지점에서의 평균속도가 35km/h 라면 70/35=2 즉, 200%의 가중치를 부여할수 있는 것이다.Vehicle congestion can be easily derived from the ratio of the allowable speed to the average speed at the advertisement point, and this is assigned as a weight. For example, if the average speed at a point where the allowable speed is 70km/h is 35km/h, 70/35=2, that is, a weight of 200% can be given.
가시각도와 노출시간은 사용자의 편의에 따른 단위를 쓰면 된다. 예를 들면 도(°), 초(second)가 될 것이다.The viewing angle and exposure time can be set in units according to the user's convenience. For example, it would be degrees (°) and seconds.
다음은 본 발명에 따른 OCR기술을 활용한 옥외광고물 측정기기 및 그와 연동되는 운영시스템의 OCR 인식 정확도 향상을 위한 방법에 대해 상세히 설명하도록 한다.Next, a method for improving OCR recognition accuracy of an outdoor advertisement measuring device using OCR technology according to the present invention and an operating system interworking therewith will be described in detail.
먼저, 표기 가능한 모든 경우의 한글 글자를 조합하여 이를 도 5처럼 텍스트 파일에 저장 하도록 한다. 생성된 텍스트 파일에서 한 글자씩 읽어 들인 다음, 지정한 폰트를 이용해 모든 글자를 도 6처럼 학습 이미지로 만든다. 이 과정을 여러 가지 폰트를 사용해서 다양한 학습 이미지를 생성한다. 그리고 이 이미지들을 딥러닝을 위한 학습 데이터로 사용한다.First, the Hangul characters in all possible cases are combined and stored in a text file as shown in FIG. 5 . After reading each character from the generated text file, all characters are made into learning images as shown in FIG. 6 using a designated font. This process creates various learning images using various fonts. And these images are used as training data for deep learning.
다음은, 광고물 분석 AI(11)의 OCR 프로그램이 이미지에서 글자를 인식하고 텍스트로 출력하는 과정을 설명한다. 이때 사용하는 이미지는 임계처리 과정을 거친 것을 사용한다. 이는 이미지에서 검정 글자를 돋보이게 만들어 OCR의 품질을 높이기 위함이다. OCR 프로그램의 글자 인식 과정은 크게 Detection(감지), Prediction(예측), Semantic Analysis(시맨틱 분석), Reconstruction(재건) 4가지 단계로 나뉜다.The following describes a process in which the OCR program of the
먼저, 감지단계는 이미지에서 글자로 추정되는 영역은 여러 줄로 이루어진 한 문단으로 인식된다. 이 과정에서는 인식된 문단에서 한 줄씩 사각형 모양으로 묶는다. 그리고 각 사각형 모서리의 위치 정보들을 담은 객체들을 얻는다. 이를 다음 과정으로 전달한다.First, in the detection step, an area estimated as a character in the image is recognized as a paragraph consisting of several lines. In this process, the recognized paragraphs are grouped in a rectangular shape one by one. And we get objects containing the position information of each rectangle corner. This is passed on to the next process.
예측단계는 전달받은 객체에서 각 줄에 있는 음운들이 하나씩 들어있는 사각형을 만들고, 그 위치를 담은 객체를 얻는다. 학습시켜놓은 모델을 통해 객체마다 예상되는 초성, 중성, 종성들을 찾는다. 그리고 초성, 중성, 종성들을 한 글자로 조합해 음운별 예상 후보를 배열에 저장하고, 다음 단계로 전달한다. 이때 음운별 예상 후보는 한 가지 이상일 수 있다.In the prediction stage, a rectangle containing one phoneme in each line is made from the received object, and an object containing the position is obtained. Through the trained model, we find the expected initial, neutral, and final consonants for each object. Then, by combining the initial, middle, and final consonants into one letter, the candidate for each phoneme is stored in an array and delivered to the next step. In this case, there may be more than one expected candidate for each phoneme.
시맨틱 분석 단계는 전달받은 음운별 예상 후보 중 이미지의 글자와 일치하는 정도가 가장 높은 글자를 반환한다. 이 반환 과정은 문단 내의 모든 글자에 대해서 수행한다.The semantic analysis step returns the letter with the highest degree of matching with the letter of the image among the received candidate phonological predictions. This return process is performed for all characters in the paragraph.
재건 단계는 위 과정을 통해 반환받은 글자들을 합쳐서 한줄로 만든다. 그리고 그 줄들을 이어서 문단으로 재구성한 결과물을 출력한다.In the reconstruction phase, the letters returned through the above process are combined to form a single line. And then output the result of reorganizing the lines into paragraphs.
위와 같이 본 발명에서는 한글 OCR 프로그램 성능 향상을 위해 조합 가능한 모든 한글 글자를 이미지화하여 이를 학습 데이터로 이용하는 방법을 제안하고, 이를 이용해 광고물 분석 AI를 딥러닝 시킨다면 Detection, Prediction, Semantic Analysis, Reconstruction의 과정을 통해 동작하게 된다. 제안한 방법으로 딥러닝 시킨 분석 AI는 종래의 OCR 프로그램인 tesseract에 비해 한글 인식에서 향상된 일치율을 확인할 수 있었다.As above, in the present invention, to improve the performance of the Korean OCR program, we propose a method to image all the Korean characters that can be combined and use them as learning data. will work through Analytical AI, which was deep-learned by the proposed method, was able to confirm an improved concordance rate in Korean recognition compared to tesseract, a conventional OCR program.
따라서, 본 발명에 따른 OCR기술을 활용한 옥외광고물 측정기기 및 그와 연동되는 운영시스템을 적용한다면, 사용자가 간편하게 사용자의 스마트폰 카메라를 통해 화면에 담긴 영상에서 바로 광고물에 대한 정보를 처리해주기 때문에 사진을 따로 찍을 필요 없이 스마트폰 용량에 지장을 주지도 않으며 실시간으로 광고물 분석 AI(11)가 인식 가능한 광고물인지 아닌지를 확인 가능하므로, 일일이 사진을 찍어 광고물 분석 AI(11)가 그 광고물을 인식하는지 하지 않는 지를 바로 알 수 있으므로, 편리성이 증대되었다고 볼 수 있다. 종래의 방식들(PDA 등을 이용한 방식)은 사진을 찍어서 일일이 저장한 후 데이터화 작업을 거쳐야만 했으므로 그에 비하면 본 발명에 따른 5G 기반 AI 옥외 광고물 분석 시스템은 쉽고 간편하게 누구나 본인의 스마트폰을 통해 바로 광고물에 대한 정보를 얻을 수 있다는 장점이 있다.Therefore, if the outdoor advertisement measurement device using the OCR technology according to the present invention and the operating system interlocked therewith are applied, the user can easily process information about the advertisement directly from the image on the screen through the user's smartphone camera. It does not interfere with the smartphone capacity without taking a separate photo, and it is possible to check in real time whether the advertisement analysis AI (11) is a recognizable advertisement or not. It can be seen that the convenience is increased because it is immediately known whether the advertisement is recognized or not. In contrast to the conventional methods (method using PDA, etc.) that had to take pictures, store them, and then go through data processing, the 5G-based AI outdoor advertisement analysis system according to the present invention is easy and convenient for anyone to advertise directly through their smartphone. It has the advantage of being able to obtain information about water.
이상 본 발명의 실시 예에 따른 도면을 참조하여 설명하였지만, 본 발명이 속한 분야에서 통상의 지식을 가진 자라면 상기 내용을 바탕으로 본 발명의 범주 내에서 다양한 응용 및 변형을 행하는 것이 가능할 것이다.As described above with reference to the drawings according to the embodiment of the present invention, those of ordinary skill in the art to which the present invention pertains will be able to make various applications and modifications within the scope of the present invention based on the above content.
10 : 광고물 분석 시스템
11 : 광고물 분석 AI 12 : 광고물 저장 DB
13 : 드론
20 : 옥외광고물 측정기기
100 : 카메라
200 : 통신부
300 : 보조기억장치
400 : OCR 인식부
500 : 디스플레이10: advertisement analysis system
11: Advertising material analysis AI 12: Advertising material storage DB
13 : Drone
20: Outdoor advertisement measuring device
100 : camera
200: communication department
300: auxiliary memory device
400: OCR recognition unit
500: display
Claims (6)
5G 데이터 통신이 가능한 통신부(200);
데이터를 저장하기 위한 보조기억장치(300);
상기 카메라(100)가 촬영한 사진이나 동영상으로부터 광고물의 문자를 인식하는 OCR 인식부(400);
측정기기(20)는 AR 기능 및 GPS 기능을 가지며,
상기 측정기기(20)로부터 전송받은 광고물 사진, 동영상을 분석하는 광고물 분석 AI;
데이터를 시각적으로 확인할 수 있도록 출력하는 디스플레이(500)를 더 포함하는 것을 특징으로 하는 OCR기술을 활용한 옥외광고물 측정기기를 포함하는 5G 통신을 기반으로하며 광고물을 AI가 데이터화하여 분석하는 광고물 분석 시스템(10)과 연동하여 사용하는 OCR기술을 적용한 옥외광고물 측정기기(20)에 있어서,
상기 광고물 분석 AI는 SLAM 기술을 적용하며, 상기 SLAM 기술은 시각적 관성 거리계를 기반으로 하며, 상기 시각적 관성 거리계는 칼만 필터를 적용하고, 상기 SLAM 기술은 상기 카메라(100)로부터 들어오는 영상을 상기 상기 광고물 분석 AI가 컴퓨터 비전 알고리즘을 이용하여 특징점을 찾고, 칼만 필터에서 오차를 보정하며,
상기 OCR기술을 활용한 옥외광고물 측정기기(20)의 OCR 인식 정확도 향상을 위한 방법으로서 OCR 프로그램의 글자 인식 과정은 크게 감지 단계,예측 단계, 시맨틱 분석 단계,재건 단계로 구성되며,
상기 감지단계는 이미지에서 글자로 추정되는 영역은 여러 줄로 이루어진 한 문단으로 인식하며, 인식된 문단에서 한 줄씩 사각형으로 묶고,상기 사각형 모서리의 위치 정보들을 담은 객체를 얻으며,
상기 예측단계는 상기 감지단계에서 전달받은 객체에서 각 줄에 있는 음운들이 하나씩 들어있는 사각형을 만들고, 위치를 담은 객체마다 예상되는 초성, 중성, 종성들을 찾으며,
상기 시맨틱 분석 단계는 전달받은 음운별 예상 후보 중 이미지의 글자와 일치하는 정도가 가장 높은 글자를 반환하며,
상기 재건 단계는 상시 감지단계, 예측단계, 시맨틱 분석 단계를 통해 반환받은 글자들을 합쳐서 한 줄로 만들고, 상기 줄들을 이어서 문단으로 구성하며,
상기 광고물 분석 시스템(10)의 야립광고 매체효율성(CPM1)은 아래 식에 의하여 측정하는 것을 포함하는 OCR기술을 적용한 옥외광고물 측정기기(20).
<수학식1. 야립광고 총 노출량에 관한 식>
<수학식2. 야립광고 DEC에 관한 식>
<수학식3. 야립광고의 CPM에 관한 식>
Y1은 야립광고 총 노출량, DEC1은 야립광고 모델에서 차량유동인구, CPM1은 야립광고의 매체효율성을 의미한다.
a camera 100 for photographing outdoor advertisements;
Communication unit 200 capable of 5G data communication;
Auxiliary storage device 300 for storing data;
OCR recognition unit 400 for recognizing the text of the advertisement from the picture or video taken by the camera 100;
The measuring device 20 has an AR function and a GPS function,
Advertisement analysis AI that analyzes advertisement photos and videos transmitted from the measuring device 20;
An advertisement based on 5G communication including an outdoor advertisement measurement device using OCR technology, characterized in that it further includes a display 500 that outputs data so that data can be visually confirmed, and AI converts advertisements into data and analyzes them In the outdoor advertisement measuring device 20 to which OCR technology used in conjunction with the water analysis system 10 is applied,
The advertisement analysis AI applies SLAM technology, the SLAM technology is based on a visual inertial rangefinder, the visual inertial rangefinder applies a Kalman filter, and the SLAM technology captures the image coming from the camera 100. Advertising analysis AI uses computer vision algorithms to find feature points, corrects errors in Kalman filters,
As a method for improving the OCR recognition accuracy of the outdoor advertisement measuring device 20 using the OCR technology, the character recognition process of the OCR program is largely composed of a detection step, a prediction step, a semantic analysis step, and a reconstruction step,
In the detection step, an area estimated as a character in the image is recognized as a paragraph consisting of several lines, and the recognized paragraph is bundled into a rectangle line by line, and an object containing location information of the corner of the rectangle is obtained,
The prediction step makes a rectangle containing one phoneme in each line from the object received in the detection step, and finds the expected initial, neutral, and final consonants for each object containing the location,
The semantic analysis step returns the letter with the highest degree of matching with the letter of the image among the received phonological prediction candidates,
In the reconstruction step, the letters returned through the constant detection step, the prediction step, and the semantic analysis step are combined to form a single line, and the lines are successively composed of paragraphs,
Outdoor advertisement measuring device 20 to which OCR technology is applied, which includes measuring the advertisement medium efficiency (CPM1) of the advertisement analysis system 10 by the following equation.
<Equation 1. Equation for Total Impression of Side Advertisements>
<Equation 2. Expressions about the side advertisement DEC>
<Equation 3. Equation for CPM of Side Advertisements>
Y 1 is the total exposure to street advertisements, DEC 1 is the vehicle floating population in the street advertisement model, and CPM1 is the media efficiency of street advertisements.
데이터를 시각적으로 확인할 수 있도록 출력하는 디스플레이(500)를 더 포함하는 것을 특징으로 하는 OCR기술을 활용한 옥외광고물 측정기기.
The method according to claim 1,
Outdoor advertisement measuring device using OCR technology, characterized in that it further comprises a display (500) for outputting the data to be visually confirmed.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020190151127A KR102308193B1 (en) | 2019-11-22 | 2019-11-22 | Outdoor advertisement measuring equipment using OCR and operating system linked with it |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020190151127A KR102308193B1 (en) | 2019-11-22 | 2019-11-22 | Outdoor advertisement measuring equipment using OCR and operating system linked with it |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20210092345A KR20210092345A (en) | 2021-07-26 |
| KR102308193B1 true KR102308193B1 (en) | 2021-10-01 |
Family
ID=77125038
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020190151127A KR102308193B1 (en) | 2019-11-22 | 2019-11-22 | Outdoor advertisement measuring equipment using OCR and operating system linked with it |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR102308193B1 (en) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20230119370A (en) | 2022-02-07 | 2023-08-16 | 인천대학교 산학협력단 | Apparatus for Determining Text in a Scene Shot from Moving Object |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20230171769A (en) | 2022-06-14 | 2023-12-21 | 서강대학교산학협력단 | Shop sign detection system using a neural network and method thereof |
Family Cites Families (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR100755431B1 (en) | 2007-02-12 | 2007-09-04 | 주식회사 명진 아이앤씨 | Signboard total investigation system by using a pda |
| KR101047378B1 (en) * | 2009-05-13 | 2011-07-07 | 문추연 | Outdoor advertisement measuring system |
| KR20170133033A (en) * | 2016-05-25 | 2017-12-05 | 지연 | System for detecting structure of building using multi-drone |
| KR102585645B1 (en) * | 2018-02-20 | 2023-10-10 | 삼성전자주식회사 | Electronic device and method for recognizing character |
| KR102005907B1 (en) * | 2018-12-24 | 2019-07-31 | 주식회사 펀웨이브 | System sign language and sign language translation service using augmented reality translation application |
-
2019
- 2019-11-22 KR KR1020190151127A patent/KR102308193B1/en active IP Right Grant
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20230119370A (en) | 2022-02-07 | 2023-08-16 | 인천대학교 산학협력단 | Apparatus for Determining Text in a Scene Shot from Moving Object |
Also Published As
| Publication number | Publication date |
|---|---|
| KR20210092345A (en) | 2021-07-26 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110622213B (en) | System and method for depth localization and segmentation using 3D semantic maps | |
| US8515673B2 (en) | Crime risk assessment system | |
| CN107878311A (en) | System and method for launching subjective message on vehicle | |
| US20150227965A1 (en) | Method and system for evaluting signage | |
| JP6653361B2 (en) | Road marking image processing apparatus, road marking image processing method, and road marking image processing program | |
| CN116227834A (en) | Intelligent scenic spot digital platform based on three-dimensional point cloud model | |
| KR102308193B1 (en) | Outdoor advertisement measuring equipment using OCR and operating system linked with it | |
| CN107066635A (en) | A kind of method and system of the architecture information guide to visitors recognized based on image comparison | |
| CN112005082A (en) | Finding locally salient semantic features for navigation and geocoding | |
| Bochkarev et al. | Detecting advertising on building façades with computer vision | |
| KR102230352B1 (en) | Outdoor advertisement measuring device using AR and GPS | |
| Leberl et al. | Aerial computer vision for a 3d virtual habitat | |
| CN117294818A (en) | Building site panoramic monitoring method for airport construction | |
| BENLİAY et al. | Visual Landscape Assessment with the Use of Cloud Vision API: Antalya Case | |
| KR102329623B1 (en) | 5G-based AI outdoor advertisement analysis system | |
| Chen et al. | Generating synthetic photogrammetric data for training deep learning based 3D point cloud segmentation models | |
| KR102528808B1 (en) | Outdoor advertisement measuring device employing multi lens | |
| KR102377122B1 (en) | Device measuring method which is installed application for advertising analysis using AI based on 5G | |
| JP7180827B2 (en) | General object recognition system | |
| KR102639240B1 (en) | Outdoor advertisement measuring device employing multi image | |
| CN113378845A (en) | Scene segmentation method, device, equipment and storage medium | |
| González-Collazo et al. | A discordance analysis in manual labelling of urban mobile laser scanning data used for deep learning based semantic segmentation | |
| Hammoudi et al. | A synergistic approach for recovering occlusion-free textured 3D maps of urban facades from heterogeneous cartographic data | |
| Naqvi et al. | Street mapping, object detection and traffic load assessment from SVIs and field data using YOLOv3, machine learning and GIS | |
| Li et al. | CIM-WV: A 2D semantic segmentation dataset of rich window view contents in high-rise, high-density Hong Kong based on photorealistic city information models |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| AMND | Amendment | ||
| X091 | Application refused [patent] | ||
| AMND | Amendment | ||
| X701 | Decision to grant (after re-examination) | ||
| GRNT | Written decision to grant |