KR101336623B1 - Apparatus and system for advertisement and caption input - Google Patents
Apparatus and system for advertisement and caption input Download PDFInfo
- Publication number
- KR101336623B1 KR101336623B1 KR1020120112283A KR20120112283A KR101336623B1 KR 101336623 B1 KR101336623 B1 KR 101336623B1 KR 1020120112283 A KR1020120112283 A KR 1020120112283A KR 20120112283 A KR20120112283 A KR 20120112283A KR 101336623 B1 KR101336623 B1 KR 101336623B1
- Authority
- KR
- South Korea
- Prior art keywords
- advertisement
- subtitle
- screen
- logo
- broadcast signal
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/488—Data services, e.g. news ticker
- H04N21/4886—Data services, e.g. news ticker for displaying a ticker, e.g. scrolling banner for news, stock exchange, weather data
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/02—Marketing; Price estimation or determination; Fundraising
- G06Q30/0241—Advertisements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Accounting & Taxation (AREA)
- Development Economics (AREA)
- Strategic Management (AREA)
- Finance (AREA)
- Game Theory and Decision Science (AREA)
- Entrepreneurship & Innovation (AREA)
- Economics (AREA)
- Marketing (AREA)
- Physics & Mathematics (AREA)
- General Business, Economics & Management (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
Description
본 발명은 광고 및 자막 입력장치 및 시스템에 관한 것으로, 보다 상세하게는 콘도나 호텔 등에서 객실의 TV를 통해 자막 방송 및 지역 광고를 효과적으로 할 수 있는 광고 및 자막 입력장치 및 시스템에 관한 것이다.The present invention relates to an advertisement and subtitle input apparatus and system, and more particularly, to an advertisement and a subtitle input apparatus and system capable of effectively performing subtitle broadcasting and local advertisement through a TV of a room in a condo or a hotel.
최근에는 주 5일 근무와 더불어 주말에 가족 및 친구 단위의 여행이 많아 지면서 호텔이나 콘도를 찾는 사람이 많아지게 되어 호텔이나 콘도의 내부 시설 및 행사나 주변의 관광지 등에 대한 홍보의 중요성이 날로 커지고 있다.In recent years, with five-day workweeks and family and friends trips on weekends, more people are looking for hotels and condos, and the importance of publicizing the facilities and events of hotels and condos and tourist attractions around them is increasing day by day. .
이러한 호텔이나 콘도에서는 관광객을 위해 수영이나 스키 등과 같은 각종 레저 스포츠의 레슨 및 각종 공연 등과 같은 관광객을 위한 다양한 행사를 제공하고 있다. 이와 같은 다양한 행사 및 볼거리를 제공함으로써, 관광객의 만족도를 높일 수 있다. 더 나아가, 호텔이나 콘도 주위의 다양한 볼거리 및 먹거리에 대한 홍보를 강화할 필요가 있다.These hotels and condos provide various events for tourists such as lessons and various performances of various leisure sports such as swimming and skiing for tourists. By providing such a variety of events and attractions, it is possible to increase the satisfaction of tourists. Furthermore, there is a need to reinforce the promotion of various attractions and foods around hotels and condos.
호텔이나 콘도를 이용하는 관광객 또한 이와 같은 다양한 정보를 필요로 하나, 종이 등과 같은 팜플렛 및 현수막을 이용하거나, 객실 내부의 스피커를 이용한 광고 및 안내가 대부분이며, 관광객을 위한 효과적인 홍보 수단이 전무한 실정이다.Tourists using hotels and condos also need such various information, but most of them use pamphlets and banners such as paper, advertisements and guides using speakers in rooms, and there is no effective means of publicity for tourists.
따라서, 호텔이나 콘도를 이용하는 관광객을 위해 내부 시설 및 행사와 주변 관광지를 효과적으로 홍보할 수 있는 스마트한 홍보 시스템의 필요성이 커지고 있다.Accordingly, there is a growing need for a smart promotion system that can effectively promote internal facilities and events and nearby tourist attractions for tourists using hotels or condos.
본 발명은 상기의 종래 기술의 문제를 해결하기 위한 것으로, 객실 내부의 TV를 이용하여 호텔이나 콘도의 방문객에게 실시간으로 각종 행사의 안내 및 주변 관광지를 효과적으로 홍보할 수 있는 광고 및 자막 입력장치 및 시스템을 제공하고자 함에 발명의 목적이 있다.The present invention is to solve the problems of the prior art, an advertisement and subtitle input device and system that can effectively promote the guidance of various events in the real-time to visitors of the hotel or condominium and nearby tourist attractions using the TV in the room The purpose of the invention is to provide.
또한, 방송신호의 일정영역에 있는 로고를 캐치함으로써, 뉴스 등과 같은 주요 프로그램이 방송되는 경우에는 주변 관광지에 대한 광고를 내보내지 않고, TV 화면 아래의 보조화면에 자막 정보만 나가게 할 수 있는 광고 및 자막 입력장치 및 시스템을 제공하고자 함에 발명의 목적이 있다.In addition, by catching a logo in a certain area of the broadcast signal, if a major program such as news is broadcast, advertisements that can only exit the subtitle information on the sub-screen below the TV screen, without sending out advertisements for nearby tourist attractions; An object of the present invention is to provide a caption input device and system.
상기 목적을 달성하기 위한 본 발명의 광고 및 자막 입력장치는, TV 방송신호에 광고 및 자막을 입력하는 광고 및 자막 입력 장치에 있어서, 사용자로부터 컴퓨터를 통하여 광고 및 자막을 입력 받는 광고 및 자막 수신부; 방송국에서 송출한 방송신호를 수신하는 방송신호 수신부; 방송신호 및 자막, 광고신호를 TV로 송신하는 신호 송신부; 상기 방송신호 수신부를 통해 수신되는 방송신호 내에 로고 검출 영역을 설정한 후, 상기 로고 검출 영역의 히스토그램을 분석하여 기 저장된 로고 중 어느 하나와 일치하는지 판단하는 로고 검출부; 및 상기 로고 검출부에서 기 저장된 로고 중 어느 것과도 일치하지 않는 것으로 판단되는 경우, 상기 방송신호 수신부로부터 수신되는 방송신호와 상기 광고 및 자막 수신부로부터 수신되는 광고 및 자막을 주화면과 보조화면으로 분리하여 상기 신호 송신부를 통하여 TV로 출력하는 제어부를 포함할 수 있다.In accordance with one aspect of the present invention, there is provided an advertisement and subtitle input apparatus, comprising: an advertisement and subtitle input unit for inputting advertisements and subtitles to a TV broadcast signal; A broadcast signal receiver for receiving a broadcast signal transmitted from a broadcast station; A signal transmitter for transmitting a broadcast signal, a caption, and an advertisement signal to a TV; A logo detector configured to set a logo detection region in the broadcast signal received through the broadcast signal receiver, and analyze a histogram of the logo detection region to determine which one of the logos is already stored; And when it is determined that the logo detection unit does not match any of the previously stored logos, the broadcast signal received from the broadcast signal receiver and the advertisement and subtitles received from the advertisement and subtitle receiver are separated into a main screen and an auxiliary screen. It may include a control unit for outputting to the TV through the signal transmission unit.
또한, 상기 제어부는 상기 로고 검출부에서 기 저장된 로고 중 어느 하나와 일치하는 것으로 판단되는 경우, 상기 방송신호 수신부로부터 수신되는 방송신호와 상기 광고 및 자막 수신부로부터 수신되는 광고와 자막 중 자막을 주화면과 보조화면으로 분리하여 상기 신호 송신부를 통하여 TV로 출력할 수 있다.In addition, when it is determined that the logo detector matches any one of pre-stored logos, the controller detects the subtitles of the broadcast signal received from the broadcast signal receiver and the subtitles of the advertisement and subtitles received from the advertisement and the subtitle receiver. It can be separated into an auxiliary screen and output to the TV through the signal transmitter.
또한, 적어도 하나 이상의 로고에 대한 히스토그램 정보를 저장하는 저장부를 더 포함하고, 상기 로고 검출부는 상기 로고 검출 영역의 히스토그램을 분석하여 상기 저장부에 저장된 적어도 하나 이상의 로고에 대한 히스토그램 정보와 비교할 수 있다.The apparatus may further include a storage configured to store histogram information on at least one logo, wherein the logo detector may analyze the histogram of the logo detection area and compare the histogram information on at least one logo stored in the storage.
또한, 사용자는 컴퓨터를 통하여 상기 저장부에 로고에 대한 히스토그램 정보를 저장할 수 있다.In addition, the user may store histogram information on the logo in the storage unit through a computer.
또한, 상기 기 저장된 로고는 지상파 방송사 로고일 수 있다.In addition, the previously stored logo may be a terrestrial broadcaster's logo.
또한, 상기 제어부는 상기 주화면으로 출력되는 방송신호의 화면 비율을 조정할 수 있다.The controller may adjust the aspect ratio of the broadcast signal output to the main screen.
또한, 상기 보조화면은 주화면의 아래에 위치하는 제1보조화면과 주화면의 오른쪽에 위치하는 제2보조화면으로 구성되고, 상기 제어부는 상기 제1보조화면으로 자막 정보를 출력하고, 상기 제2보조화면으로 광고 정보를 출력할 수 있다.The sub-screen may include a first sub-screen positioned below the main screen and a second sub-screen positioned to the right of the main screen, and the controller outputs subtitle information to the first sub-screen. 2 The advertisement information can be output to the secondary screen.
한편, 상기 목적을 달성하기 위한 본 발명의 광고 및 자막 입력 시스템은, TV 방송신호에 광고 및 자막을 입력하는 광고 및 자막 입력 시스템에 있어서, 방송국으로부터 수신한 방송신호 내에 로고 검출 영역을 설정한 후, 로고 검출 영역의 히스토그램을 분석하여, 기 저장된 로고 중 어느 것과도 일치하지 않는 것으로 판단되는 경우, 방송국으로부터 수신한 방송신호와 사용자로부터 컴퓨터를 통하여 수신한 광고 및 자막을 주화면과 보조화면으로 분리하여 TV로 출력하는 광고 및 자막 입력장치; 사용자로부터 입력된 광고 및 자막을 상기 광고 및 자막 입력장치로 전송하는 컴퓨터; 및 광고 및 자막 정보가 상기 컴퓨터로부터 상기 광고 및 자막 입력장치로 전송되는 경우, 광고주 별로 광고 실행 결과를 저장하는 광고 분석 서버를 포함할 수 있다.On the other hand, the advertisement and subtitle input system of the present invention for achieving the above object, in the advertisement and subtitle input system for inputting the advertisement and subtitle to the TV broadcast signal, after setting the logo detection area in the broadcast signal received from the broadcasting station If the histogram of the logo detection area is analyzed and it is determined that it does not match any of the previously stored logos, the broadcasting signal received from the broadcasting station and the advertisement and caption received through the computer from the user are separated into the main screen and the sub screen. Advertisement and subtitle input device for outputting to the TV; A computer for transmitting advertisements and subtitles input from a user to the advertisement and subtitle input device; And an advertisement analysis server configured to store an advertisement execution result for each advertiser when advertisement and subtitle information are transmitted from the computer to the advertisement and subtitle input device.
또한, 상기 광고 및 자막 입력장치는 기 저장된 로고 중 어느 하나와 일치하는 것으로 판단되는 경우, 상기 방송국으로부터 수신한 방송신호와 상기 컴퓨터로부터 수신되는 광고와 자막 중 자막을 주화면과 보조화면으로 분리하여 TV로 출력할 수 있다.In addition, when it is determined that the advertisement and subtitle input device matches any one of the pre-stored logos, the advertisement and subtitle input apparatus may separate the subtitles of the broadcasting signal received from the broadcasting station and the advertisement and subtitle received from the computer into the main screen and the sub-screen. Can output to the TV.
또한, 사용자는 상기 컴퓨터를 통하여 상기 광고 및 자막 입력장치에 로고 정보를 저장할 수 있다.In addition, a user may store logo information in the advertisement and subtitle input device through the computer.
또한, 상기 기 저장된 로고는 지상파 방송사 로고일 수 있다.In addition, the previously stored logo may be a terrestrial broadcaster's logo.
또한, 상기 광고 및 자막 입력장치는 상기 주화면으로 출력되는 방송신호의 화면 비율을 조정할 수 있다.In addition, the advertisement and subtitle input device may adjust the aspect ratio of the broadcast signal output to the main screen.
또한, 상기 보조화면은 주화면의 아래에 위치하는 제1보조화면과 주화면의 오른쪽에 위치하는 제2보조화면으로 구성되고, 상기 광고 및 자막 입력장치는 상기 제1보조화면으로 자막 정보를 출력하고, 상기 제2보조화면으로 광고 정보를 출력할 수 있다.The sub-screen may include a first sub-screen positioned below the main screen and a second sub-screen positioned to the right of the main screen, and the advertisement and subtitle input device outputs subtitle information to the first sub-screen. The advertisement information may be output to the second sub screen.
또한, 상기 컴퓨터는 광고 및 자막 시간 예약 설정기능을 포함하며, 예약된 광고 시간에 광고 및 자막을 상기 광고 및 자막 입력장치로 전송할 수 있다.The computer may include an advertisement and subtitle time reservation setting function, and transmit the advertisement and the subtitle to the advertisement and subtitle input device at the reserved advertisement time.
또한, 상기 광고 분석 서버는 광고주 별로 광고 시간 및 광고 내용을 저장하는 데이터 베이스를 포함하며, 사용자는 상기 컴퓨터를 통하여 상기 광고주 별 광고 시간 및 광고 내용을 검색할 수 있다.The advertisement analysis server may include a database storing advertisement time and advertisement content for each advertiser, and a user may retrieve advertisement time and advertisement content for each advertiser through the computer.
본 발명에 따른 광고 및 자막 입력장치 및 시스템에 의하면, 객실 내부의 TV를 이용하여 호텔이나 콘도의 방문객에게 실시간으로 호텔이나 콘도에서 실시하는 각종 행사 및 주변 관광지를 효과적으로 홍보할 수 있다.According to the advertisement and subtitle input apparatus and system according to the present invention, it is possible to effectively promote various events and surrounding tourist attractions that are performed in a hotel or a condo to a visitor of a hotel or a condo in real time using a TV in a room.
또한, 방송신호의 일정영역에 있는 로고를 캐치함으로써, 뉴스 등과 같은 주요 프로그램이 방송되는 경우에는 주변 관광지에 대한 광고를 내보내지 않고, TV 화면 아래의 보조화면에 자막 정보만 나가게 할 수 있다.In addition, by catching a logo in a predetermined area of the broadcast signal, when a major program such as news is broadcast, it is possible to send out only the subtitle information on the sub-screen below the TV screen without sending out advertisements for nearby tourist attractions.
또한, 방송신호와 자막 및 광고 정보를 동시에 전송하는 경우, 방송신호는 주화면으로 출력하며, 자막 및 광고 정보를 출력하는 보조화면으로 인해 주화면에 출력되는 방송 내용이 가리지 않도록 방송신호의 화면 비율을 조정할 수 있다.In addition, when simultaneously transmitting a broadcast signal, subtitles and advertisement information, the broadcast signal is output to the main screen, and the aspect ratio of the broadcast signal so that the broadcast content displayed on the main screen is not hidden due to the sub-screen outputting subtitles and advertisement information. Can be adjusted.
또한, 사용자는 컴퓨터를 이용하여 광고 분석 서버에 저장된 광고주 별 광고 실행 결과를 원격으로 검색할 수 있다.In addition, the user may remotely search the advertisement execution results for each advertiser stored in the advertisement analysis server using a computer.
도 1은 본 발명에 따른 광고 및 자막 입력장치의 블록도.
도 2는 본 발명에 따라 주화면에 방송신호를 출력하고, 제1보조화면 및 제2보조화면에 각각 자막 정보와 광고 정보가 출력되는 모습을 나타낸 TV의 예시도.
도 3은 본 발명에 따라 주화면에서 기 저장된 로고가 검출되는 경우, 주화면과 제1보조화면 만 나타나는 모습을 나타낸 TV의 예시도.
도 4는 본 발명에 따른 광고 및 자막 입력 시스템의 구성도.1 is a block diagram of an advertisement and subtitle input apparatus according to the present invention;
2 is an exemplary view showing a TV outputting a broadcast signal on the main screen, the subtitle information and the advertisement information on the first and second sub-screens, respectively, according to the present invention.
3 is an exemplary view of a TV showing the appearance of only the main screen and the first sub-screen when the pre-stored logo is detected in the main screen according to the present invention.
4 is a block diagram of an advertisement and subtitle input system according to the present invention;
이하에서는, 첨부도면을 참고하여 본 발명에 따른 일 실시 예를 보다 상세하게 설명한다.Hereinafter, an embodiment of the present invention will be described in detail with reference to the accompanying drawings.
도 1은 본 발명에 따른 광고 및 자막 입력장치의 블록도이다.1 is a block diagram of an advertisement and subtitle input apparatus according to the present invention.
도 1을 참조하면, 광고 및 자막 입력장치(10)는 광고 및 자막 수신부(11), 방송신호 수신부(12), 신호 송신부(13), 로고 검출부(14) 및 제어부(15)를 포함하며, 저장부(16)를 더 포함할 수 있다. 광고 및 자막 입력장치(10)는 방송국(20)으로부터 방송신호를 수신하고, 컴퓨터(30)로부터 사용자가 입력하는 광고 및 자막 정보를 수신하여 이를 처리 후, TV(40)로 전송한다. 광고 및 자막 입력장치(10)는 호텔이나 콘도의 관리실 등에 설치될 수 있으며, 호텔이나 콘도의 직원은 컴퓨터(30)를 통하여 원격으로 통신할 수 있다.Referring to FIG. 1, the advertisement and
광고 및 자막 수신부(11)는 사용자로부터 컴퓨터(30)를 통하여 입력되는 광고 및 자막 정보를 입력 받는다.The advertisement and
방송신호 수신부(12)는 방송국(20)에서 송출한 방송신호 정보를 수신한다.The
신호 송신부(13)는 제어부(15)가 처리한 방송신호 및 광고, 자막 정보를 TV(40)로 송신한다.The
로고 검출부(14)는 방송신호 수신부(12)를 통해 수신되는 방송신호 내에 로고 검출 영역을 설정한 후, 로고 검출 영역의 히스토그램을 분석하여 기 저장된 로고 중 어느 하나와 일치하는지 판단한다. 구체적으로, 수신된 방송신호가 TV(40) 화면에 디스플레이 될 때 좌측 상단 또는 우측 상단과 같이 일정 영역을 좌표로 지정하여 로고 검출 영역으로 설정한 후, 해당 로고 검출 영역의 히스토그램을 분석하여 미리 저장된 로고들과 비교하여 어느 것과 일치하는지 판단하는 것이다. The
이를 위해서, 저장부(16)를 더 포함할 수 있으며, 저장부(16)는 적어도 하나 이상의 로고에 대한 히스토그램 정보를 미리 가지고 있을 수 있다. 로고 검출부(14)는 로고 검출 영역의 히스토그램을 분석하여 저장부(16)에 저장된 적어도 하나 이상의 로고에 대한 히스토그램 정보와 비교하여 미리 저장된 로고들 중 어느 것과 일치하는지 판단한다. 사용자는 컴퓨터(30)를 통하여 저장부(16)에 로고에 대한 히스토그램 정보를 저장할 수 있다. 미리 저장된 로고 정보는 지상파 방송사 로고를 말한다. 예를 들면, KBS1, KBS2, MBC, SBS, OBS, EBS 등의 로고가 해당될 수 있으며, 이는 예로 든 것 일뿐 상기 로고의 실시 예에 한정되지 않는다.To this end, the
제어부(15)는 로고 검출부(14)에서 기 저장된 로고 중 어느 것과도 일치하지 않는 것으로 판단되는 경우, 방송신호 수신부(12)로부터 수신되는 방송신호와 광고 및 자막 수신부(11)로부터 수신되는 광고 및 자막을 주화면과 보조화면으로 분리하여 신호 송신부(13)를 통하여 TV(40)로 출력한다. 또한, 제어부(15)는 로고 검출부(14)에서 기 저장된 로고 중 어느 하나와 일치하는 것으로 판단되는 경우, 방송신호 수신부(12)로부터 수신되는 방송신호와 광고 및 자막 수신부(11)로부터 수신되는 광고와 자막 중 자막을 주화면과 보조화면으로 분리하여 신호 송신부(13)를 통하여 TV(40)로 출력한다. If it is determined that the
구체적으로, 로고 검출부(14)에서 기 저장된 지상파 방송사 로고 중 어느 것과도 일치하지 않는 것으로 판단되면, 다시 말해서, KBS1, KBS2, MBC, SBS, OBS, EBS 등의 로고가 없는 것으로 판단되면, 방송국(20)으로부터 수신되는 방송신호는 주화면으로 출력하고, 자막 정보는 주화면의 아래에 위치하는 제1보조화면으로 출력하고, 광고 정보는 주화면의 오른쪽에 위치하는 제2보조화면으로 출력할 수 있다. 제2보조화면은 여러 개로 나누어 여러 개의 광고 정보를 동시에 홍보할 수 있다. 여기서 광고 정보는 단순 자막이 아닌, 정지 영상이나 동영상 광고 및 기타 이미지 광고를 포함한다.Specifically, if it is determined that the
또한, 로고 검출부(14)에서 기 저장된 지상파 방송사 로고 중 어느 하나와 일치하는 것으로 판단되는 경우, 다시 말해서, KBS1 로고가 있는 것으로 판단되면, 주요 방송이라고 판단하고, 방송신호는 주화면으로 출력하고, 주화면의 아래에 위치하는 보조화면으로 자막 정보를 출력한다. 주요 방송에 해당하므로 주화면의 오른쪽에 위치하는 제2보조화면에 광고 정보를 출력하지 않고, 주화면의 아래에 위치하는 제1보조화면으로 자막 정보만 출력하는 것이다. In addition, if it is determined that the
제어부(15)는 주화면과 함께 제1보조화면 및 제2보조화면이 출력됨으로써, 주화면에 출력되는 방송 정보의 내용이 제1보조화면과 제2보조화면에 의해 가려지지 않도록 하기 위해, 주화면으로 출력되는 방송신호의 화면 비율을 조정할 수 있다.
The
도 2는 본 발명에 따라 주화면에 방송신호를 출력하고, 제1보조화면 및 제2보조화면에 각각 자막 정보와 광고 정보가 출력되는 모습을 나타낸 TV의 예시도이고, 도 3은 본 발명에 따라 주화면에서 기 저장된 로고가 검출되는 경우, 주화면과 제1보조화면 만 나타나는 모습을 나타낸 TV의 예시도이다.FIG. 2 is an exemplary diagram of a TV showing a broadcast signal output to a main screen and subtitle information and advertisement information respectively output to a first sub picture and a second sub picture according to the present invention, and FIG. Accordingly, when the pre-stored logo is detected in the main screen, only the main screen and the first sub-screen are shown.
도 2를 참조하면, 방송국(20)으로부터 수신되는 방송신호 내의 로고 검출 영역에서 기 저장된 로고와 일치하는 것이 없는 것으로 판단되어, 주화면(41)으로 방송신호를 출력하고, 제1보조화면(42)으로 자막 정보를 출력하고, 제2보조화면(43)으로 광고 정보를 출력한다. Referring to FIG. 2, it is determined that there is no match with a previously stored logo in the logo detection area in the broadcast signal received from the
제1보조화면(42)의 자막 정보와 제2보조화면(43)의 광고 정보는 컴퓨터(30)를 통하여 콘도나 호텔의 직원이 입력할 수 있으며, 제2보조화면(43)은 도 2에서 보는 바와 같이, 4 개로 분할하여 각각 다른 광고 정보를 출력할 수 있다. 바람직하게는, 해당 지역의 특산품이나 관광지를 홍보할 수 있다.The subtitle information of the first sub-screen 42 and the advertisement information of the second sub-screen 43 can be input by the employee of the condo or the hotel through the
도 3을 참조하면, 방송국(20)으로부터 수신되는 방송신호 내의 로고 검출 영역(44)에서 기 저장된 로고 중 어느 하나와 일치하는 것으로 판단되어, 주화면(41)으로 방송신호를 출력하고, 제1보조화면(42)으로 자막 정보만을 출력한다.Referring to FIG. 3, it is determined to match any one of previously stored logos in the
로고 검출 영역(44)에서 기 저장된 로고 중 하나인 KBS1 로고가 있는 것으로 판단되어, 제1보조화면(42)으로 자막 정보만 출력하고, 제2보조화면(43)으로는 광고 정보를 출력하지 않는다. 이렇게 함으로써 주요 프로그램이 방송되고 있는 경우에는 무분별한 광고 방송을 중단할 수 있다.
It is determined that the KBS1 logo, which is one of the logos previously stored in the
도 4는 본 발명에 따른 광고 및 자막 입력 시스템의 구성도이다.4 is a block diagram of an advertisement and subtitle input system according to the present invention.
도 4를 참조하면, 광고 및 자막 입력 시스템(1)은 광고 및 자막 입력장치(10), 사용자로부터 입력된 광고 및 자막을 광고 및 자막 입력장치(10)로 전송하는 컴퓨터(30) 및 광고 분석 서버(50)를 포함한다.Referring to FIG. 4, the advertisement and subtitle input system 1 includes an advertisement and
광고 및 자막 입력장치(10)는 방송국(20)으로부터 수신한 방송신호 내에 로고 검출 영역을 설정한 후, 로고 검출 영역의 히스토그램을 분석하여, 기 저장된 로고 중 어느 것과도 일치하지 않는 것으로 판단되는 경우, 방송국(20)으로부터 수신한 방송신호와 사용자로부터 컴퓨터(30)를 통하여 수신한 광고 및 자막을 주화면과 보조화면으로 분리하여 TV(40)로 출력한다.The advertisement and subtitle
또한, 광고 및 자막 입력장치(10)는 기 저장된 로고 중 어느 하나와 일치하는 것으로 판단되는 경우, 방송국(20)으로부터 수신한 방송신호와 컴퓨터(30)로부터 수신되는 광고와 자막 중 자막을 주화면과 보조화면으로 분리하여 TV(40)로 출력한다.In addition, when it is determined that the advertisement and subtitle
기 저장된 로고 정보는 지상파 방송사 로고를 말한다. 예를 들면, KBS1, KBS2, MBC, SBS, OBS, EBS 등의 로고가 해당될 수 있으며, 이는 예로 든 것 일뿐 상기 로고의 실시 예에 한정되지 않는다. 사용자는 컴퓨터(30)를 통하여 광고 및 자막 입력장치(10)에 로고 정보를 저장할 수 있다.The previously stored logo information refers to the terrestrial broadcaster's logo. For example, the logo of KBS1, KBS2, MBC, SBS, OBS, EBS, etc. may be applicable, which is merely an example and is not limited to the embodiment of the logo. The user may store logo information in the advertisement and
광고 및 자막 입력장치(10)는 주화면과 보조화면으로 분리하여 출력하는 경우, 주화면에 출력되는 방송 정보의 내용이 보조화면에 의해 가려지지 않도록 하기 위해, 주화면으로 출력되는 방송신호의 화면 비율을 조정할 수 있다.When the advertisement and
광고 및 자막 입력장치(10)는 방송국(20)으로부터 수신한 방송신호 내에 로고 검출 영역을 설정한 후, 로고 검출 영역의 히스토그램을 분석하여, 기 저장된 로고 중 어느 것과도 일치하지 않는 것으로 판단되는 경우, 방송국(20)으로부터 수신되는 방송신호는 주화면으로 출력하고, 자막 정보는 주화면의 아래에 위치하는 제1보조화면으로 출력하고, 광고 정보는 주화면의 오른쪽에 위치하는 제2보조화면으로 출력할 수 있다.The advertisement and subtitle
또한, 광고 및 자막 입력장치(10)는 기 저장된 지상파 방송사 로고 중 어느 하나와 일치하는 것으로 판단되는 경우, 다시 말해서, KBS1 로고가 있는 것으로 판단되면, 주요 방송이라고 판단하고, 방송신호는 주화면으로 출력하고, 주화면의 아래에 위치하는 보조화면으로 자막 정보를 출력한다. 주요 방송에 해당하므로 주화면의 오른쪽에 위치하는 제2보조화면에 광고 정보를 출력하지 않고, 주화면의 아래에 위치하는 제1보조화면으로 자막 정보만 출력하는 것이다. In addition, when it is determined that the advertisement and subtitle
그 밖의 광고 및 자막 입력장치(10)의 구체적인 기능은 도 1에서 설명한 바와 같으므로, 자세한 설명은 생략한다.Since other specific functions of the advertisement and
광고 분석 서버(50)는 광고 및 자막 정보가 컴퓨터(30)로부터 광고 및 자막 입력장치(10)로 전송되는 경우, 광고주 별로 광고 실행 결과를 저장한다. 구체적으로, 광고 분석 서버(50)는 광고주 별로 광고 내용 및 광고 시간 정보를 저장하는 데이터 베이스를 가지고 있다.When the advertisement and subtitle information is transmitted from the
사용자 또는 콘도나 호텔의 관리자는 컴퓨터(30)를 통하여 원격으로 광고 분석 서버(50)에 접속할 수 있으며, 광고 분석 서버(50)의 데이터 베이스에서 광고주 별 광고 시간 및 광고 내용을 검색할 수 있다.A user or an administrator of a condo or hotel may access the
컴퓨터(30)는 광고 및 자막 시간 예약 설정기능을 가지고 있으며, 예약된 광고 시간에 광고 및 자막 정보를 광고 및 자막 입력장치(10)로 전송할 수 있다.The
그 밖에 구체적인 방법에 대해서는 도 1 내지 도 3에서 자세하게 설명하였으므로 생략하도록 한다.
Other specific methods have been described in detail in FIG. 1 to FIG.
본 발명에 의하면, 객실 내부의 TV를 이용하여 호텔이나 콘도의 방문객에게 실시간으로 호텔이나 콘도에서 실시하는 각종 행사 및 주변 관광지를 효과적으로 홍보할 수 있다.According to the present invention, it is possible to effectively promote various events performed in a hotel or a condo and nearby tourist attractions to visitors of a hotel or a condo in real time using a TV in a room.
또한, 방송신호의 일정영역에 있는 로고를 캐치함으로써, 뉴스 등과 같은 주요 프로그램이 방송되는 경우에는 주변 관광지에 대한 광고를 내보내지 않고, TV 화면 아래의 보조화면에 자막 정보만 나가게 할 수 있다.In addition, by catching a logo in a predetermined area of the broadcast signal, when a major program such as news is broadcast, it is possible to send out only the subtitle information on the sub-screen below the TV screen without sending out advertisements for nearby tourist attractions.
또한, 방송신호와 자막 및 광고 정보를 동시에 전송하는 경우, 방송신호는 주화면으로 출력하며, 자막 및 광고 정보를 출력하는 보조화면으로 인해 주화면에 출력되는 방송 내용이 가리지 않도록 방송신호의 화면 비율을 조정할 수 있다.In addition, when simultaneously transmitting a broadcast signal, subtitles and advertisement information, the broadcast signal is output to the main screen, and the aspect ratio of the broadcast signal so that the broadcast content displayed on the main screen is not hidden due to the sub-screen outputting subtitles and advertisement information. Can be adjusted.
또한, 사용자는 컴퓨터를 이용하여 광고 분석 서버에 저장된 광고주 별 광고 실행 결과를 원격으로 검색할 수 있다.In addition, the user may remotely search the advertisement execution results for each advertiser stored in the advertisement analysis server using a computer.
본 발명은 상기한 특정의 바람직한 실시 예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자라면 누구든지 다양한 변형 실시가 가능한 것은 물론이고, 그와 같은 변경은 청구범위 기재의 범위 내에 있게 되는 것임은 자명하다.It will be understood by those skilled in the art that various changes in form and details may be made therein without departing from the spirit and scope of the invention as defined by the appended claims and their equivalents. Obviously, such modifications are intended to be within the scope of the claims.
1: 광고 및 자막 입력 시스템 10: 광고 및 자막 입력장치
11: 광고 및 자막 수신부 12: 방송신호 수신부
13: 신호 송신부 14: 로고 검출부
15: 제어부 16: 저장부
20: 방송국 30: 컴퓨터
40: TV 41: 주화면
42: 제1보조화면 43: 제2보조화면
44: 로고 검출 영역 50: 광고 분석 서버1: advertisement and subtitle input system 10: advertisement and subtitle input device
11: advertisement and subtitle receiver 12: broadcast signal receiver
13: signal transmitter 14: logo detector
15: control unit 16: storage unit
20: station 30: computer
40: TV 41: main screen
42: first secondary screen 43: second secondary screen
44: logo detection area 50: advertisement analysis server
Claims (15)
사용자로부터 컴퓨터를 통하여 광고 및 자막을 입력 받는 광고 및 자막 수신부;
방송국에서 송출한 방송신호를 수신하는 방송신호 수신부;
방송신호 및 자막, 광고신호를 TV로 송신하는 신호 송신부;
상기 방송신호 수신부를 통해 수신되는 방송신호 내에 로고 검출 영역을 설정한 후, 상기 로고 검출 영역의 히스토그램을 분석하여 기 저장된 로고 중 어느 하나와 일치하는지 판단하는 로고 검출부; 및
상기 로고 검출부에서 기 저장된 로고 중 어느 것과도 일치하지 않는 것으로 판단되는 경우, 상기 방송신호 수신부로부터 수신되는 방송신호와 상기 광고 및 자막 수신부로부터 수신되는 광고 및 자막을 주화면과 보조화면으로 분리하여 상기 신호 송신부를 통하여 TV로 출력하는 제어부를 포함하는 것을 특징으로 하는 광고 및 자막 입력장치. In the advertisement and subtitle input device for inputting advertisements and subtitles to the TV broadcast signal,
An advertisement and subtitle receiver configured to receive advertisements and subtitles from a user through a computer;
A broadcast signal receiver for receiving a broadcast signal transmitted from a broadcast station;
A signal transmitter for transmitting a broadcast signal, a caption, and an advertisement signal to a TV;
A logo detector configured to set a logo detection region in the broadcast signal received through the broadcast signal receiver, and analyze a histogram of the logo detection region to determine which one of the logos is already stored; And
If it is determined that the logo detection unit does not match any of the previously stored logos, the broadcasting signal received from the broadcast signal receiver and the advertisement and subtitles received from the advertisement and subtitle receiver are separated into a main screen and an auxiliary screen. Advertisement and subtitle input device characterized in that it comprises a control unit for outputting to the TV via the signal transmission unit.
상기 제어부는 상기 로고 검출부에서 기 저장된 로고 중 어느 하나와 일치하는 것으로 판단되는 경우, 상기 방송신호 수신부로부터 수신되는 방송신호와 상기 광고 및 자막 수신부로부터 수신되는 광고와 자막 중 자막을 주화면과 보조화면으로 분리하여 상기 신호 송신부를 통하여 TV로 출력하는 것을 특징으로 하는 광고 및 자막 입력장치.The method of claim 1,
The controller detects the subtitles of the broadcast signal received from the broadcast signal receiver and the subtitles of the advertisement and subtitles received from the advertisement and subtitle receiver when it is determined that the logo detector matches one of pre-stored logos. Advertisement and subtitle input device characterized in that for separating and outputting to the TV through the signal transmission unit.
적어도 하나 이상의 로고에 대한 히스토그램 정보를 저장하는 저장부를 더 포함하고,
상기 로고 검출부는 상기 로고 검출 영역의 히스토그램을 분석하여 상기 저장부에 저장된 적어도 하나 이상의 로고에 대한 히스토그램 정보와 비교하는 것을 특징으로 하는 광고 및 자막 입력장치.The method of claim 1,
Further comprising a storage unit for storing histogram information for at least one logo,
And the logo detection unit analyzes the histogram of the logo detection area and compares the histogram with respect to at least one logo stored in the storage unit.
사용자는 컴퓨터를 통하여 상기 저장부에 로고에 대한 히스토그램 정보를 저장하는 것을 특징으로 하는 광고 및 자막 입력장치.The method of claim 3,
And a user stores histogram information on a logo in the storage unit through a computer.
상기 기 저장된 로고는 지상파 방송사 로고인 것을 특징으로 하는 광고 및 자막 입력장치.The method of claim 1,
The pre-stored logo is a terrestrial broadcasting company logo, characterized in that the advertisement and subtitle input device.
상기 제어부는 상기 주화면으로 출력되는 방송신호의 화면 비율을 조정하는 것을 특징으로 하는 광고 및 자막 입력장치.The method of claim 1,
The control unit inputs the advertisement and subtitles, characterized in that for adjusting the aspect ratio of the broadcast signal output to the main screen.
상기 보조화면은 주화면의 아래에 위치하는 제1보조화면과 주화면의 오른쪽에 위치하는 제2보조화면으로 구성되고,
상기 제어부는 상기 제1보조화면으로 자막 정보를 출력하고, 상기 제2보조화면으로 광고 정보를 출력하는 것을 특징으로 하는 광고 및 자막 입력장치.The method of claim 1,
The sub-screen is composed of a first sub-screen positioned below the main screen and a second sub-screen positioned to the right of the main screen.
And the control unit outputs caption information to the first sub-screen and outputs advertisement information to the second sub-screen.
방송국으로부터 수신한 방송신호 내에 로고 검출 영역을 설정한 후, 로고 검출 영역의 히스토그램을 분석하여, 기 저장된 로고 중 어느 것과도 일치하지 않는 것으로 판단되는 경우, 방송국으로부터 수신한 방송신호와 사용자로부터 컴퓨터를 통하여 수신한 광고 및 자막을 주화면과 보조화면으로 분리하여 TV로 출력하는 광고 및 자막 입력장치;
사용자로부터 입력된 광고 및 자막을 상기 광고 및 자막 입력장치로 전송하는 컴퓨터; 및
광고 및 자막 정보가 상기 컴퓨터로부터 상기 광고 및 자막 입력장치로 전송되는 경우, 광고주 별로 광고 실행 결과를 저장하는 광고 분석 서버를 포함하는 것을 특징으로 하는 광고 및 자막 입력 시스템.In the advertisement and subtitle input system for inputting advertisements and subtitles to the TV broadcast signal,
After the logo detection area is set in the broadcast signal received from the broadcast station, the histogram of the logo detection area is analyzed, and if it is determined that it does not match any of the pre-stored logos, the computer receives the broadcast signal received from the broadcast station and the computer. An advertisement and subtitle input device for separating the advertisement and subtitles received through the main screen and the sub-screen and outputting them to the TV;
A computer for transmitting advertisements and subtitles input from a user to the advertisement and subtitle input device; And
And an advertisement analysis server for storing advertisement execution results for each advertiser when advertisement and subtitle information are transmitted from the computer to the advertisement and subtitle input device.
상기 광고 및 자막 입력장치는 기 저장된 로고 중 어느 하나와 일치하는 것으로 판단되는 경우, 상기 방송국으로부터 수신한 방송신호와 상기 컴퓨터로부터 수신되는 광고와 자막 중 자막을 주화면과 보조화면으로 분리하여 TV로 출력하는 것을 특징으로 하는 광고 및 자막 입력 시스템.9. The method of claim 8,
If it is determined that the advertisement and subtitle input device matches any one of the previously stored logos, the broadcasting signal received from the broadcasting station and the subtitles of the advertisement and subtitles received from the computer are divided into a main screen and an auxiliary screen to the TV. Advertising and subtitle input system, characterized in that output.
사용자는 상기 컴퓨터를 통하여 상기 광고 및 자막 입력장치에 로고 정보를 저장하는 것을 특징으로 하는 광고 및 자막 입력 시스템.9. The method of claim 8,
And a user stores logo information in the advertisement and subtitle input apparatus through the computer.
상기 기 저장된 로고는 지상파 방송사 로고인 것을 특징으로 하는 광고 및 자막 입력 시스템.9. The method of claim 8,
The pre-stored logo is a terrestrial broadcasting company logo, characterized in that the advertisement and subtitle input system.
상기 광고 및 자막 입력장치는 상기 주화면으로 출력되는 방송신호의 화면 비율을 조정하는 것을 특징으로 하는 광고 및 자막 입력 시스템.9. The method of claim 8,
And the advertisement and subtitle input apparatus adjusts an aspect ratio of a broadcast signal output to the main screen.
상기 보조화면은 주화면의 아래에 위치하는 제1보조화면과 주화면의 오른쪽에 위치하는 제2보조화면으로 구성되고,
상기 광고 및 자막 입력장치는 상기 제1보조화면으로 자막 정보를 출력하고, 상기 제2보조화면으로 광고 정보를 출력하는 것을 특징으로 하는 광고 및 자막 입력 시스템.9. The method of claim 8,
The sub-screen is composed of a first sub-screen positioned below the main screen and a second sub-screen positioned to the right of the main screen.
The advertisement and subtitle input apparatus outputs subtitle information to the first sub-screen and outputs advertisement information to the second sub-screen.
상기 컴퓨터는 광고 및 자막 시간 예약 설정기능을 포함하며, 예약된 광고 시간에 광고 및 자막을 상기 광고 및 자막 입력장치로 전송하는 것을 특징으로 하는 광고 및 자막 입력 시스템.9. The method of claim 8,
The computer includes an advertisement and subtitle time setting function, and transmits the advertisement and the subtitle to the advertisement and subtitle input device at the scheduled advertisement time.
상기 광고 분석 서버는 광고주 별로 광고 시간 및 광고 내용을 저장하는 데이터 베이스를 포함하며,
사용자는 상기 컴퓨터를 통하여 상기 광고주 별 광고 시간 및 광고 내용을 검색하는 것을 특징으로 하는 광고 및 자막 입력 시스템.9. The method of claim 8,
The advertisement analysis server includes a database for storing the advertisement time and advertisement content for each advertiser,
A user inputs an advertisement and subtitle input system, characterized in that for searching the advertisement time and advertisement content for each advertiser through the computer.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020120112283A KR101336623B1 (en) | 2012-10-10 | 2012-10-10 | Apparatus and system for advertisement and caption input |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020120112283A KR101336623B1 (en) | 2012-10-10 | 2012-10-10 | Apparatus and system for advertisement and caption input |
Publications (1)
Publication Number | Publication Date |
---|---|
KR101336623B1 true KR101336623B1 (en) | 2013-12-05 |
Family
ID=49987194
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020120112283A KR101336623B1 (en) | 2012-10-10 | 2012-10-10 | Apparatus and system for advertisement and caption input |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR101336623B1 (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101537059B1 (en) * | 2013-12-31 | 2015-07-16 | 주식회사 에이텍 | Express bus terminal for controlling of audio/video |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR19980082253A (en) * | 1997-05-02 | 1998-12-05 | 윤종용 | Video playback device and display method that can be advertised in general broadcasting time |
KR20020008663A (en) * | 2000-07-25 | 2002-01-31 | 이 경 영 | System for displaying advertisements on TV and system for inserting ID and data on compositive video signal of advertisements |
KR20090011592A (en) * | 2007-07-26 | 2009-02-02 | 브로드밴드미디어주식회사 | Method and system for providing real time caption sevice about internet protocol television |
KR20110046928A (en) * | 2009-10-29 | 2011-05-06 | 엘지전자 주식회사 | Apparatus and method for image displaying in image dispaly device |
-
2012
- 2012-10-10 KR KR1020120112283A patent/KR101336623B1/en active IP Right Grant
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR19980082253A (en) * | 1997-05-02 | 1998-12-05 | 윤종용 | Video playback device and display method that can be advertised in general broadcasting time |
KR20020008663A (en) * | 2000-07-25 | 2002-01-31 | 이 경 영 | System for displaying advertisements on TV and system for inserting ID and data on compositive video signal of advertisements |
KR20090011592A (en) * | 2007-07-26 | 2009-02-02 | 브로드밴드미디어주식회사 | Method and system for providing real time caption sevice about internet protocol television |
KR20110046928A (en) * | 2009-10-29 | 2011-05-06 | 엘지전자 주식회사 | Apparatus and method for image displaying in image dispaly device |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101537059B1 (en) * | 2013-12-31 | 2015-07-16 | 주식회사 에이텍 | Express bus terminal for controlling of audio/video |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9055309B2 (en) | Systems and methods for identifying video segments for displaying contextually relevant content | |
KR102166423B1 (en) | Display device, server and method of controlling the display device | |
CN108235105B (en) | Barrage presenting method, recording medium, electronic device and information processing system | |
JP5465620B2 (en) | Video output apparatus, program and method for determining additional information area to be superimposed on video content | |
CA2906173C (en) | Systems and methods for identifying video segments for displaying contextually relevant content | |
CN110232936B (en) | System and method for identifying video segments for displaying contextually relevant content | |
KR20130083457A (en) | Method for transceiving media files and device for transmitting/receiving using same | |
KR20110062982A (en) | Method and apparatus for generating program summary information of broadcasting content on real-time, providing method thereof, and broadcasting receiver | |
KR20150104358A (en) | Server apparatus and method for transmitting finger print and broadcasting receiving apparatus | |
US9084028B2 (en) | System and method for detecting and classifying direct response advertisements | |
JP2009260902A5 (en) | ||
KR101426481B1 (en) | Apparatus and method for providing contents | |
KR20100016713A (en) | A system and a method for alternating bad contents during tv broadcast | |
KR20180025754A (en) | Display apparatus and control method thereof | |
KR101174060B1 (en) | Advertisement service server system and digital television system be linked with the server | |
JP2013016030A (en) | Program reproduction apparatus and program reproduction method | |
JP2016536834A (en) | Method and apparatus for simultaneous display and monitoring of video programs | |
US10582244B2 (en) | Feeding device, feeding method, receiving device, receiving method, program, and broadcasting system | |
KR101336623B1 (en) | Apparatus and system for advertisement and caption input | |
KR20130089358A (en) | Method and apparatus of providing additive information for contents in broadcast system | |
US9959840B2 (en) | Multimedia servers that broadcast packet-switched audio with second screen content | |
JP4710350B2 (en) | CM additional information supply method, CM additional information supply apparatus, CM additional information receiving apparatus, and CM additional information supply system | |
US20160119674A1 (en) | Video reception device, information display method, and video reception system | |
US20130036444A1 (en) | Display apparatus displaying broadcasting information of three-dimensional image and control method thereof | |
EP3220652B1 (en) | Electronic device and operation method thereof |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment |
Payment date: 20180928 Year of fee payment: 6 |
|
FPAY | Annual fee payment |
Payment date: 20190930 Year of fee payment: 7 |