KR101995914B1 - Method and system for ordering goods using smart terminal with applying an augmented reality marker or real picture to the tv siginal on the tv broadcast - Google Patents

Method and system for ordering goods using smart terminal with applying an augmented reality marker or real picture to the tv siginal on the tv broadcast Download PDF

Info

Publication number
KR101995914B1
KR101995914B1 KR1020170059652A KR20170059652A KR101995914B1 KR 101995914 B1 KR101995914 B1 KR 101995914B1 KR 1020170059652 A KR1020170059652 A KR 1020170059652A KR 20170059652 A KR20170059652 A KR 20170059652A KR 101995914 B1 KR101995914 B1 KR 101995914B1
Authority
KR
South Korea
Prior art keywords
marker
shopping
augmented reality
signal
broadcasting
Prior art date
Application number
KR1020170059652A
Other languages
Korean (ko)
Other versions
KR20170059926A (en
Inventor
조용대
Original Assignee
조용대
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 조용대 filed Critical 조용대
Priority to KR1020170059652A priority Critical patent/KR101995914B1/en
Publication of KR20170059926A publication Critical patent/KR20170059926A/en
Priority to PCT/KR2018/005481 priority patent/WO2018212521A1/en
Application granted granted Critical
Publication of KR101995914B1 publication Critical patent/KR101995914B1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/47815—Electronic shopping
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0633—Lists, e.g. purchase orders, compilation or processing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0641—Shopping interfaces
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/254—Management at additional data server, e.g. shopping server, rights management server
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/254—Management at additional data server, e.g. shopping server, rights management server
    • H04N21/2542—Management at additional data server, e.g. shopping server, rights management server for selling goods, e.g. TV shopping
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4782—Web browsing, e.g. WebTV
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/816—Monomedia components thereof involving special video data, e.g 3D video

Abstract

본 발명은 TV방송에서 방송중인 쇼핑 상품에 관한 증강현실 마커나 실물을 방송에 적용하고 스마트단말에서 이를 이용하여 상품주문 인터넷 쇼핑몰이나 쇼핑앱으로 연결하는 시스템에 관한 것이다.
본 발명은 쇼핑상품의 증강현실 마커를 생성하는 마커생성기와 상기 마커생성기로부터 생성된 마커를 수신,보관하는 증강현실 마커서버, 상기 마커서버로부터 수신된 마커를 방송신호에 맞게 신호를 발생시켜주는 마커신호발생기, 상기 마커신호발생기를 방송편성표에 맞게 신호 발생을 제어하는 프로그램자동송출장치(Automatic Program Controller : APC)와 마커신호를 받아서 방송화면을 만들어주는 영상합성기 및 방송신호를 송출하는 송출단말, 상기 송출단말로부터 전송되는 방송신호를 수신해서 화면에 표시하는 TV, 마커신호를 인식하고 상품주문과 이벤트 부가영상 메뉴를 표시하는 증강현실(Augmented Reality : AR) 쇼핑앱, 상기 TV에서 표시되는 쇼핑상품 마커를 인식하는 스마트단말을 포함한다.The present invention relates to a system for applying an augmented reality marker or a real thing related to a shopping product being broadcasted in TV broadcasting to broadcasting and connecting the same to a product ordering Internet shopping mall or a shopping app using a smart terminal.
A marker generator for generating augmented reality marker of the shopping product; an augmented reality marker server for receiving and storing the marker generated by the marker generator; a marker for generating a signal corresponding to the broadcast signal from the marker received from the marker server; A signal generator, a program automatic program controller (APC) for controlling signal generation according to the program schedule, a video synthesizer for generating a broadcast screen by receiving a marker signal, and a broadcast terminal for transmitting a broadcast signal, An Augmented Reality (AR) shopping app for recognizing a TV and a marker signal to receive a broadcasting signal transmitted from a broadcasting terminal and displaying a product order and an event supplementary image menu, a shopping product marker displayed on the TV And a smart terminal that recognizes the smart terminal.

Figure 112017045522112-pat00001
Figure 112017045522112-pat00001

Description

TV방송에서 쇼핑상품에 관한 증강현실 마커나 실물사진을 방송신호에 적용하고 스마트단말에서 이를 이용한 상품주문 구현방법 및 시스템{METHOD AND SYSTEM FOR ORDERING GOODS USING SMART TERMINAL WITH APPLYING AN AUGMENTED REALITY MARKER OR REAL PICTURE TO THE TV SIGINAL ON THE TV BROADCAST}TECHNICAL FIELD [0001] The present invention relates to a method and system for implementing a product order using augmented reality markers or real photographs related to a shopping product in a TV broadcast, THE TV SIGINAL ON THE TV BROADCAST}

본 발명은 TV방송 쇼핑에 관한 증강현실 구현방법에 관한 것이다.The present invention relates to a method for implementing an augmented reality related to TV broadcast shopping.

TV쇼핑과 모바일 쇼핑이 건전한 경쟁을 통해 발전을 하면서 시청자의 상품 선택의 폭은 넓어졌으나 가정에서 혹은 유사 장소에서 TV쇼핑 방송채널을 보며 상품주문을 하다보면 매우 불편한 점이 많다. 상품주문은 세가지 방법이 있는데 리모컨과 스마트폰, 전화가 있다. 전화로 주문하는 것은 일일이 말로 다 설명을 해야하는 번거로움이 있고, 리모콘으로 하다보면 일일이 버튼을 누르고 틀리면 다시해야 하는데 익숙하지 못하니 자주 틀려서 매우 괴롭다. 스마트폰으로 상품주문을 하려면 쇼핑채널이 17개나 되어 원하는 쇼핑 앱을 바로 찾는것도 시청자에게는 매우 불편한 일이다.While TV shopping and mobile shopping have developed through healthy competition, the selection of viewers' products has widened, but there are many inconveniences when ordering products by watching TV shopping channels at home or similar places. There are three ways to order products: remote control, smart phone, and telephone. It is troublesome to explain everything by telephone, and if you use the remote control, you have to press the button and repeat it again. It is very troublesome because you are not familiar with it. To order merchandise on a smartphone, 17 shopping channels are available, and it is very uncomfortable for viewers to find the desired shopping app right away.

이러한 문제들을 혁신적으로 해결해서 시청자를 편하게 해주기 위해서는 통신망사업자와 셋탑을 보유한 SO사업자, 쇼핑채널 사업자가 같이모여 문제를 개선해야 하는데 각자 생각이 틀리고 이해타산이 달라 합리적인 결과를 만들어 내기가 매우 어렵다. 본 발명의 발명자는 이러한 기술적, 사업자적 환경 문제를 가지고 고민 끝에 방송을 현재 하는데로 그대로 하면서 전송망과 셋탑의 부가기능을 쓰지 않고도 혁신적으로 문제를 해결하는 방법을 오랬동안 연구와 고민하여 본 발명을 완성하기에 이르렀다. In order to solve these problems innovatively, it is very difficult for the network operators, SO operators with settops, and shopping channel operators to gather together to improve the problems, which are different from each other and different from each other. The inventor of the present invention has studied for a long time the method of solving the problem innovatively without using the additional function of the transmission network and the settop while still broadcasting the present with the technical and business environment problem, It came to the following.

본 발명의 목적은 TV방송을 보고있는 시청자에게 어떻게 하면 지금보다 상품쇼핑과 주문을 좀더 편리하게 할수 있도록 할 것인가에 있다.It is an object of the present invention to provide a viewer who watches TV broadcasts to make shopping and ordering more convenient than now.

리모컨은 원래 목적대로 TV를 제어하는데에 쓰도록 하고, 항상 휴대하고 익숙해져 있는 스마트단말을 이용하여 매우 편리하게 상품주문을 하는데 사용할 수 있도록 증강현실을 응용하는 방법으로 구현 하였다. 또한, 현실적으로 쇼핑채널이 독자적으로 변경하기 힘든 송출단말 이후의 과정에 구축된 수많은 하드웨어장비와 소프트웨어장치, 최종 단말인 TV에 이르기까지 그 어떤것도 바꾸지 않고 그대로 유지한채 서비스가 가능하도록 했다.The remote control is designed to be used for controlling the TV according to its original purpose, and implemented as a method of applying augmented reality so that it can be used conveniently for commodity ordering by using a smart terminal which is always carried and used. In addition, the service can be maintained without changing anything from the hardware terminal, the software terminal, and the terminal terminal, which are built in the process after the delivery terminal, which is difficult to change the shopping channel independently.

스마트단말의 증강현실을 이용한 쇼핑앱 하나로 17개나 되는 쇼핑채널의 구매 웹싸이트 쇼핑몰이나 쇼핑앱을 TV시청중에 원터치로 간편하게 연결되도록 하였고, 기존의 구매 웹싸이트나 앱을 그대로 사용하도록 하여 적용이 쉽고 경제적 효과도 높게 하였다. 이때, TV방송의 판매상품과 매칭되는 쇼핑몰이나 쇼핑앱으로 이동하기 때문에 시청자는 원하는 상품을 즉시 구매가 가능하다. Purchase of 17 shopping channels with one shopping app using augmented reality of smart terminals It is easy to connect web site shopping malls or shopping apps with one touch while watching TV and it is easy to apply and easy to use by using existing purchase website or app Effect. At this time, since the user moves to a shopping mall or a shopping app that matches the TV commercial product, the viewer can purchase the desired product immediately.

시청자는 앞으로 말로 일일이 해야하는 전화걸기 수고나 고생스런 리모컨 주문 및 사전에 수많은 쇼핑앱을 깔아놓고 찾아가야 하는 수고를 덜게 될 것이다.Viewers will be less likely to spend the days of making phone calls, worrying about remote controls, and having to find a lot of shopping apps in advance.

한편, 본 발명에서 명시되지 않은 또 다른 목적들은 아래의 상세한 설명 및 유추가 가능한 효과로부터 용이하게 추론할 수 있는 범위 내에서 추가적으로 고려될 것이다. In the meantime, other objects not specifically described in the present invention will be further considered within the scope of the following detailed description and easily deduced from the feasible effects.

이와같은 과제를 달성하기 위하여 본 발명은 (a) 증강현실 마커서버에서 마커신호발생기로 쇼핑상품과 매칭된 마커를 전송하는 단계;According to an aspect of the present invention, there is provided a method for providing a marking agent, comprising: (a) transmitting a marker matched with a shopping item to a marker signal generator in an augmented reality marker server;

(b) 상기 마커신호발생기에서 생성된 마커신호를 수신해서 쇼핑상품 콘텐츠와 믹싱하여 방송영상을 만들어 송출단말을 통해 전송하는 단계(b) receiving the marker signal generated by the marker signal generator, mixing the received marker signal with the shopping item content, creating a broadcast image, and transmitting the broadcast image through the broadcasting terminal

(c) 시청자의 TV가 마커신호를 포함하는 방송신호를 화면에 표시하는 단계;(c) displaying a broadcast signal including a marker signal on a viewer's TV on the screen;

(d) 시청자의 스마트단말이 증강현실(Augmented Reality : AR) 쇼핑앱을 구동하고 스마트단말의 카메라를 이용하여 상기 TV의 화면을 촬영하는 단계;(d) the smart terminal of the viewer drives an Augmented Reality (AR) shopping app and takes a picture of the TV using the camera of the smart terminal;

(e) 상기 스마트단말이 상기 증강현실 마커신호를 상기 카메라에서 촬영한 영상에 매칭하여 상기 스마트단말의 디스플레이 모듈에 상품주문용 메뉴를 표시하는 단계;(e) displaying a menu for ordering goods on the display module of the smart terminal by matching the augmented reality marker signal with the image photographed by the smart terminal;

(f) 상기 상품주문용 메뉴에서 시청자가 원하는 메뉴 선택시 매칭되는 인터넷 쇼핑몰이나 쇼핑 앱으로 화면이 표시되는 단계를 포함하는 것을 특징으로 하는, TV방송에서 쇼핑상품에 관한 증강현실 마커나 실물을 방송신호에 적용하고 스마트단말에서 이를 이용한 상품주문 구현방법을 제공한다. (f) displaying a screen in an Internet shopping mall or a shopping app, which is matched when a menu desired by the viewer is selected from the menu for ordering goods. Signal and implementing a product order using the same in a smart terminal.

바람직한 실시예에 있어서 상기 (a)의 쇼핑상품과 매칭된 마커의 생성은 사전에 쇼핑채널에서 상품의 특징이 잘 표현된 영상콘텐츠를 제공 받아서 워터마크나 QR코드의 특징 일부를 포함시켜 영상콘텐츠의 전반적인 이미지가 유지되도록 하여 시청자에게 시청시에도 거부감 없이 도움이 되도록 하는 단계;In a preferred embodiment, the generation of the marker matched with the shopping item in (a) is performed by receiving the image contents in which the characteristics of the goods are well expressed beforehand on the shopping channel, and by including part of the characteristic of the watermark or QR code, So that the overall image is maintained so as to help the viewer without any sense of discomfort when viewing the image;

제공된 방송편성표에 맞게 준비된 쇼핑상품 마커를 방송전에 마커서버에서 마커신호발생기로 전송하고 마커신호발생기에서는 발생된 신호를 모니터화면에 보이도록 하여 준비된 상태를 사전에 알수 있도록 하는단계; 및 Transmitting a shopping product marker prepared according to the provided program schedule to a marker signal generator in a marker server before broadcasting and displaying a signal generated by the marker signal generator on a monitor screen so that the prepared product state can be known in advance; And

마커발생기에서 생성한 신호는 영상합성기 뿐만 아니라 송출단말에 압축신호 형태로 전송이 가능하게 하여 마커신호발생기와 영상신호합성기 사이에 장애로 마커신호가 방송되지 않는일이 없도록 이중구조로 하여 마커신호는 반드시 방송되도록 하고 장치를 이중화 하는 단계를 포함하는 것이 좋다. 또한, 여기서 영상합성기는 스많은 영상신호를 수신하여 가공처리하는 영상믹서기가 있고, 송출단말 전단에 구비된 신호합성기 일종인 다운스트림키어라는 장치가 있는데 본 발명에서는 두장비를 모두 포함하고 있다. The signal generated by the marker generator can be transmitted in the form of a compressed signal not only to the image synthesizer but also to the output terminal, so that the marker signal can be prevented from being broadcast due to a trouble between the marker signal generator and the image signal synthesizer. It is preferable to include a step of broadcasting and duplicating the apparatus. Here, the image synthesizer includes an image blender for receiving and processing a large number of image signals, and a device called a downstream keyer, which is a type of signal synthesizer provided at the upstream side of the output terminal. In the present invention, both devices are included.

바람직한 실시예에 있어서 상기 (b) 단계는 지상파, 케이블, 위성, IPTV, 스마트TV등 여러 형태의 방송 플랫폼을 통해 방송 되더라도 송출 주조정실의 영상신호 합성기에서 신호합성이 이루어지기 때문에 신호의 왜곡이나 변형이 일어날 수 없는 안전한 구조를 포함하고 있는 단계;In the preferred embodiment, even if the step (b) is broadcast through various types of broadcasting platforms such as a terrestrial wave, a cable, a satellite, an IPTV, or a smart TV, signal synthesis is performed in the video signal synthesizer of the transmission main room. A step that includes a secure structure that can not occur;

생성된 마커는 방송화면의 좌상단이나 좌하단 또는 우상단이나 우하단에 적절히 배치하여 전체적인 방송화면의 품질을 유지하는 것을 포함하는 단계; 및 The generated markers are appropriately arranged in the upper left or lower left or upper right or lower right of the broadcasting screen to maintain the quality of the entire broadcasting screen; And

프로그램자동송출장치는 방송주조정실에서 사용하고 있는 기존의 장치를 활용하며, 상기 장치에서 제공하는 제어신호를 이용하여 마커신호 발생기의 발생순서를 자동으로 제어하는 것이 좋다. It is preferable that the program automatic transmission apparatus utilizes the existing apparatus used in the broadcasting main control room and automatically controls the generation order of the marker signal generator using the control signal provided by the apparatus.

바람직한 실시예에 있어서 상기 (c) 단계는 상기 TV가 아날로그신호 수신방식과 디지털신호 수신방식을 모두 포함하고 있으며, 송출센타에 스마트단말기를 가지고 증강현실 쇼핑앱을 구동하여 상기 TV를 촬영하여 방송과 마커가 매칭되고 있는 것을 모니터링 하는 단계를 포함하는게 좋다.In a preferred embodiment, the step (c) includes both the analog signal receiving method and the digital signal receiving method, and the augmented reality shopping app is operated with the smart terminal in the transmitting center to photograph the TV, And monitoring that the marker is matched.

바람직한 실시예에 있어서 상기 (e) 단계는 쇼핑상품 마커신호에 방송채널을 인식하는 정보가 마커생성시 포함되어 있으며, 증강현실 마커서버는 증강현실 쇼핑앱으로 쇼핑상품 마커신호를 전송하고 시청자의 스마트 단말은 수신된 마커신호를 채널별로 구분하여 저장하는 단계;In a preferred embodiment of the present invention, the step (e) includes the step of generating information on a broadcast channel in the shopping product marker signal when the marker is generated. The augmented reality marker server transmits a shopping product marker signal to the augmented reality shopping app, The terminal may store the received marker signal by channel and store the received signal.

시청자 스마트단말의 증강현실 쇼핑앱이 TV화면에 표시되는 마커신호에 들어있는 채널식별정보와 스마트단말에 저장된 마커신호를 비교하여 그 결과를 가지고 방송채널과 일치하는 쇼핑몰 주문 주소를 증강현실 메뉴에 매핑하여 디스플레이에 표시하는 단계; 및The augmented reality shopping app of the viewer smart terminal compares the channel identification information included in the marker signal displayed on the TV screen with the marker signal stored in the smart terminal and maps the shopping mall order address matching the broadcast channel to the augmented reality menu And displaying it on a display; And

상기 증강현실 상품주문 메뉴에서 시청자가 메뉴 선택시 인터넷 쇼핑몰이나 쇼핑 앱으로 화면이 표시되는 단계를 포함하는 것을 특징으로 하는, TV방송에서 쇼핑상품에 관한 증강현실 마커나 실물을 방송신호에 적용하고 스마트단말에서 이를 이용한 상품주문 구현방법을 제공한다. A step of displaying a screen in an Internet shopping mall or a shopping app when a viewer selects a menu in the augmented reality product order menu, The terminal provides a method of implementing an order of goods using the terminal.

본 발명은 시청자가 TV방송 시청중에 쇼핑채널의 상품주문을 스마트폰으로 간편하게 하려고 할때 바로 동일 쇼핑채널 인터넷 쇼핑몰이나 쇼핑앱으로 연결해주는 효과가 있다.The present invention has the effect of directly connecting to the same shopping channel Internet shopping mall or shopping app when a viewer tries to easily order a product of a shopping channel with a smartphone while watching a TV broadcast.

본 발명으로 시청자는 힘들게 전화를 걸지 않아도 되며, TV 쇼핑채널 구매 사이트를 검색하지 않아도 되고, 언제 이용할지 모르는 수 많은 홈쇼핑 앱을 스마트폰에 깔아놓지 않아도 빠르고 쉽게 방송중인 쇼핑상품을 구매할 수 있는 효과가 있다.According to the present invention, viewers do not need to make a hard call, they do not have to search for shopping sites for TV shopping channels, and they can purchase shopping products that are being broadcasted quickly and easily even when they do not have many home shopping apps have.

또한, 방송을 통해 상품을 판매하는 사업자는 기존의 방송시스템의 구조 변형 없이 그대로 쓸수가 있어 최소의 비용으로 시스템 구축이 가능한 효과각 있으며, 특히 방송망이나 SO사업자의 셋탑 구조나 소프트웨어의 변경으로 발생하는 수많은 기술적 문제와 비용지불 문제등이 없기 때문에 신속한 도입과 운용이 가능한 효과가 있다.In addition, a company that sells products through broadcasting can use the system without modification of the existing broadcasting system. Thus, it is possible to construct a system with a minimum cost. Especially, a change in the set- Because there are not many technical problems and cost payment problems, it is possible to introduce and operate quickly.

한편, 증강현실 쇼핑앱을 통해서 채널 프로모션을 위한 각종 이벤트도 쉽게 할수 가 있어 충성고객의 확보도 손쉽게 할 수 있는 효과도 있다.On the other hand, augmented reality shopping apps can easily make various events for channel promotion, so it is easy to acquire loyal customers.

더불어, 여기에서 언급되지 않은 효과라 하더라도 본 발명의 기술적 특징에 의해 기대되는 이하의 명세서에서 기재된 효과나 잠정적인 효과는 본 발명의 명세서에 기재된 것과 같이 취급됨을 추가한다.In addition, the effect or potential effect described in the following specification, which is expected by the technical characteristics of the present invention, is treated as described in the specification of the present invention even if the effect is not mentioned here.

도1은 본 발명의 시스템의 일 실시예를 나타내는 도면이다.
도2는 본 발명의 방법의 일 실시예를 나타내는 도면이다.
도3은 본 발명의 스마트단말의 일 실시예를 나타내는 도면이다.
도4는 본 발명의 스마트단말이 증강현실 마커서버에 접속하기 위한 방법의 일 실시예를 나타내는 도면이다.
도5는 본 발명의 스마트단말이 증강현실을 통해 다양한 메뉴를 표시하는 일 실시예를 나타내는 도면이다.
도6는 본 발명의 스마트단말이 증강현실을 통해 표시된 메뉴와 매핑되어지는 내용을 보여주는 일 실시예를 나타내는 도면이다.
※ 첨부한 도면은 본 발명의 기술사상에 대한 이해를 위하여 참조로서 예시된 것이라는 것을 밝히며, 그것에 의해 본 발명의 권리범위가 제한되지는 아니한다.1 is a diagram showing an embodiment of the system of the present invention.
2 is a diagram showing one embodiment of the method of the present invention.
3 is a diagram illustrating an embodiment of a smart terminal of the present invention.
4 is a diagram illustrating an embodiment of a method for connecting a smart terminal of the present invention to an augmented reality marker server.
5 is a diagram illustrating an embodiment in which the smart terminal of the present invention displays various menus through an augmented reality.
FIG. 6 is a diagram illustrating an embodiment of a smart terminal of the present invention, which is mapped with a displayed menu through an augmented reality.
* The accompanying drawings illustrate examples of the present invention in order to facilitate understanding of the technical idea of the present invention, and thus the scope of the present invention is not limited thereto.

본 발명의 내용을 설명함에 있어서 각 부문별 언급된 공지기능과 그에 대한 이 분야의 기술자에게 자명한 내용으로서 본 발명의 요지를 불필요하게 해석할 수 있다고 판단되는 경우에는 상세한 설명을 생략한다.In describing the contents of the present invention, detailed description will be omitted if it is judged that unnecessary interpretation of the gist of the present invention is obvious to the skilled in the art and the known functions mentioned in each section.

본 발명에서 증강현실은(Augmented Reality : AR)은 시청자가 눈으로 보는 현실세계와 가상의 물체를 오버랩하여 보여주는 기술을 의미한다.In the present invention, the Augmented Reality (AR) means a technique of overlapping a virtual world with a real world viewed by the viewer.

본 발명의 증강현실 애플리케이션은 시청가가 보든 TV방송의 현실세계 화면에 마커신호발생기에서 제공하는 증강현실 마커신호를 오버랩하여 표시한다.The augmented reality application of the present invention overlaps and displays the augmented reality marker signal provided by the marker signal generator on the real world screen of the TV broadcast, regardless of the audience.

본 발명에서 마커서버는 증강현실의 쇼핑상품 및 채널인식 마커신호와 관련정보를 저장하고 마커신호발생기로 마커신호를 전송하고, 스마트단말에서 정보확인 요청이 오면 정보를 확인하여 결과를 보내주며 최종적으로는 스마트단말에 증강현실 메뉴가 나타나게 해주는 역할을 하는 서버이다. 여기서 마커서버는 서비스 확대에 따라 두 개이상으로 기능이 분산된 서버로 나눌수도 있다.In the present invention, the marker server stores the augmented reality shopping item, the channel recognition marker signal and related information, transmits the marker signal to the marker signal generator, checks information when the smart terminal requests the information confirmation, Is a server that plays a role in displaying augmented reality menu on a smart terminal. Here, the marker server may be divided into two or more functionally distributed servers according to the expansion of the service.

또한, 스마트단말은 스마트폰 이외에 태블릿PC, 웨어러블 장치와 같은 이동단말을 포함할 수 있다.In addition, the smart terminal may include a mobile terminal such as a tablet PC or a wearable device in addition to a smart phone.

본 발명에서의 TV방송은 아날로그방송과 디지털방송 모두 해당되며 지상파방송, IPTV, 케이블방송, 위성방송, 사내방송, 스마트TV를 포함하는 개념이다.The TV broadcasting according to the present invention includes both terrestrial broadcasting, IPTV, cable broadcasting, satellite broadcasting, in-house broadcasting, and smart TV.

도 1은 본 발명의 시스템의 일 실시 예를 나타내는 도면이다.1 is a diagram showing an embodiment of the system of the present invention.

도 1에서 보면 본 발명의 시스템(100)은 TV(200), 송출단말(300), 영상합성기(400), 마커발생기(600), 증강현실마커서버(700), 마커생성기(710), 앱스토어(720), 증강현실쇼핑앱(730)을 포함할수 있다.1, the system 100 of the present invention includes a TV 200, a transmission terminal 300, an image synthesizer 400, a marker generator 600, an augmented reality marker server 700, a marker generator 710, A store 720, and an augmented reality shopping app 730.

증강현실 마커서버(700)는 마커생성기로부터 만들어진 마커정보를 수신하여 채널별, 상품별로 저장 보관한다. 마커서버(700)는 마커신호와 자원을 관리함에 있어 다양한 데이터베이스를 가질수 있다.The augmented reality marker server 700 receives the marker information generated from the marker generator and stores and stores the marker information for each channel and product. The marker server 700 may have various databases in managing marker signals and resources.

데이터베이스는 마커신호 데이터베이스, 상품정보 데이터베이스, 채널정보데이터 베이스, 사용자정보 데이터베이스, 로그기록 데이터베이스, 메뉴정보 데이터베이스, 이벤트정보 데이터베이스를 포함할 수 있다.The database may include a marker signal database, a goods information database, a channel information database, a user information database, a log record database, a menu information database, and an event information database.

또한, 과금이나 결제정보를 기록하는 데이터베이스등이 더 포함될 수 있다.Further, a database for recording billing or settlement information may be further included.

이들 데이터 베이스들은 증강현실마커서버(700) 시스템 내부에 위치할수 있으며, 또는 외부서버가 관리하는 저장소에 위치할 수도 있다.These databases may be located within the augmented reality marker server 700 system, or may be located in a repository managed by an external server.

신속한 처리를 위하여 증강현실 마커신호만을 분리하여 별도의 서버를 둘수도 있다.It is also possible to separate the augmented reality marker signal only for quick processing and have a separate server.

또한, 증강현실마커서버(700)는 저장수단과 데이터를 관리하고 처리하는 송수신 수단들과 외부 디바이스나 외부 시스템과의 통신을 처리하는 수단들과의 인증과 보안을 위한 수단들을 더 포함되고, 다양한 하드웨어 장비, 서버장치, 소프트웨어들이 포함될 수 있다.The augmented reality marker server 700 further includes means for authenticating and securing the storage means and transmitting / receiving means for managing and processing data, and means for processing communication with an external device or an external system, Hardware devices, server devices, and software.

TV쇼핑 채널의 가입자와 매칭되는 가입자의 정보를 인증하기 위한 프로세스, 본 서비스를 통해 쇼핑몰이나 쇼핑앱으로 연결된 가입자나 실제 구매를 한 가입자 및 금액 확인 프로세스, 이벤트 개시와 결과를 확인하는 프로세스, 프로모션 이벤트를 통한 포인트나 쿠폰의 사용관리 프로세스, 외부 금융기관등과 연계하여 결제처리를 하는 프로세스등의 경우에 있어서 데이터 자원이 외부에 있거나 외부로 전송해야 한다면 강력한 보안을 수반하는 구조하에 외부서버 및 장치들과의 통신을 통해서 실행될 수있다.A process for authenticating information of a subscriber matching a subscriber of a TV shopping channel, a subscriber who is connected to a shopping mall or a shopping app through the service, a subscriber who has made an actual purchase, a process of checking the amount of money, The process of managing the use of points or coupons through a credit card, the process of using points or coupons, and the process of performing settlement processing in connection with external financial institutions, etc. If the data resources are external or must be transmitted to the outside, Lt; / RTI >

TV(200)에는 다양한 전송망을 통해서 전달되는 방송이 수신되며, 각 방송채널이 송출하는 영상신호를 수신하여 화면에 표시된다. 방송영상의 송출과정은 기존의 방식과 동일하다. 따라서 쇼핑채널 송출실의 구조를 바꿀 필요가 없는 장점이 있다.The TV 200 receives broadcasts transmitted through various transmission networks, receives video signals transmitted from the broadcast channels, and displays them on the screen. The transmission process of the broadcast image is the same as the conventional method. Therefore, there is no need to change the structure of the shopping channel transmission room.

카메라로부터 제작된 영상이 영상합성기(400)로 전달되며, 동시에 방송 편성표에 의해 시간별로 정리된 방송 프로그램을 자동으로 제어하는 프로그램자동송출장치(500)의 제어신호를 받아서 마커신호발생기(600)가 작동되며 장치에서 출력된 마커영상신호도 영상합성기(400)로 전달된다.The image produced by the camera is transmitted to the image synthesizer 400 and at the same time the marker signal generator 600 receives the control signal of the automatic program transmission apparatus 500 for automatically controlling the broadcast program arranged in time by the broadcast schedule table And the marker image signal output from the apparatus is transmitted to the image synthesizer 400. [

두개 이상의 영상신호를 적절히 조정하여 하나의 송출화면이 만들어지며 출력된 신호는 송출단말(300)로 전달되고 이 신호는 다양한 전송망을 통해서 각 가정의 TV로 전달된다.Two or more video signals are appropriately adjusted to produce one transmission screen, and the output signal is transmitted to the transmitting terminal 300, which is transmitted to various households through various transmission networks.

마커생성기(710)은 각 쇼핑채널이 보내오는 쇼핑상품의 마커신호생성용 콘텐츠와 채널정보, 방송시간 정보를 이용하여 적절히 가공하여 증강현실마커서버(700)로 보내주는 역할을 한다. 여기서 마커신호 생성과정은 자동으로 또는 필요에 따라서 수동으로 할 수가 있다.The marker generator 710 appropriately processes and transmits the generated marker signal to the augmented reality marker server 700 using the content for generating a marker signal, the channel information, and the broadcast time information of the shopping product sent from each shopping channel. Here, the marker signal generation process can be performed automatically or manually as required.

자동으로 처리할 경우 각 쇼핑채널측에 마커생성 계정을 열어주어 마커신호용 콘텐츠와 채널정보, 방송시간등의 데이터를 넣어주면 자동으로 생성되도록 할 수가 있다. 수동으로 처리할 경우 마커생성기(710)를 가지고 작업자가 직접 제작하는 방법이 될 것이다.In case of automatic processing, it is possible to open a marker creation account on each shopping channel side, and automatically generate contents by adding contents such as marker signal contents, channel information and broadcasting time. In the case of manual processing, the worker may manually produce the marker with the marker generator 710.

여기서, 마커생성기(710)에서 생성되는 마커신호는 스마트단말(740)의 증강현실 쇼핑앱(730)에서 에러없이 정확한 인식이 되도록 생성됨은 당연하다 할 것이다.It will be appreciated that the marker signal generated by the marker generator 710 is generated to be accurately recognized without any error in the augmented reality shopping app 730 of the smart terminal 740. [

인식 정확도를 높이기 위하여 워터마크나 큐알코드등의 일부 기법을 혼합하여 사용될수 있으며 미래 진보적 기술을 추가로 사용가능한 구조로 구현 되어질수도 있다.To improve recognition accuracy, some techniques such as watermarking and QR code can be used in combination, and future progressive technology can be implemented in a structure that can be used additionally.

앱스토어(720)는 스마트단말(740)에서 증강현실 쇼핑앱(730)을 다운로드 받는데 이용되며, 이때 사전에 생성된 마커신호 정보를 확인하는 방법은 두가지 실시예가 있다. The application store 720 is used to download the augmented reality shopping application 730 from the smart terminal 740, and there are two methods of confirming the marker signal information generated beforehand.

일 실시예는 증강현실 쇼핑앱(730)을 스마트폰단말(740)에서 작동시 증강현실마커서버(700)에서 마커신호정보를 업데이트 받도록 하여 스마트폰단말(740)의 저장장치에 보관하도록 하여 카메라로 스캔한 TV(200)의 화면에서 표시되는 마커정보와 비교 인식하도록 할수가 있는데 속도의 문제가 있을수 있다.In one embodiment, when the augmented reality shopping application 730 is operated by the smartphone terminal 740, the augmented reality marker server 700 receives the marker signal information and stores it in the storage device of the smartphone terminal 740, It is possible to compare the marker information displayed on the screen of the TV 200 scanned with the marker information, but there may be a speed problem.

다른 실시예는 스마트단말(740)에서 증강현실쇼핑앱(730) 작동시 카메라로 스캔한 마커신호정보를 증강현실마커서버(700)로 보내서 비교 확인한 인식정보를 받는것인데 처리속도와 정확성에서 장점이 있으며, 두가지 비교인식 실시예를 혼합해서 구현 할 경우 속도는 느려지지만 정확도가 매우 높아지는 결과를 얻을수 가 있다.In another embodiment, the smart terminal 740 sends marker signal information scanned by the camera to the augmented reality marker server 700 when the augmented reality shopping application 730 is operated, and receives recognition information that is compared and confirmed. In the case of mixing two comparative recognition embodiments, the speed is slowed but the accuracy is very high.

도2는 본 발명의 방법의 일 실시예를 나타내는 도면이다.2 is a diagram showing one embodiment of the method of the present invention.

도 2에서 알 수 있듯이, 마커서버가 마커신호발생기로 마커를 전송한다(S1000). 마커신호발생기는 수신된 마커신호를 생성시켜 영상합성기로 신호를 전송한다(S1100). 영상합성기에 전달된 마커신호와 콘텐츠가 합성되어 송출단말을 통해서 방송되고 시청자의 TV가 이를 수신하여 화면에 표시한다.As shown in FIG. 2, the marker server transmits a marker to the marker signal generator (S1000). The marker signal generator generates a received marker signal and transmits the signal to the image synthesizer (S1100). The marker signal transmitted to the video synthesizer and the content are synthesized and broadcast through the broadcasting terminal, and the viewer's TV receives it and displays it on the screen.

시청자의 스마트단말이 증강현실쇼핑앱을 구동하고, 스마트단말의 카메라를 이용하여 TV의 화면을 촬영한다. 스마트단말이 방송중인 쇼핑상품의 마커신호의 식별정보를 인식한다(S1200). 바람직한 실시예에서 스마트폰이 직접 추출한 마커신호정보와 자체 저장된 마커신호정보를 비교시에 필요한 이미지 매칭 알고리즘이 내장될 수 있다. 또한, 마커서버가 저장하고 있는 마커서버 데이터베이스에 접속도 할 수 있다. The smart terminal of the viewer drives the augmented reality shopping app and shoots the screen of the TV using the camera of the smart terminal. The smart terminal recognizes the identification information of the marker signal of the shopping product being broadcast (S1200). In a preferred embodiment, an image matching algorithm may be embedded in order to compare marker signal information directly extracted by a smartphone with self-stored marker signal information. In addition, it can access the marker server database stored by the marker server.

증강현실쇼핑앱은 1차인식된 정보를 가지고 마커서버로 확인요청을 한다(S1300). 확인요청을 받은 마커서버는 저장된 정보를 이용하여 2차 비교확인을 해서 인식된 정보를 스마트단말로 결과를 전송한다(S1400).The augmented reality shopping app sends a confirmation request to the marker server with the first recognized information (S1300). Upon receiving the confirmation request, the marker server performs a secondary comparison check using the stored information, and transmits the recognized information to the smart terminal (S1400).

스마트단말이 2차 인식정보를 수신한다(S1500). 인식정보에는 쇼핑상품과 채널정보등을 식별할 수 있는 정보를 포함한다.The smart terminal receives the secondary identification information (S1500). The recognition information includes information capable of identifying shopping items and channel information.

스마트단말이 최종인식된 식별정보를 마커서버로 전송하여 증강현실 작동을 요청한다(S1600).The smart terminal transmits the finally recognized identification information to the marker server to request the augmented reality operation (S1600).

마커서버가 쇼핑상품의 식별정보를 수신하고 스마트단말에게 TV에서 방송중인 상품의 주문을 위한 부가영상 메뉴를 제공하여 증강현실 작동을 개시한다(S1700).In operation S1700, the marker server receives the identification information of the shopping product and provides the smart terminal with an additional image menu for ordering the product being broadcast on the TV.

[본 발명의 실행 시나리오][Execution scenario of the present invention]

도 3을 이용하여 본 발명이 스마트폰에서 실행되는 시나리오의 실시예에 대해 설명한다.An embodiment of a scenario in which the present invention is implemented in a smartphone will be described with reference to Fig.

도3에서 보면 알수 있듯이 스마트단말의 증강현실 애플리케이션을 구동한다(S2000).As shown in FIG. 3, the augmented reality application of the smart terminal is driven (S2000).

도 4와 같이 증강현실 애플리케이션이 스마트단말의 카메라를 구동하여 TV의 방송화면을 촬영한다(S2100)As shown in FIG. 4, the augmented reality application drives a camera of a smart terminal to shoot a broadcast screen of a TV (S2100)

스마트단말이 카메라를 통해 촬영된 마커신호로부터 1차 인식을 한다(S2200). 1차 인식후에 2차인식 과정을 거친다(S2300). 정확도가 높아진 인식정보를 가지고 증강현실이 작동을 개시한다(S2400).The smart terminal first recognizes the marker signal photographed through the camera (S2200). After the first recognition, the second recognition process is performed (S2300). The augmented reality starts to operate with the recognition information with high accuracy (S2400).

증강현실이 작동을 개시하면 부가영상메뉴를 제공하고(S2500), 상황에 따라서 이벤트 영상구현 정보도 제공한다(S2600).When the augmented reality starts to operate, an additional image menu is provided (S2500), and event image implementation information is also provided according to the situation (S2600).

시청자는 증강현실 부가영상메뉴를 스마트단말에서 볼수가 있으며 원하는 상품 주문방식을 선택하게 되면 관련 페이지로 이동하여 TV에서 방송되는 원하는 상품을 바로 주문을 할 수가 있다(S2700).If the viewer can see the augmented reality additional image menu on the smart terminal and selects the desired commodity ordering method, the viewer can go to the related page and order the desired commodity broadcasted on the TV (S2700).

또한, TV방송 쇼핑채널에서 프로모션 이벤트를 할 경우 이벤트 영상을 구현시켜 시청자에게 노출되어진다(S2800).In addition, when a promotional event is performed on a TV broadcast shopping channel, an event image is implemented and exposed to a viewer (S2800).

도5 와 도 6은 스마트 단말에서 증강현실 부가메뉴의 일 실시예를 나타낸 것이다. 즉시주문(1000)은 인터넷쇼핑몰(722)로 매핑이 되어 있어서 바로 주문화면이 보이게 되고, 쇼핑앱(1200)은 스마트단말에 설치되어 있는 쇼핑 앱(721)과 매핑이 되어 있어서 바로 구동시키게 되며, 앱 다운로드(1300)는 시청자의 스마트단말에 설치되지 않은 쇼핑앱(1200)을 다운로드 할수 있도록 관련 상품 주문이 있는 앱스토어(720)에 바로 연결시켜 준다.5 and 6 show an embodiment of the augmented reality adding menu in the smart terminal. The order 1000 is mapped to the Internet shopping mall 722 and the order screen is immediately displayed. The shopping application 1200 is mapped to the shopping application 721 installed in the smart terminal, The application downloading unit 1300 directly links the shopping application 1200 not installed in the smart terminal of the viewer to the application store 720 having the related product order.

이벤트(1400)는 쇼핑채널에서 프로모션을 위해 여러 가지 홍보성, 게임성 또는 오락성 이벤트를 통해 포인트나 쿠폰 기타 물품까지 시청자에게 제공이 가능하고 시청자가 선택시 관련 프로모션페이지(723)로 연결 시켜준다.The event 1400 can provide points, coupons, and other items to a viewer through various promotional, gaming, or entertainment events for promotion in a shopping channel, and allows a viewer to link to the related promotion page 723 when selected.

본 발명의 보호범위는 이상에서 명시적으로 설명한 실시예의 기재와 표현에 제한하는 것은 아니다. 또한, 본 발명이 속하는 기술분야에서 지명한 변경이나 치환으로 말미암아 본 발명의 보호범위가 제한될 수도 없음을 다시한번 첨언한다. The scope of protection of the present invention is not limited to the descriptions and expressions of the embodiments explicitly described above. It is again to be understood that the scope of protection of the present invention is not limited by the modifications or substitutions specified in the technical field of the present invention.

Claims (1)

(a) 마커생성기를 통해 쇼핑상품에 대한 증강현실 마커를 생성하는 단계;
(b) 상기 마커생성기를 통해 생성된 마커를 마커서버가 상기 마커생성기로부터 수신하여 상품 별 및 방송채널 별로 각각 저장하는 단계;
(c) 상기 마커서버에서 마커신호발생기로 쇼핑상품과 매칭된 마커를 전송하는 단계;
(d) 영상합성기가 상기 마커신호발생기에서 생성된 마커신호를 수신하고 쇼핑상품 영상콘텐츠와 합성하여 최종 방송영상을 만들어 송출단말을 통해 시청자의 TV로 전송하는 단계;
(e)시청자의 TV가 마커신호를 포함하는 방송신호를 화면에 표시하는 단계;
(f)시청자의 스마트단말이 증강현실(Augmented Reality: AR) 쇼핑앱을 구동하고 상기 스마트단말의 카메라를 이용하여 상기 TV의 화면을 촬영하는 단계;
(g)상기 스마트단말이 상기 마커신호를 상기 카메라에서 촬영한 영상에 매칭하여 상기 스마트단말의 디스플레이 모듈에 상품주문 부가 메뉴를 표시하는 단계;
(h)상기 상품주문 부가 메뉴에서 시청자가 메뉴 선택 시 쇼핑채널과 동일한 인터넷 쇼핑몰이나 상기 증강현실 쇼핑앱으로 화면이 표시되는 단계를 포함하고,
상기 (c) 단계는,
제공된 방송편성표에 일치해서 준비된 쇼핑상품 마커를 방송 전에 상기 마커서버에서 상기 마커신호발생기로 전송하고,
상기 (d) 단계는,
프로그램자동송출장치를 통해 상기 마커신호발생기를 편성표에 일치해서 자동 제어하고,
상기 (e) 단계는,
TV가 아날로그신호 수신방식과 디지털신호 수신방식 및 지상파방송, IPTV, 케이블방송, 위성방송, 사내방송, 스마트TV등을 모두 포함하는 디스플레이 단계;
상기 (g) 단계는,
상기 마커신호에 쇼핑상품과 방송채널을 인식할 수 있는 식별정보가 포함되어 있으며,
상기 증강현실 쇼핑앱이, 상기 마커신호의 식별정보를 인식하고, 인식된 상기 마커신호의 식별정보를 전송하여 상기 마커서버에 상기 마커신호의 식별정보에 대한 확인을 요청하고,
상기 마커서버는, 미리 저장된 마커정보를 기초로 상기 증강현실 쇼핑앱으로부터 수신된 상기 마커신호의 식별정보와 비교 확인하여, 확인 결과로서 상기 마커신호의 식별정보에 대한 인식정보를 상기 증강현실 쇼핑앱으로 전송하고,
상기 증강현실 쇼핑앱은 상기 마커서버로부터 수신된 인식정보를 상기 마커서버로 전송함으로써 상기 마커서버로부터 증강현실의 작동을 요청하고,
(i) 시청자 스마트단말의 증강현실 쇼핑앱이 마커신호에 들어있는 방송채널을 식별할 수 있는 식별정보와, 상기 마커서버에 미리 저장된 마커신호의 식별정보를 이용하여 방송채널과 일치하는 상품주문 부가메뉴를 표시하는 단계를 더 포함하는 것을 특징으로 하는, TV방송에서 홈쇼핑 상품에 관한 증강현실 마커나 실물을 방송신호에 적용하고 스마트단말에서 이를 이용한 상품주문 구현방법.
(a) generating an augmented reality marker for a shopping product through a marker generator;
(b) receiving the markers generated by the marker generator from the marker generator, and storing the received markers by product and broadcast channel, respectively;
(c) transmitting a marker matched with the shopping item from the marker server to the marker signal generator;
(d) receiving a marker signal generated by the marker signal generator and synthesizing the marker signal with the shopping commodity image content to generate a final broadcasting image and transmitting the final broadcasting image to the viewer's TV through the broadcasting terminal;
(e) displaying a broadcast signal including a marker signal on a viewer's TV on a screen;
(f) photographing a screen of the TV using a camera of the smart terminal, the smart terminal of the viewer driving an augmented reality (AR) shopping app;
(g) displaying the product ordering submenu on the display module of the smart terminal by matching the marker signal with the image photographed by the camera;
(h) displaying a screen in an Internet shopping mall or the augmented reality shopping app that is the same as a shopping channel when a viewer selects a menu in the goods ordering submenu,
The step (c)
A shopping product marker prepared in accordance with the provided program schedule is transmitted from the marker server to the marker signal generator before broadcasting,
The step (d)
The marker signal generator is automatically controlled through the program automatic transmission device in accordance with the program schedule,
The step (e)
A display step in which the TV includes an analog signal receiving method, a digital signal receiving method, and terrestrial broadcasting, IPTV, cable broadcasting, satellite broadcasting, in-house broadcasting, and smart TV;
The step (g)
Wherein the marker signal includes identification information for identifying a shopping item and a broadcast channel,
The augmented reality shopping app recognizes identification information of the marker signal and transmits identification information of the recognized marker signal to the marker server to request confirmation of the identification information of the marker signal,
The marker server compares the identification information of the marker signal with identification information of the marker signal received from the augmented reality shopping app based on the marker information stored in advance and transmits identification information on the identification information of the marker signal to the augmented reality shopping app Lt; / RTI >
The augmented reality shopping app requests operation of the augmented reality from the marker server by transmitting the recognition information received from the marker server to the marker server,
(i) an item ordering unit that matches the broadcast channel using the identification information for identifying a broadcast channel contained in the marker signal of the augmented reality shopping app of the viewer smart terminal and the marker signal stored in advance in the marker server, Further comprising the step of displaying a menu, wherein the augmented reality marker or the real thing related to the home shopping product in the TV broadcast is applied to the broadcast signal, and the smart terminal implements the product order using the augmented reality marker or the real thing.
KR1020170059652A 2017-05-13 2017-05-13 Method and system for ordering goods using smart terminal with applying an augmented reality marker or real picture to the tv siginal on the tv broadcast KR101995914B1 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020170059652A KR101995914B1 (en) 2017-05-13 2017-05-13 Method and system for ordering goods using smart terminal with applying an augmented reality marker or real picture to the tv siginal on the tv broadcast
PCT/KR2018/005481 WO2018212521A1 (en) 2017-05-13 2018-05-14 Method and system for applying augmented reality marker or real photograph related to shopping product to broadcast signal on tv broadcast, and implementing product order using same in smart terminal

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020170059652A KR101995914B1 (en) 2017-05-13 2017-05-13 Method and system for ordering goods using smart terminal with applying an augmented reality marker or real picture to the tv siginal on the tv broadcast

Publications (2)

Publication Number Publication Date
KR20170059926A KR20170059926A (en) 2017-05-31
KR101995914B1 true KR101995914B1 (en) 2019-07-03

Family

ID=59052705

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020170059652A KR101995914B1 (en) 2017-05-13 2017-05-13 Method and system for ordering goods using smart terminal with applying an augmented reality marker or real picture to the tv siginal on the tv broadcast

Country Status (2)

Country Link
KR (1) KR101995914B1 (en)
WO (1) WO2018212521A1 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022025547A1 (en) * 2020-07-28 2022-02-03 주식회사 노크 Method, system, and non-transitory computer-readable recording medium for managing augmented reality interface for content being provided by digital signage
KR20220014235A (en) * 2020-07-28 2022-02-04 주식회사 노크 Method, system and non-transitory computer-readable recording medium for managing augmented reality interface related to contents provided on digital signage

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101973653B1 (en) * 2018-04-30 2019-04-29 주식회사 유니크유엑스 System And Method For Providing Contents On Augmented Reality
KR102300022B1 (en) * 2019-08-07 2021-09-09 주식회사 엘지유플러스 System and method for providing shopping information using augmented reality
RU2739262C1 (en) * 2020-04-05 2020-12-23 Эрвью.ТВ, Инк. Information presentation control method
CN111935495A (en) * 2020-08-13 2020-11-13 上海识装信息科技有限公司 AR technology-based live video commodity display method and system
KR102409865B1 (en) * 2020-10-20 2022-06-20 (주)브로틴 System for providing mixed reality content through smart device
CN114338897B (en) * 2021-12-16 2024-01-16 杭州逗酷软件科技有限公司 Method and device for sharing objects, electronic equipment and storage medium

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101716617B1 (en) * 2016-07-12 2017-03-14 케이티하이텔 주식회사 Method and system for providing augmented reality contents concerning homeshopping product of digital tv

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090002173A (en) * 2007-06-20 2009-01-09 (주)인투모바일 System and method for processing order
KR101314865B1 (en) * 2010-07-06 2013-10-04 김덕중 Method, additional service server and broadcasting system for providing augmented reality associated tv screen in mobile environment
KR20120119758A (en) * 2011-04-22 2012-10-31 유니웹스 주식회사 Apparatus for providing iptv broadcasting contents, user terminal and method for providing iptv broadcasting contents information
KR20140068332A (en) * 2012-11-27 2014-06-09 (주) 씨이랩 Menu board advertising service system using recognition of augmented reality marker and method thereof

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101716617B1 (en) * 2016-07-12 2017-03-14 케이티하이텔 주식회사 Method and system for providing augmented reality contents concerning homeshopping product of digital tv

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022025547A1 (en) * 2020-07-28 2022-02-03 주식회사 노크 Method, system, and non-transitory computer-readable recording medium for managing augmented reality interface for content being provided by digital signage
KR20220014235A (en) * 2020-07-28 2022-02-04 주식회사 노크 Method, system and non-transitory computer-readable recording medium for managing augmented reality interface related to contents provided on digital signage
KR102539212B1 (en) * 2020-07-28 2023-06-02 주식회사 노크 Method, system and non-transitory computer-readable recording medium for managing augmented reality interface related to contents provided on digital signage

Also Published As

Publication number Publication date
KR20170059926A (en) 2017-05-31
WO2018212521A1 (en) 2018-11-22

Similar Documents

Publication Publication Date Title
KR101995914B1 (en) Method and system for ordering goods using smart terminal with applying an augmented reality marker or real picture to the tv siginal on the tv broadcast
KR101895001B1 (en) Full duplex live broadcast commerce service platform based on smart phone
EP2656175B1 (en) Matrix code-based user interface
US8386339B2 (en) Ordering via dynamic matrix code generation
JP2006005897A (en) Terminal device, content distribution system, information output method, information output program
KR20020043625A (en) Broadcast using method, receiver, mobile terminal, and service providing device
KR101716617B1 (en) Method and system for providing augmented reality contents concerning homeshopping product of digital tv
CN106878383B (en) Video application system and method for digital audio-visual place
US10757483B2 (en) Method and apparatus for data tracking and presenting
CN106303601A (en) The playing method and device of multimedia file
KR100545988B1 (en) Mobile service system and method in connection with broadcasting
WO2017003219A1 (en) Commerce device and system linked to broadcast screen, and method therefor
KR101797425B1 (en) Method for providing VOD contents of digital TV and AR contents on smart device
KR101319478B1 (en) Apparatus and method for electronic commerce using broadcasting image
KR20150125627A (en) Method and computer program for providing contents related information, device for generating sound qr and system for managing sound qr
US20140282632A1 (en) Using audio data to identify and record video content
JPH09244567A (en) Guiding information device
KR20140147906A (en) Apparatus and method for downloading contents
JP3969364B2 (en) Mail order system, viewer network terminal and mail order method
KR20140018650A (en) The image information search system using smart device and method thereof
JP2017033441A (en) Digital content providing system
KR101412708B1 (en) System for hubing mobile using quick response code and management method therefor
JP2003046983A (en) Method and apparatus for providing information
JP6936296B2 (en) Broadcast information-linked information provision application program and its system
KR20190097961A (en) Apparatus and method for providing service of advertisement

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant