KR20140018650A - The image information search system using smart device and method thereof - Google Patents

The image information search system using smart device and method thereof Download PDF

Info

Publication number
KR20140018650A
KR20140018650A KR1020120085050A KR20120085050A KR20140018650A KR 20140018650 A KR20140018650 A KR 20140018650A KR 1020120085050 A KR1020120085050 A KR 1020120085050A KR 20120085050 A KR20120085050 A KR 20120085050A KR 20140018650 A KR20140018650 A KR 20140018650A
Authority
KR
South Korea
Prior art keywords
screen
image
information
smart device
server
Prior art date
Application number
KR1020120085050A
Other languages
Korean (ko)
Inventor
이서현
김건민
Original Assignee
이서현
김건민
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 이서현, 김건민 filed Critical 이서현
Priority to KR1020120085050A priority Critical patent/KR20140018650A/en
Publication of KR20140018650A publication Critical patent/KR20140018650A/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241—Advertisements
    • G06Q30/0251—Targeted advertisements
    • G06Q30/0255—Targeted advertisements based on user history
    • G06Q30/0256—User search
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/50—Business processes related to the communications industry
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting

Landscapes

  • Business, Economics & Management (AREA)
  • Engineering & Computer Science (AREA)
  • Strategic Management (AREA)
  • Physics & Mathematics (AREA)
  • Tourism & Hospitality (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Health & Medical Sciences (AREA)
  • Development Economics (AREA)
  • Finance (AREA)
  • Primary Health Care (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Resources & Organizations (AREA)
  • General Health & Medical Sciences (AREA)
  • Accounting & Taxation (AREA)
  • Game Theory and Decision Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Information Transfer Between Computers (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

The present invention relates to an image information searching system using a smart device and a method thereof. An application is installed in the smart device of a user. Various information on a TV screen is received through an image information server or via a TV platform provider server and the image information server. [Reference numerals] (AA) TV viewing; (BB) Display a desired image information screen; (CC) Execute a smart device application; (DD) Search TV screen information; (EE) Search screen image; (FF) Search screen image sound; (GG) Search TV platform provider; (HH) Manual scan; (II) Search result

Description

스마트 디바이스를 이용한 영상정보 검색시스템 및 그 방법{The image information search system using smart device and method thereof}Image information search system using smart device and method thereof {The image information search system using smart device and method}

본 발명은 사용자의 스마트 디바이스에 어플리케이션을 설치하고 TV 화면상에 나타나는 인물, 상품, 음악, 장소와 같은 TV 화면속의 다양한 정보를 TV 플랫폼 사업자 서버와 영상정보서버를 경유하여 또는 영상정보서버를 통해 전송받을 수 있고, 스마트 디바이스의 어플리케이션을 사용하여 사용자의 환경에 맞는 음향, 카메라, TV사업자 동기화 중에서 선택하여 쉽게 검색하는 방법을 제공할 수 있으며, 영상정보, 사용자 정보, 이벤트 정보에 대한 검증된 정보를 수집하여 DB 서버를 구축함으로써, DB 서버와 영상정보 서버를 경유하여 정확한 정보를 스마트 디바이스 전송할 수 있고, TV 화면의 시간순서에 따라 영상정보를 전송하기 위해 영상정보서버에서 타임라인을 이용하여 영상정보 파일을 만들어 사용자의 스마트 디바이스로 전송할 수 있으며, 채팅서버에 다른 사용자들 간의 채팅 기능을 부여함으로써, 하나의 영상을 여러 사람이 보고 있을 때 그 영상에 대해 서로가 이야기를 나누고 정보를 공유할 수 있고, 영화나 드라마 화면에 기업의 상품을 배치해 관객들의 무의식 속에 그 이미지를 자연스럽게 심는 간접광고를 통한 PPL(Product Placement) 마케팅 플랫폼으로 영상정보 검색시스템을 활용함으로써, PPL 광고주의 상품이나 브랜드 정보를 사용자의 스마트 디바이스로 전송하여 마케팅 효과를 높일 수 있으며, TV 화면에 매칭되는 상품, 브랜드를 마케팅 할 수 있는 기능으로 어플리케이션이 설치된 스마트 디바이스와 동시에 TV 플랫폼 사업자 서버에 전송하여 TV 화면에도 표시해 주는 이벤트 기능이 있는 스마트 디바이스를 이용한 영상정보 검색시스템 및 그 방법에 관한 기술이다.The present invention installs an application on the user's smart device and transmits various information on the TV screen such as people, goods, music, and places that appear on the TV screen through the TV platform service server and the video information server or through the video information server. It provides a method to easily search by selecting among sound, camera, and TV service provider's synchronization that fits the user's environment by using the application of the smart device, and provides the verified information about video information, user information, and event information. By collecting and constructing a DB server, accurate information can be sent to the smart device via the DB server and the video information server, and the video information server uses the timeline to transmit the video information according to the time sequence of the TV screen. You can create a file and send it to your smart device. By giving chat function between different users on the server, when multiple people are watching the same video, they can talk to each other and share information about the video. By using the image information search system as a PPL (Product Placement) marketing platform through indirect advertising, in which the image is naturally planted in the unconsciousness of the users, the marketing effect can be enhanced by transmitting the product or brand information of the PPL advertiser to the user's smart device. In order to market products and brands that match TV screens, the video information retrieval system and the method using smart devices with event functions that are displayed on the TV screen by transmitting them to the TV platform provider server at the same time as the smart device with the application installed. Technology.

종래의 온라인 쇼핑몰의 관리기술에 있어서는 고객이 직접 해당 쇼핑몰을 찾아서 접속하여야만 상품을 구입할 수 있도록 되어 있었다. 따라서 사용자 입장에서 볼 때 온라인 쇼핑몰의 상품을 구입하는데 그만큼 시간적 공간적으로 제약을 받게 되는 문제점이 있다.In the conventional management technology of the online shopping mall, a customer can directly purchase a product by finding and accessing the shopping mall. Therefore, from a user's point of view, there is a problem in that it is restricted in time and space to purchase a product of an online shopping mall.

또한, 종래 온라인 쇼핑몰을 이용하는 구매자들은 해당 온라인 쇼핑몰에서 정해놓은 가격에 따라 상품을 구매하고 있으나, 해당 온라인 쇼핑몰 또는 온라인 쇼핑몰에 입점한 판매자와 가격 및 수량 등을 흥정하여 원하는 조건에서 상품을 구매하고자하는 욕구가 생겨나고 있으나, 종래 온라인 쇼핑몰에서는 이러한 서비스를 제공해주지 못하고 있는 실정이다.In addition, buyers using conventional online shopping malls purchase products according to the price set in the online shopping mall, but want to purchase the goods under desired conditions by negotiating the price and quantity with the seller who entered the online shopping mall or online shopping mall. Desire has arisen, but the conventional online shopping mall is unable to provide such a service.

또한, 종래의 온라인 쇼핑몰의 관리기술에 있어서는 단순히 판매자의 정보만 제공되었다. 따라서 일반 사용자 입장에서 볼 때 상품의 품질이나 실질적인 인기 정도를 가늠하는데 어려움이 있다.In addition, in the conventional management technology of the online shopping mall, only the information of the seller is provided. Therefore, from the point of view of the general user, it is difficult to measure the quality of the product or the degree of actual popularity.

이에 따라, 인터넷 쇼핑몰은 다른 많은 인터넷 쇼핑몰과의 경쟁에서 우위를 점하기 위한 방안의 일부로서 자사쇼핑몰 또는 쇼핑몰 상품의 홍보 활동을 강화하고 있는데, 현재 널리 이용되고 있는 홍보 수단은 네이버(naver)나 다음(daum) 등의 포털사이트를 이용한 제휴 광고 및 배너 광고 등이 있다.Accordingly, the Internet shopping mall is strengthening the promotion of its own shopping malls or shopping mall products as part of its strategy to compete with many other online shopping malls. Currently, the most widely used means of promotion is naver or Daum. affiliate advertisements and banner advertisements using portal sites such as daum.

다양한 상품 정보로 구성된 블로그 꾸미기 과정을 살펴보면, 블로그 운용자는 각종 쇼핑몰에 게시된 상품을 이미지 파일로 저장하여 본인의 블로그에 붙여넣기 하거나, 또는 상술한 이미지 링크 버튼을 통해 목적하는 블로그를 꾸밀 수 있게 된다.Looking at the process of decorating a blog composed of various product information, the blog manager can save the products posted in various shopping malls as image files and paste them into their blogs, or decorate the desired blog through the image link button described above. .

그러나, 상품 이미지 파일을 붙여넣기 하는 방식으로 구성할 경우, 해당 상품에 대한 구체적인 정보가 부족하여 상품에 대한 의견 공유라는 목적을 달성하기에는 부족하였고, 해당 상품을 바로 구매하고자 할 경우에도 별도의 과정을 거쳐야 해당 상품을 판매하는 쇼핑몰로 진입할 수 있는 불편함이 있다.However, if it is configured by pasting the product image file, it is not enough to achieve the purpose of sharing opinions about the product due to the lack of specific information about the product, and even if you want to purchase the product immediately There is an inconvenience to enter the shopping mall that sells the corresponding products.

또한, 쇼핑몰을 돌아다니며 수집한 상품 정보를 자신의 블로그 컨텐츠로 사용하기 위하여 해당 정보를 별도 파일로 저장하고 이를 다시 블로그에 불러와 붙여넣기 해야 하는 등 여러 단계의 작업 거쳐야 비로소 쇼핑 정보를 위한 블로그를 구성할 수 있었다. 이에 따라, 쇼핑 블로그를 꾸미기 위한 작업이 불편하여 쇼핑 정보를 위한 블로그의 활성화를 저해하는 문제점이 있다.In addition, in order to use the product information collected while walking around the shopping mall as his blog content, it is necessary to save the information as a separate file and import and re-import it into the blog before completing the blog for shopping information. Could construct. Accordingly, there is a problem in that the work for decorating the shopping blog is inconvenient to inhibit the activation of the blog for shopping information.

또한 사용자의 스마트 디바이스에 어플리케이션을 설치하고 TV 화면상에 나타나는 인물, 상품, 음악, 장소와 같은 TV 화면속의 다양한 정보를 TV 플랫폼 사업자 서버와 영상정보서버를 경유하여 또는 영상정보서버를 통해 전송받을 수 있고, 스마트 디바이스의 어플리케이션을 사용하여 사용자의 환경에 맞는 음향, 카메라, TV사업자 동기화 중에서 선택하여 쉽게 검색하는 방법을 제공할 수 있는 시스템이 없는 실정이다.In addition, the application can be installed on the user's smart device, and various information on the TV screen such as people, goods, music, and places appearing on the TV screen can be transmitted through the TV platform service server and the video information server or through the video information server. In addition, there is no system that can provide a method of easily searching by selecting among sound, camera, and TV service provider synchronization according to the user's environment using an application of a smart device.

그러므로 사용자의 스마트 디바이스에 어플리케이션을 설치하고 TV 화면상에 나타나는 인물, 상품, 음악, 장소와 같은 TV 화면속의 다양한 정보를 TV 플랫폼 사업자 서버와 영상정보서버를 경유하여 또는 영상정보서버를 통해 전송받을 수 있고, 스마트 디바이스의 어플리케이션을 사용하여 사용자의 환경에 맞는 음향, 카메라, TV사업자 동기화 중에서 선택하여 쉽게 검색하는 방법을 제공할 수 있으며, 영상정보, 사용자 정보, 이벤트 정보에 대한 검증된 정보를 수집하여 DB 서버를 구축함으로써, DB 서버와 영상정보 서버를 경유하여 정확한 정보를 스마트 디바이스 전송할 수 있는 스마트 디바이스를 이용한 영상정보 검색시스템 및 그 방법의 개발이 절실히 요구되고 있는 실정이다.Therefore, the application can be installed on the user's smart device and various information on the TV screen such as people, goods, music, and places appearing on the TV screen can be transmitted through the TV platform service server and the video information server or through the video information server. In addition, it can provide a method of easily searching by selecting among the sound, camera, and TV service provider synchronization according to the user's environment by using the application of the smart device, and by collecting the verified information about the image information, the user information, and the event information By constructing a DB server, the development of an image information retrieval system and a method using a smart device capable of transmitting accurate information through a DB server and an image information server is urgently required.

따라서, 본 발명은 상기와 같은 문제점을 해결하기 위해 착안된 것으로서, 사용자의 스마트 디바이스에 어플리케이션을 설치하고 TV 화면상에 나타나는 인물, 상품, 음악, 장소와 같은 TV 화면속의 다양한 정보를 TV 플랫폼 사업자 서버와 영상정보서버를 경유하여 또는 영상정보서버를 통해 전송받을 수 있는 스마트 디바이스를 이용한 영상정보 검색시스템 및 그 방법을 제공하는 데 그 목적이 있다.Accordingly, the present invention has been conceived to solve the above problems, and installs an application on a user's smart device and displays various information on a TV screen such as a person, a product, a music, and a place appearing on a TV screen. And to provide a video information retrieval system and method using a smart device that can be received via the video information server or through the video information server.

본 발명의 목적은 스마트 디바이스의 어플리케이션을 사용하여 사용자의 환경에 맞는 음향, 카메라, TV사업자 동기화 중에서 선택하여 쉽게 검색하는 방법을 제공할 수 있는 스마트 디바이스를 이용한 영상정보 검색시스템 및 그 방법을 제공하는데 있다.An object of the present invention is to provide a video information retrieval system using a smart device and a method that can provide a method for easily searching by selecting among the sound, camera, TV provider synchronization according to the user's environment using the application of the smart device. have.

또한 본 발명의 다른 목적은 영상정보, 사용자 정보, 이벤트 정보에 대한 검증된 정보를 수집하여 DB 서버를 구축함으로써, DB 서버와 영상정보 서버를 경유하여 정확한 정보를 스마트 디바이스 전송할 수 있는 스마트 디바이스를 이용한 영상정보 검색시스템 및 그 방법을 제공하는데 있다.In addition, another object of the present invention is to build a DB server by collecting the verified information on the image information, user information, event information, using a smart device that can transmit accurate information through the DB server and the image information server smart device An image information retrieval system and method are provided.

또한 본 발명의 다른 목적은 TV 화면의 시간순서에 따라 영상정보를 전송하기 위해 영상정보서버에서 타임라인을 이용하여 영상정보 파일을 만들어 사용자의 스마트 디바이스로 전송할 수 있는 스마트 디바이스를 이용한 영상정보 검색시스템 및 그 방법을 제공하는데 있다.In addition, another object of the present invention is a video information retrieval system using a smart device that can create a video information file using a timeline in the video information server to transmit the video information according to the time sequence of the TV screen to the user's smart device And to provide a method.

또한 본 발명의 다른 목적은 채팅서버에 다른 사용자들 간의 채팅 기능을 부여함으로써, 하나의 영상을 여러 사람이 보고 있을 때 그 영상에 대해 서로가 이야기를 나누고 정보를 공유할 수 있는 스마트 디바이스를 이용한 영상정보 검색시스템 및 그 방법을 제공하는데 있다. In addition, another object of the present invention is to provide a chat function between different users in the chat server, when using a smart device that can talk to each other and share information when one person is watching the video An information retrieval system and method are provided.

또한 본 발명의 다른 목적은 영화나 드라마 화면에 기업의 상품을 배치해 관객들의 무의식 속에 그 이미지를 자연스럽게 심는 간접광고를 통한 PPL(Product Placement) 마케팅 플랫폼으로 영상정보 검색시스템을 활용함으로써, PPL 광고주의 상품이나 브랜드 정보를 사용자의 스마트 디바이스로 전송하여 마케팅 효과를 높일 수 있는 스마트 디바이스를 이용한 영상정보 검색시스템 및 그 방법을 제공하는데 있다.In addition, another object of the present invention is to use a video information retrieval system as a PPL (Product Placement) marketing platform through indirect advertising to place the company's products on the screen of the movie or drama and to plant the image in the unconsciousness of the audience, The present invention provides a video information retrieval system and method using a smart device that can increase marketing effects by transmitting product or brand information to a user's smart device.

또한 본 발명의 다른 목적은 TV 화면에 매칭되는 상품, 브랜드를 마케팅 할 수 있는 기능으로 어플리케이션이 설치된 스마트 디바이스와 동시에 TV 플랫폼 사업자 서버에 전송하여 TV 화면에도 표시해 주는 이벤트 기능이 있는 스마트 디바이스를 이용한 영상정보 검색시스템 및 그 방법을 제공하는데 있다.In addition, another object of the present invention is to market a product, brand matching on the TV screen with the smart device with the application is installed at the same time the smart device with the event to transmit to the TV platform operator server to display on the TV screen image using the smart device An information retrieval system and method are provided.

상기한 본 발명의 목적을 달성하기 위한 스마트 디바이스를 이용한 영상정보 검색시스템은 사용자가 사용하고 있는 TV Set Top Box의 고유번호를 스마트 디바이스에 설치된 어플리케이션과 동기화시키는 기능과, 사용자가 스마트 디바이스를 통해 현재 보고 있는 TV의 화면정보와 사용자정보를 전송받는 기능과, 영상정보서버로 사용자정보와 재생되는 영상의 시간정보를 전송하는 기능을 갖는 TV 플랫폼 사업자 서버와; 상기 TV 플랫폼 사업자 서버로부터 사용자정보와 재생되는 영상의 시간정보를 전송받는 기능을 갖는 영상정보서버와; 상기 영상정보서버로부터 재생되는 영상정보를 전송받는 기능과, 현재 보고 있는 TV의 화면정보와 사용자정보를 TV 플랫폼 사업자 서버로 전송하는 기능과, TV화면의 시간정보를 TV 플랫폼 사업자서버로부터 전송받아 TV 화면에 해당되는 정보가 표시되는 기능과, TV Set Top Box와 상호 인증하는 기능을 갖는 스마트 디바이스와; 상기 스마트 디바이스와 상호 인증하는 기능과, TV Set Top Box의 고유번호를 스마트 디바이스에 설치된 어플리케이션과 동기화시켜 TV화면의 시간정보를 TV 플랫폼 사업자서버로부터 전송받아 TV 화면에 해당되는 정보가 표시되게 하는 기능을 갖는 Set Top Box를 포함하는 TV; 을 포함함을 특징으로 한다. The image information retrieval system using the smart device to achieve the above object of the present invention has a function of synchronizing the unique number of the TV Set Top Box that the user is using with the application installed on the smart device, A TV platform operator server having a function of receiving the screen information and the user information of the TV being watched, and transmitting the user information and time information of the reproduced video to the video information server; An image information server having a function of receiving user information and time information of a reproduced image from the TV platform operator server; A function of receiving image information played back from the image information server, a function of transmitting screen information and user information of the currently viewed TV to a TV platform operator server, and receiving time information of a TV screen from a TV platform operator server. A smart device having a function of displaying information corresponding to a screen and a function of mutually authenticating with a TV set top box; A function of mutual authentication with the smart device and a function of synchronizing the unique number of the TV Set Top Box with an application installed on the smart device to receive the time information of the TV screen from the TV platform operator server so that information corresponding to the TV screen is displayed. TV including Set Top Box having; .

또한 상기한 본 발명의 목적을 달성하기 위한 스마트 디바이스를 이용한 영상정보 검색시스템은 TV 화면상에서 영상과 함께 나오는 음향을 입력하거나 또는 TV 화면상의 영상을 촬영하는 기능과, 상기 촬영한 영상 또는 화면 영상 음향을 영상정보서버로 전송하는 기능을 갖는 스마트 디바이스와; 상기 스마트 디바이스로부터 전송받은 촬영한 영상 또는 화면 영상 음향을 영상 또는 음향 패턴 분석알고리즘을 이용하여 분석한 후 해당하는 화면 정보를 스마트 디바이스로 전송하는 기능을 갖는 영상정보서버와; 상기 스마트 디바이스에서 영상과 함께 나오는 음향을 입력하게 하거나 또는 TV 화면상의 영상을 촬영하게 하는 TV; 을 포함함을 특징으로 한다. In addition, the image information retrieval system using a smart device for achieving the above object of the present invention is a function of inputting the sound coming out with the image on the TV screen or to take an image on the TV screen, and the captured image or screen image sound A smart device having a function of transmitting to a video information server; An image information server having a function of analyzing the captured image or screen image sound received from the smart device by using an image or sound pattern analysis algorithm and transmitting corresponding screen information to the smart device; A TV for inputting sound output from the smart device along with an image or capturing an image on a TV screen; .

상기 본 발명에 있어서, 상기 영상정보서버는 상기 TV 플랫폼 사업자서버로부터 TV 영상 시간정보를 수신하는 TV 영상시간 정보 수신부와, 상기 스마트 디바이스로부터 화면 영상 음향을 전송받고 전송하는 화면 영상 음향 송수신부와, TV 화면의 영상 음향을 입력 받으면 영상정보서버에 내장되어 있는 음향 패턴 분석 알고리즘을 통해 이미 분석된 원본 영상 음향과 입력된 영상 음향을 비교하여 현재 화면의 시간 정보를 추출하여 분석하는 화면 영상 음향 분석부와, 상기 영상정보서버로부터 화면 영상을 전송받고 전송하는 화면 영상 송수신부와, TV 화면의 영상을 촬영하면 영상정보서버에 내장되어 있는 영상 패턴 분석 알고리즘을 통해 이미 분석된 원본 영상 화면과 입력된 영상화면을 비교하여 현재 화면의 시간 정보를 추출하여 분석하는 화면 영상 분석부와, TV화면에 매칭되는 상품, 브랜드를 마케팅하며, 어플리케이션이 설치된 스마트 디바이스와 동시에 TV 플랫폼 사업자 서버에 이벤트를 전송하여 TV 화면에도 표시해 주는 이벤트 전송부를 포함함을 특징으로 한다.In the present invention, the video information server is a TV video time information receiving unit for receiving TV video time information from the TV platform operator server, a screen video sound transmitting and receiving unit for receiving and transmitting the screen video sound from the smart device; When the video sound of the TV screen is input, the screen video sound analysis unit compares the original video sound and the input video sound already analyzed by the sound pattern analysis algorithm built in the video information server to extract and analyze the time information of the current screen. A screen image transmission / reception unit configured to receive and transmit a screen image from the image information server, and an original image screen and an input image that have been analyzed through an image pattern analysis algorithm embedded in the image information server when the image of the TV screen is captured. Screen screen that compares screens and extracts and analyzes time information of the current screen. Characterized in that it comprises analyzing unit with, TV products that match the screen, and marketing brand, the smart device application is installed simultaneously with the TV platform operators to send events to the server sending events to display on the TV screen portion.

상기 본 발명에 있어서, 상기 스마트 디바이스와 통신하게 연결되어 있으며, TV를 보며 여러 사람들과 스마트 디바이스를 이용하여 이야기를 나누는 대화 내용을 수신하는 대화내용 수신부와, 상기 대화내용을 TV 플랫폼 사업자 서버에 전송하여 TV 화면에 표시할 수 있게 하는 대화내용 전송부와, 상기 대화내용을 저장하는 대화내용 저장부와, TV화면에 매칭되는 상품, 브랜드를 마케팅하며, 어플리케이션이 설치된 스마트 디바이스로 이벤트를 전송하는 이벤트 전송부를 포함하는 채팅서버; 을 더 포함함을 특징으로 한다.In the present invention, a communication content receiver connected to communicate with the smart device and receiving a conversation content while watching a TV using a smart device while watching a TV, and transmitting the conversation content to a TV platform operator server. A conversation content transmission unit for displaying on the TV screen, a conversation content storage unit for storing the conversation content, a product and a brand matching the TV screen, and an event for transmitting an event to a smart device where an application is installed Chat server including a transmission unit; Further comprising:

상기 본 발명에 있어서, 상기 TV 플랫폼 사업자 서버 및 영상정보서버와 연결되며, 의류, 액세서리, 잡화, 브랜드, 상품코드, 가격, 사이즈, 색깔과 같은 상품정보와, 장소, 시설 정보가 저장되어 있는 영상정보 DB와, 사용자의 주민등록번호, 주소, 전화번호, 취향, 인증번호, ID, 패스워드가 저장되어 있는 사용자 정보 DB와, 이벤트의 정보가 저장되어 있는 이벤트 정보 DB를 포함하는 DB 서버; 을 더 포함함을 특징으로 한다.In the present invention, the TV platform operator server and the image information server is connected, the image information, such as clothing, accessories, miscellaneous goods, brand, product code, price, size, color, location, facility information is stored A DB server including an information DB, a user information DB storing a user's social security number, an address, a phone number, a taste, an authentication number, an ID, a password, and an event information DB storing information of an event; Further comprising:

또한 상기한 본 발명의 목적을 달성하기 위한 스마트 디바이스를 이용한 영상정보 검색방법은 사용자가 TV를 통해 영상을 시청하는 단계와; 상기 TV 화면상에 원하는 영상정보가 표시되는 단계와; 상기 원하는 영상정보가 TV 화면상에 표시되면, 스마트 디바이스에 어플리케이션을 설치하고 실행하는 단계와; 상기 스마트 디바이스에서 TV 화면에 표시된 영상, 음향, 시간정보를 화면 영상 검색과, 화면영상 음향 검색과, TV 플랫폼 사업자 연동 검색 및 수동검색으로 구분하여 검색하는 단계와; 상기 화면 영상 검색과, 화면영상 음향 검색과, TV 플랫폼 사업자 연동 검색과, 수동검색의 결과가 스마트 디바이스의 화면상에 표시되는 단계; 을 포함함을 특징으로 한다.In addition, the image information retrieval method using a smart device to achieve the above object of the present invention comprises the steps of the user watching the image on the TV; Displaying desired image information on the TV screen; If the desired image information is displayed on a TV screen, installing and executing an application on a smart device; Retrieving the image, sound, and time information displayed on the TV screen into screen image search, screen image sound search, TV platform service provider search, and manual search in the smart device; Displaying results of the screen image search, screen image sound search, TV platform service provider search, and manual search on a screen of a smart device; .

상기 본 발명에 있어서, 상기 화면 영상 검색은 시청자의 스마트 디바이스에 장착된 카메라를 이용하여 TV 화면을 촬영하고, 상기 촬영된 화면을 분석하여 화면에 해당되는 정보를 스마트 디바이스에 표시해 주는데, TV 화면의 영상을 촬영하면 영상정보서버에 내장되어 있는 영상 패턴 분석 알고리즘을 통해 이미 분석된 원본 영상 화면과 입력된 영상화면을 비교하여 현재 화면의 시간 정보를 추출하는 것을 특징으로 한다.In the present invention, the screen image search to take a picture of the TV screen using a camera mounted on the viewer's smart device, and analyze the photographed screen to display the information corresponding to the screen on the smart device, When the image is taken, the time information of the current screen is extracted by comparing the input video screen with the original video screen which has already been analyzed through an image pattern analysis algorithm embedded in the video information server.

상기 본 발명에 있어서, 상기 화면 영상 음향 검색은 시청자의 스마트 디바이스의 마이크로폰을 이용하여 TV에서 나오는 소리를 분석하여 화면에 해당되는 정보를 스마트 디바이스에 표시해 주는데, TV 화면의 영상 음향을 입력 받으면 영상정보서버에 내장되어 있는 음향 패턴 분석 알고리즘을 통해 이미 분석된 원본 영상 음향과 입력된 영상 음향을 비교하여 현재 화면의 시간 정보를 추출하는 것을 특징으로 한다.In the present invention, the screen image sound search analyzes the sound from the TV using the microphone of the viewer's smart device and displays the information corresponding to the screen on the smart device. The time pattern of the current screen is extracted by comparing the original video sound and the input video sound that have been analyzed through the acoustic pattern analysis algorithm built in the server.

상기 본 발명에 있어서, 상기 TV 플랫폼 사업자 연동 검색은 TV 플랫폼 사업자 서버와 시청자 개인의 스마트 디바이스와 동기화시켜 TV 플랫폼 사업자의 서버에서 시간정보를 전송받아 화면에 해당되는 정보를 스마트 디바이스에 표시해 주는데, 상기 동기화는 사용자가 사용하고 있는 TV Set Top Box의 고유 넘버를 어플리케이션과 동기화시켜 TV 화면의 시간정보를 TV 플랫폼 사업자에게 받아 화면에 해당되는 정보를 스마트 디바이스에 표시해 주는 것을 특징으로 한다.In the present invention, the TV platform operator linked search is synchronized with the TV platform provider server and the viewer's personal smart device receives the time information from the server of the TV platform provider to display the information corresponding to the screen on the smart device, Synchronization is characterized by synchronizing the unique number of the TV Set Top Box that the user is using with the application and receiving the time information of the TV screen from the TV platform provider and displaying the information corresponding to the screen on the smart device.

상기 본 발명에 있어서, 상기 수동 검색은 IPTV 또는 Cable TV의 방송시간 보기 기능을 이용하여 개인의 스마트 디바이스에 설치된 어플리케이션에서 검색하여 정보를 제공받는 것을 특징으로 한다.In the present invention, the manual search is characterized in that the information is provided by searching in the application installed in the personal smart device using the broadcast time viewing function of the IPTV or Cable TV.

이상에서 설명한 바와 같이, 본 발명인 스마트 디바이스를 이용한 영상정보 검색시스템 및 그 방법은 다음과 같은 효과를 가진다.As described above, the image information retrieval system and method using the smart device of the present invention has the following effects.

첫째, 본 발명은 사용자의 스마트 디바이스에 어플리케이션을 설치하고 TV 화면상에 나타나는 인물, 상품, 음악, 장소와 같은 TV 화면속의 다양한 정보를 TV 플랫폼 사업자 서버와 영상정보서버를 경유하여 또는 영상정보서버를 통해 전송받을 수 있다.First, the present invention installs an application on a user's smart device and transmits various information on a TV screen such as a person, a product, music, and a place appearing on a TV screen through a TV platform service server and a video information server or a video information server. Can be sent through.

둘째, 본 발명은 스마트 디바이스의 어플리케이션을 사용하여 사용자의 환경에 맞는 음향, 카메라, TV사업자 동기화 중에서 선택하여 쉽게 검색하는 방법을 제공할 수 있다.Secondly, the present invention can provide a method for easily searching by selecting among a sound, a camera and a TV operator synchronization suitable for a user's environment using an application of a smart device.

셋째, 본 발명은 영상정보, 사용자 정보, 이벤트 정보에 대한 검증된 정보를 수집하여 DB 서버를 구축함으로써, DB 서버와 영상정보 서버를 경유하여 정확한 정보를 스마트 디바이스 전송할 수 있다.Third, the present invention collects verified information about image information, user information, and event information to build a DB server, thereby transmitting accurate information to the smart device via the DB server and the image information server.

넷째, 본 발명은 TV 화면의 시간순서에 따라 영상정보를 전송하기 위해 영상정보서버에서 타임라인을 이용하여 영상정보 파일을 만들어 사용자의 스마트 디바이스로 전송할 수 있다.Fourth, the present invention can create an image information file using a timeline in the image information server to transmit the image information according to the time sequence of the TV screen, and transmit the image information file to the user's smart device.

다섯째, 본 발명은 채팅서버에 다른 사용자들 간의 채팅 기능을 부여함으로써, 하나의 영상을 여러 사람이 보고 있을 때 그 영상에 대해 서로가 이야기를 나누고 정보를 공유할 수 있다. Fifth, the present invention provides a chat server with a chat function between different users, so that when a single video is viewed by several people, each other can talk about the video and share information.

여섯째, 본 발명은 영화나 드라마 화면에 기업의 상품을 배치해 관객들의 무의식 속에 그 이미지를 자연스럽게 심는 간접광고를 통한 PPL(Product Placement) 마케팅 플랫폼으로 영상정보 검색시스템을 활용함으로써, PPL 광고주의 상품이나 브랜드 정보를 사용자의 스마트 디바이스로 전송하여 마케팅 효과를 높일 수 있다.Sixth, the present invention utilizes a video information retrieval system as a PPL (Product Placement) marketing platform through indirect advertising that places the company's products on the screen of a movie or drama and planted the image naturally in the unconsciousness of the audience. Brand information can be sent to the user's smart device to enhance marketing effectiveness.

일곱째, 본 발명은 TV 화면에 매칭되는 상품, 브랜드를 마케팅 할 수 있는 기능으로 어플리케이션이 설치된 스마트 디바이스와 동시에 TV 플랫폼 사업자 서버에 전송하여 TV 화면에도 표시해 주는 이벤트 기능이 있다.Seventh, the present invention has an event function that can be displayed on the TV screen by transmitting to the TV platform operator server at the same time as the smart device installed the application as a function that can market the product, brand matching the TV screen.

도 1은 본 발명의 일실시예에 따른 스마트 디바이스를 이용하여 TV 플랫폼과 연동하여 검색하는 영상정보 검색시스템을 설명하기 위해 나타낸 도면.
도 2는 본 발명의 일실시예에 따른 스마트 디바이스를 이용하여 TV 화면의 영상과 함께 나오는 소리를 음향 패턴 알고리즘으로 분석한 다음 영상 음향을 검색하는 영상정보 검색시스템을 설명하기 위해 나타낸 도면.
도 3은 본 발명의 일실시예에 따른 스마트 디바이스를 이용하여 TV 화면에 나타나는 영상을 카메라로 촬영한 영상을 검색하는 영상정보 검색을 설명하기 위해 나타낸 도면.
도 4(a)는 본 발명의 일실시예에 따른 스마트 디바이스를 이용한 영상정보 검색시스템의 구성 중에서 영상정보서버의 구성을 구체적으로 나타낸 도면.
도 4(b)는 본 발명의 일실시예에 따른 스마트 디바이스를 이용한 영상정보 검색시스템의 구성 중에서 채팅서버의 구성을 구체적으로 나타낸 도면.
도 4(c)는 본 발명의 일실시예에 따른 스마트 디바이스를 이용한 영상정보 검색시스템의 구성 중에서 DB서버의 구성을 구체적으로 나타낸 도면.
도 5는 본 발명의 일실시예에 따른 스마트 디바이스를 이용하여 영상정보를 검색하는 흐름도.1 is a view showing an image information search system for searching in conjunction with a TV platform using a smart device according to an embodiment of the present invention.
2 is a view showing an image information retrieval system for retrieving image sound after analyzing a sound coming out with an image of a TV screen by using a smart device according to an embodiment of the present invention with an acoustic pattern algorithm.
3 is a view illustrating an image information search for searching for an image captured by a camera of an image displayed on a TV screen using a smart device according to an embodiment of the present invention.
Figure 4 (a) is a view showing in detail the configuration of the image information server of the configuration of the image information retrieval system using a smart device according to an embodiment of the present invention.
Figure 4 (b) is a view showing in detail the configuration of the chat server of the configuration of the image information search system using a smart device according to an embodiment of the present invention.
Figure 4 (c) is a view showing in detail the configuration of the DB server among the configuration of the image information search system using a smart device according to an embodiment of the present invention.
5 is a flow chart for searching for image information using a smart device according to an embodiment of the present invention.

이하 첨부된 도면과 함께 본 발명의 바람직한 실시 예를 살펴보면 다음과 같은데, 본 발명을 설명함에 있어서 관련된 공지기술 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명은 생략할 것이며, 후술되는 용어들은 본 발명에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있으므로, 그 정의는 본 발명인 스마트 디바이스를 이용한 영상정보 검색시스템 및 그 방법을 설명하는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다. Looking at the preferred embodiment of the present invention together with the accompanying drawings as follows, when it is determined that the detailed description of the known art or configuration related to the present invention may unnecessarily obscure the subject matter of the present invention The description will be omitted, and the following terms are terms defined in consideration of functions in the present invention and may vary according to intentions or customs of users and operators, and the definitions thereof are defined in the image information retrieval system using the smart device of the present invention. It should be made based on the contents throughout the specification to explain the method.

이하, 첨부된 도면을 참조하여 본 발명의 바람직한 실시예에 대해서 상세하게 설명한다.Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings.

도 1은 본 발명의 일실시예에 따른 스마트 디바이스를 이용하여 TV 플랫폼과 연동하여 검색하는 영상정보 검색시스템을 설명하기 위해 나타낸 도면이고, 도 2는 본 발명의 일실시예에 따른 스마트 디바이스를 이용하여 TV 화면의 영상과 함께 나오는 소리를 음향 패턴 알고리즘으로 분석한 다음 영상 음향을 검색하는 영상정보 검색시스템을 설명하기 위해 나타낸 도면이며, 도 3은 본 발명의 일실시예에 따른 스마트 디바이스를 이용하여 TV 화면에 나타나는 영상을 카메라로 촬영한 영상을 검색하는 영상정보 검색을 설명하기 위해 나타낸 도면이다. 또한 도 4(a)는 본 발명의 일실시예에 따른 스마트 디바이스를 이용한 영상정보 검색시스템의 구성 중에서 영상정보서버의 구성을 구체적으로 나타낸 도면이고, 도 4(b)는 본 발명의 일실시예에 따른 스마트 디바이스를 이용한 영상정보 검색시스템의 구성 중에서 채팅서버의 구성을 구체적으로 나타낸 도면이며, 도 4(c)는 본 발명의 일실시예에 따른 스마트 디바이스를 이용한 영상정보 검색시스템의 구성 중에서 DB서버의 구성을 구체적으로 나타낸 도면이다.1 is a view showing a video information search system for searching in conjunction with a TV platform using a smart device according to an embodiment of the present invention, Figure 2 using a smart device according to an embodiment of the present invention FIG. 3 is a view illustrating an image information retrieval system for analyzing a sound coming out with an image of a TV screen by a sound pattern algorithm and then retrieving image sound. FIG. 3 is a view illustrating a smart device according to an embodiment of the present invention. FIG. 1 is a diagram illustrating image information search for searching for an image captured by a camera on an image displayed on a TV screen. In addition, Figure 4 (a) is a view showing in detail the configuration of the image information server of the configuration of the image information search system using a smart device according to an embodiment of the present invention, Figure 4 (b) is an embodiment of the present invention FIG. 4 (c) is a view illustrating a configuration of a chat server in the configuration of a video information retrieval system using a smart device according to an embodiment of the present invention. FIG. It is a figure which shows the structure of a server concretely.

도 1 내지 도 4(c)에 도시한 바와 같이, 본 발명인 스마트 디바이스를 이용한 영상정보 검색시스템은 TV 플랫폼 사업자 서버(100), 영상정보서버(200), TV 영상시간 정보 수신부(210), 화면 영상 음향 송수신부(220), 화면 영상 음향 분석부(230), 화면 영상 송수신부(240), 화면 영상 분석부(250), 이벤트 전송부(260), 스마트 디바이스(300), TV(400), 채팅서버(500), 대화내용 수신부(510), 대화내용 송신부(520), 대화내용 저장부(530), 이벤트 전송부(540), DB서버(600), 영상정보 DB(610), 사용자 정보 DB(620), 이벤트 정보 DB(630) 등으로 구성된다.As shown in Figures 1 to 4 (c), the image information retrieval system using the smart device of the present invention is a TV platform operator server 100, image information server 200, TV image time information receiving unit 210, screen Image sound transmitting and receiving unit 220, screen image sound analyzing unit 230, screen image transmitting and receiving unit 240, screen image analysis unit 250, event transmitter 260, smart device 300, TV 400 , Chat server 500, conversation contents receiver 510, conversation contents transmitter 520, conversation contents storage 530, event transmitter 540, DB server 600, image information DB 610, user Information DB 620, event information DB 630, and the like.

상기 본 발명인 스마트 디바이스를 이용한 영상정보 검색시스템은 사용자가 사용하고 있는 TV Set Top Box의 고유번호를 스마트 디바이스에 설치된 어플리케이션과 동기화시키는 기능과, 사용자가 스마트 디바이스를 통해 현재 보고 있는 TV의 화면정보와 사용자정보를 전송받는 기능과, 영상정보서버로 사용자정보와 재생되는 영상의 시간정보를 전송하는 기능을 갖는 TV 플랫폼 사업자 서버(100)와; 상기 TV 플랫폼 사업자 서버로부터 사용자정보와 재생되는 영상의 시간정보를 전송받는 기능을 갖는 영상정보서버(200)와; 상기 영상정보서버로부터 재생되는 영상정보를 전송받는 기능과, 현재 보고 있는 TV의 화면정보와 사용자정보를 TV 플랫폼 사업자 서버로 전송하는 기능과, TV화면의 시간정보를 TV 플랫폼 사업자서버로부터 전송받아 TV 화면에 해당되는 정보가 표시되는 기능과, TV Set Top Box와 상호 인증하는 기능을 갖는 스마트 디바이스(300)와; 상기 스마트 디바이스와 상호 인증하는 기능과, TV Set Top Box의 고유번호를 스마트 디바이스에 설치된 어플리케이션과 동기화시켜 TV화면의 시간정보를 TV 플랫폼 사업자서버로부터 전송받아 TV 화면에 해당되는 정보가 표시되게 하는 기능을 갖는 Set Top Box를 포함하는 TV(400); 을 구비한다. The image information retrieval system using the smart device of the present invention has a function of synchronizing the unique number of the TV Set Top Box that the user is using with the application installed in the smart device, and the screen information of the TV currently viewed by the user through the smart device. A TV platform operator server 100 having a function of receiving user information and a function of transmitting user information and time information of a reproduced video to a video information server; An image information server 200 having a function of receiving user information and time information of a reproduced image from the TV platform operator server; A function of receiving image information played back from the image information server, a function of transmitting screen information and user information of the currently viewed TV to a TV platform operator server, and receiving time information of a TV screen from a TV platform operator server. A smart device 300 having a function of displaying information corresponding to a screen and a function of mutually authenticating with a TV set top box; A function of mutual authentication with the smart device and a function of synchronizing the unique number of the TV Set Top Box with an application installed on the smart device to receive the time information of the TV screen from the TV platform operator server so that information corresponding to the TV screen is displayed. TV 400 including a Set Top Box having a; Respectively.

또한 본 발명인 스마트 디바이스를 이용한 영상정보 검색시스템은 TV 화면상에서 영상과 함께 나오는 음향을 입력하거나 또는 TV 화면상의 영상을 촬영하는 기능과, 상기 촬영한 영상 또는 화면 영상 음향을 영상정보서버로 전송하는 기능을 갖는 스마트 디바이스(300)와; 상기 스마트 디바이스로부터 전송받은 촬영한 영상 또는 화면 영상 음향을 영상 또는 음향 패턴 분석알고리즘을 이용하여 분석한 후 해당하는 화면 정보를 스마트 디바이스로 전송하는 기능을 갖는 영상정보서버(200)와; 상기 스마트 디바이스에서 영상과 함께 나오는 음향을 입력하게 하거나 또는 TV 화면상의 영상을 촬영하게 하는 TV(400); 을 구비한다. In addition, the image information retrieval system using the smart device of the present invention is a function for inputting the sound that comes with the image on the TV screen or to shoot the image on the TV screen, and the function of transmitting the captured image or screen image sound to the image information server Smart device 300 and having; An image information server 200 having a function of analyzing the captured image or screen image sound received from the smart device using an image or sound pattern analysis algorithm and transmitting the corresponding screen information to the smart device; A TV (400) for inputting sound coming from the smart device together with an image or capturing an image on a TV screen; Respectively.

상기 본 발명인 스마트 디바이스를 이용한 영상정보 검색시스템을 구성하는 기술적 수단들의 기능을 설명하면 다음과 같다.Referring to the functions of the technical means constituting the image information retrieval system using the smart device of the present invention as follows.

상기 TV 플랫폼 사업자 서버(100)는 사용자가 사용하고 있는 TV Set Top Box의 고유번호를 스마트 디바이스에 설치된 어플리케이션과 동기화시키는 기능과, 사용자가 스마트 디바이스를 통해 현재 보고 있는 TV의 화면정보와 사용자정보를 전송받는 기능과, 영상정보서버로 사용자정보와 재생되는 영상의 시간정보를 전송하는 기능을 갖는다. 여기서, 상기 TV 플랫폼은 스마트TV, 디지털TV, IPTV 플랫폼에만 국한되는 것이 아니고, 동영상 플레이가 될 수 있는 플랫폼은 모두 사용 가능할 것이다. The TV platform operator server 100 synchronizes the unique number of the TV Set Top Box that the user is using with the application installed on the smart device, and displays the screen information and user information of the TV currently viewed by the user through the smart device. And a function of transmitting user information and time information of a reproduced video to a video information server. Here, the TV platform is not limited to smart TVs, digital TVs, and IPTV platforms, and any platform capable of playing video may be used.

상기 영상정보서버(200)는 상기 TV 플랫폼 사업자 서버로부터 사용자정보와 재생되는 영상의 시간정보를 전송받는 기능을 갖는다. 또한 상기 영상정보서버(200)는 상기 스마트 디바이스로부터 전송받은 촬영한 영상 또는 화면 영상 음향을 영상 또는 음향 패턴 분석알고리즘을 이용하여 분석한 후 해당하는 화면 정보를 스마트 디바이스로 전송하는 기능을 갖는 것이다.The video information server 200 has a function of receiving user information and time information of a reproduced video from the TV platform provider server. In addition, the image information server 200 has a function of analyzing the captured image or screen image sound received from the smart device using an image or sound pattern analysis algorithm and then transmits the corresponding screen information to the smart device.

상기 스마트 디바이스(300)는 상기 영상정보서버로부터 재생되는 영상정보를 전송받는 기능과, 현재 보고 있는 TV의 화면정보와 사용자정보를 TV 플랫폼 사업자 서버로 전송하는 기능과, TV화면의 시간정보를 TV 플랫폼 사업자서버로부터 전송받아 TV 화면에 해당되는 정보가 표시되는 기능과, TV Set Top Box와 상호 인증하는 기능을 갖는다. 또한 상기 스마트 디바이스(300)는 TV 화면상에서 영상과 함께 나오는 음향을 입력하거나 또는 TV 화면상의 영상을 촬영하는 기능과, 상기 촬영한 영상 또는 화면 영상 음향을 영상정보서버로 전송하는 기능을 갖는 것이다. 여기서, 상기 스마트 디바이스(300)는 휴대폰과 같은 Mobile 기기인 것이다The smart device 300 has a function of receiving image information played back from the image information server, a function of transmitting screen information and user information of a currently viewed TV to a TV platform operator server, and time information of a TV screen. It receives the information from the platform operator server and displays the information on the TV screen, and has the function of mutual authentication with the TV Set Top Box. In addition, the smart device 300 has a function of inputting a sound that comes with an image on a TV screen or capturing an image on a TV screen, and transmitting the captured image or screen image sound to an image information server. Here, the smart device 300 is a mobile device such as a mobile phone.

상기 TV(400)는 상기 스마트 디바이스와 상호 인증하는 기능과, TV Set Top Box의 고유번호를 스마트 디바이스에 설치된 어플리케이션과 동기화시켜 TV화면의 시간정보를 TV 플랫폼 사업자서버로부터 전송받아 TV 화면에 해당되는 정보가 표시되게 하는 기능을 갖는 Set Top Box를 포함한다. 또한 상기 TV(400)는 상기 스마트 디바이스에서 영상과 함께 나오는 음향을 입력하게 하거나 또는 TV 화면상의 영상을 촬영하게 하는 것이다.The TV 400 is capable of mutually authenticating with the smart device and synchronizing the unique number of the TV Set Top Box with the application installed in the smart device to receive the time information of the TV screen from the TV platform operator server, which corresponds to the TV screen. Includes a Set Top Box with the ability to display information. In addition, the TV 400 allows the smart device to input a sound that comes with an image or to capture an image on a TV screen.

상술한 바와 같은, 상기 영상정보서버(200)는 상기 TV 플랫폼 사업자서버로부터 TV 영상 시간정보를 수신하는 TV 영상시간 정보 수신부(210)와, 상기 스마트 디바이스로부터 화면 영상 음향을 전송받고 전송하는 화면 영상 음향 송수신부(220)와, TV 화면의 영상 음향을 입력 받으면 영상정보서버에 내장되어 있는 음향 패턴 분석 알고리즘을 통해 이미 분석된 원본 영상 음향과 입력된 영상 음향을 비교하여 현재 화면의 시간 정보를 추출하여 분석하는 화면 영상 음향 분석부(230)와, 상기 영상정보서버로부터 화면 영상을 전송받고 전송하는 화면 영상 송수신부(240)와, TV 화면의 영상을 촬영하면 영상정보서버에 내장되어 있는 영상 패턴 분석 알고리즘을 통해 이미 분석된 원본 영상 화면과 입력된 영상화면을 비교하여 현재 화면의 시간 정보를 추출하여 분석하는 화면 영상 분석부(250)와, TV화면에 매칭되는 상품, 브랜드를 마케팅하며, 어플리케이션이 설치된 스마트 디바이스와 동시에 TV 플랫폼 사업자 서버에 이벤트를 전송하여 TV 화면에도 표시해 주는 이벤트 전송부(260)를 포함하는 것이다. 상기 TV 화면의 영상정보는 타임라인을 이용한 영상정보파일과 각각의 정보 검색 방법에 따라 검출되는 시간정보를 동기화시켜 화면에 해당되는 정보를 사용자의 스마트 디바이스에 표시해 주는 것이다. As described above, the image information server 200 is a TV image time information receiver 210 for receiving TV image time information from the TV platform operator server, and a screen image for receiving and transmitting screen image sound from the smart device. When the audio transmission and reception unit 220 and the image sound of the TV screen is input, the time information of the current screen is extracted by comparing the original image sound and the input image sound that have been analyzed through the acoustic pattern analysis algorithm built in the image information server. The screen image sound analysis unit 230 for analyzing the image, the screen image transmission / reception unit 240 for receiving and transmitting the screen image from the image information server, and the image pattern embedded in the image information server when the image of the TV screen is taken. The analysis algorithm extracts the time information of the current screen by comparing the original video screen and the input video screen. The screen image analysis unit 250 and the event transmission unit 260 for marketing the goods and brands matching the TV screen, and transmits the event to the TV platform operator server at the same time as the smart device with the application is displayed on the TV screen It is to include. The image information of the TV screen synchronizes the image information file using the timeline with the time information detected according to each information retrieval method, and displays information corresponding to the screen on the user's smart device.

또한, 채팅서버(500)는 상기 스마트 디바이스(300)와 통신하게 연결되어 있으며, TV를 보며 여러 사람들과 스마트 디바이스를 이용하여 이야기를 나누는 대화 내용을 수신하는 대화내용 수신부(510)와, 상기 대화내용을 TV 플랫폼 사업자 서버에 전송하여 TV 화면에 표시할 수 있게 하는 대화내용 전송부(520)와, 상기 대화내용을 저장하는 대화내용 저장부(530)와, TV화면에 매칭되는 상품, 브랜드를 마케팅하며, 어플리케이션이 설치된 스마트 디바이스로 이벤트를 전송하는 이벤트 전송부(540)를 포함하는 것이다.In addition, the chat server 500 is connected to communicate with the smart device 300, the conversation content receiving unit 510 for receiving a conversation content to watch the TV and talk with a number of people using the smart device, and the conversation The conversation contents transmission unit 520 for transmitting the contents to the TV platform operator server for display on the TV screen, the conversation contents storage unit 530 for storing the conversation contents, and a product and a brand matching the TV screen. Marketing, and includes an event transmitter 540 for transmitting the event to the smart device installed.

또한, DB 서버(600)는 상기 TV 플랫폼 사업자 서버(100) 및 영상정보서버(200)와 연결되며, 의류, 액세서리, 잡화, 브랜드, 상품코드, 가격, 사이즈, 색깔과 같은 상품정보와, 장소, 시설 정보가 저장되어 있는 영상정보 DB(610)와, 사용자의 주민등록번호, 주소, 전화번호, 취향, 인증번호, ID, 패스워드가 저장되어 있는 사용자 정보 DB(620)와, 이벤트의 정보가 저장되어 있는 이벤트 정보 DB(630)를 포함하는 것이다.In addition, the DB server 600 is connected to the TV platform operator server 100 and the image information server 200, and product information such as clothing, accessories, miscellaneous goods, brands, product codes, prices, sizes, colors, and places. , The image information DB 610 in which the facility information is stored, the user information DB 620 in which the user's social security number, address, telephone number, taste, authentication number, ID, and password are stored, and the information of the event is stored. It is to include the event information DB (630).

도 5는 본 발명의 일실시예에 따른 스마트 디바이스를 이용하여 영상정보를 검색하는 흐름도이다.5 is a flowchart of searching for image information using a smart device according to an embodiment of the present invention.

도 5에 도시한 바와 같이, 본 발명의 일실시예에 따른 스마트 디바이스를 이용하여 영상정보를 검색하는 흐름을 살펴보면 다음과 같다.As shown in FIG. 5, the flow of searching for image information using a smart device according to an embodiment of the present invention will be described below.

첫 번째로는, 스마트 디바이스를 이용한 영상정보 검색방법은 사용자가 TV를 통해 영상을 시청하는 단계이다.First, an image information retrieval method using a smart device is a step in which a user views an image through a TV.

두 번째로는, 상기 TV 화면상에 원하는 영상정보가 표시되는 단계이다.Secondly, desired image information is displayed on the TV screen.

세 번째로는, 상기 원하는 영상정보가 TV 화면상에 표시되면, 스마트 디바이스에 어플리케이션을 설치하고 실행하는 단계이다.Third, when the desired video information is displayed on the TV screen, the application is installed and executed on the smart device.

네 번째로는, 상기 스마트 디바이스에서 TV 화면에 표시된 영상, 음향, 시간정보를 화면 영상 검색과, 화면영상 음향 검색과, TV 플랫폼 사업자 연동 검색 및 수동검색으로 구분하여 검색하는 단계이다.Fourth, the smart device divides the image, sound, and time information displayed on the TV screen into a screen image search, a screen image sound search, a TV platform service provider search, and a manual search.

여기서, 상기 화면 영상 검색은 시청자의 스마트 디바이스에 장착된 카메라를 이용하여 TV 화면을 촬영하고, 상기 촬영된 화면을 분석하여 화면에 해당되는 정보를 스마트 디바이스에 표시해 주는데, TV 화면의 영상을 촬영하면 영상정보서버에 내장되어 있는 영상 패턴 분석 알고리즘을 통해 이미 분석된 원본 영상 화면과 입력된 영상화면을 비교하여 현재 화면의 시간 정보를 추출하는 것이며, 상기 화면영상 음향 검색은 시청자의 스마트 디바이스의 마이크로폰을 이용하여 TV에서 나오는 소리를 분석하여 화면에 해당되는 정보를 스마트 디바이스에 표시해 주는데, TV 화면의 영상 음향을 입력 받으면 영상정보서버에 내장되어 있는 음향 패턴 분석 알고리즘을 통해 이미 분석된 원본 영상 음향과 입력된 영상 음향을 비교하여 현재 화면의 시간 정보를 추출하는 것이다.Here, the screen image search takes a picture of the TV screen using a camera mounted on the smart device of the viewer, and analyzes the captured screen and displays information corresponding to the screen on the smart device. The image information analysis algorithm built in the image information server compares the original image screen and the input image screen, which is already analyzed, and extracts time information of the current screen. The screen image sound search is performed by using the microphone of the viewer's smart device. It analyzes the sound from the TV and displays the information on the screen on the smart device. When the video sound of the TV screen is received, the original video sound and input already analyzed by the sound pattern analysis algorithm built in the video information server Time information of the current screen by comparing the recorded video sound To extract.

또한 상기 TV 플랫폼 사업자 연동 검색은 TV 플랫폼 사업자 서버와 시청자 개인의 스마트 디바이스와 동기화시켜 TV 플랫폼 사업자의 서버에서 시간정보를 전송받아 화면에 해당되는 정보를 스마트 디바이스에 표시해 주는데, 상기 동기화는 사용자가 사용하고 있는 TV Set Top Box의 고유 넘버를 어플리케이션과 동기화시켜 TV 화면의 시간정보를 TV 플랫폼 사업자에게 받아 화면에 해당되는 정보를 스마트 디바이스에 표시해 주는 것이며, 상기 수동 검색은 IPTV 또는 Cable TV의 방송시간 보기 기능을 이용하여 개인의 스마트 디바이스에 설치된 어플리케이션에서 검색하여 정보를 제공받는 것이다.In addition, the TV platform provider linked search is synchronized with the TV platform provider server and the viewer's personal smart device receives the time information from the server of the TV platform provider and displays the information on the screen on the smart device, the synchronization is used by the user By synchronizing the unique number of the TV Set Top Box with the application, the TV platform operator receives the TV screen time information and displays the information on the screen on the smart device. The manual search shows the broadcast time of the IPTV or cable TV. By using the function, the information provided by searching in the application installed in the personal smart device is provided.

다섯 번째로는, 상기 화면 영상 검색과, 화면영상 음향 검색과, TV 플랫폼 사업자 연동 검색과, 수동검색의 결과가 스마트 디바이스의 화면상에 표시되는 단계이다.Fifth, the results of the screen image search, screen image sound search, TV platform service provider search, and manual search are displayed on the screen of the smart device.

본 발명은 상기 실시예에 한정되지 않고, 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 다양하게 수정 및 변경 실시할 수 있음은 이 기술 분야에서 통상의 지식을 가진 자라면 누구나 이해할 수 있을 것이다. It will be appreciated by those skilled in the art that the present invention is not limited to the above embodiments, and that various modifications and changes can be made without departing from the spirit of the present invention.

100 : TV 플랫폼 사업자 서버 200 : 영상정보서버
210 : TV 영상시간 정보 수신부 220 : 화면 영상 음향 송수신부
230 : 화면 영상 음향 분석부 240 : 화면 영상 송수신부
250 : 화면 영상 분석부 260 : 이벤트 전송부
300 : 스마트 디바이스 400 : TV
500 : 채팅서버 510 : 대화내용 수신부
520 : 대화내용 송신부 530 : 대화내용 저장부
540 : 이벤트 전송부 600 : DB서버
610 : 영상정보 DB 620 : 사용자 정보 DB
630 : 이벤트 정보 DB100: TV platform provider server 200: video information server
210: TV image time information receiving unit 220: Screen image sound transmitting and receiving unit
230: screen image sound analysis unit 240: screen image transmission and reception unit
250: screen image analyzer 260: event transmitter
300: smart device 400: TV
500: chat server 510: conversation contents receiver
520: conversation contents transmission unit 530: conversation contents storage unit
540: event transmitter 600: DB server
610: Image information DB 620: User information DB
630: event information DB

Claims (10)

스마트 디바이스를 이용한 영상정보 검색시스템에 있어서,
사용자가 사용하고 있는 TV Set Top Box의 고유번호를 스마트 디바이스에 설치된 어플리케이션과 동기화시키는 기능과, 사용자가 스마트 디바이스를 통해 현재 보고 있는 TV의 화면정보와 사용자정보를 전송받는 기능과, 영상정보서버로 사용자정보와 재생되는 영상의 시간정보를 전송하는 기능을 갖는 TV 플랫폼 사업자 서버와;
상기 TV 플랫폼 사업자 서버로부터 사용자정보와 재생되는 영상의 시간정보를 전송받는 기능을 갖는 영상정보서버와;
상기 영상정보서버로부터 재생되는 영상정보를 전송받는 기능과, 현재 보고 있는 TV의 화면정보와 사용자정보를 TV 플랫폼 사업자 서버로 전송하는 기능과, TV화면의 시간정보를 TV 플랫폼 사업자서버로부터 전송받아 TV 화면에 해당되는 정보가 표시되는 기능과, TV Set Top Box와 상호 인증하는 기능을 갖는 스마트 디바이스와;
상기 스마트 디바이스와 상호 인증하는 기능과, TV Set Top Box의 고유번호를 스마트 디바이스에 설치된 어플리케이션과 동기화시켜 TV화면의 시간정보를 TV 플랫폼 사업자서버로부터 전송받아 TV 화면에 해당되는 정보가 표시되게 하는 기능을 갖는 Set Top Box를 포함하는 TV; 을 포함함을 특징으로 하는 스마트 디바이스를 이용한 영상정보 검색시스템. In the image information retrieval system using a smart device,
The function of synchronizing the unique number of the TV Set Top Box that the user is using with the application installed on the smart device, receiving the screen information and user information of the TV currently being watched through the smart device, and the video information server. A TV platform operator server having a function of transmitting user information and time information of a reproduced video;
An image information server having a function of receiving user information and time information of a reproduced image from the TV platform operator server;
A function of receiving image information played back from the image information server, a function of transmitting screen information and user information of the currently viewed TV to a TV platform operator server, and receiving time information of a TV screen from a TV platform operator server. A smart device having a function of displaying information corresponding to a screen and a function of mutually authenticating with a TV set top box;
A function of mutual authentication with the smart device and a function of synchronizing the unique number of the TV Set Top Box with an application installed on the smart device to receive the time information of the TV screen from the TV platform operator server so that information corresponding to the TV screen is displayed. TV including Set Top Box having; Image information retrieval system using a smart device comprising a. 스마트 디바이스를 이용한 영상정보 검색시스템에 있어서,
TV 화면상에서 영상과 함께 나오는 음향을 입력하거나 또는 TV 화면상의 영상을 촬영하는 기능과, 상기 촬영한 영상 또는 화면 영상 음향을 영상정보서버로 전송하는 기능을 갖는 스마트 디바이스와;
상기 스마트 디바이스로부터 전송받은 촬영한 영상 또는 화면 영상 음향을 영상 또는 음향 패턴 분석알고리즘을 이용하여 분석한 후 해당하는 화면 정보를 스마트 디바이스로 전송하는 기능을 갖는 영상정보서버와;
상기 스마트 디바이스에서 영상과 함께 나오는 음향을 입력하게 하거나 또는 TV 화면상의 영상을 촬영하게 하는 TV; 을 포함함을 특징으로 하는 스마트 디바이스를 이용한 영상정보 검색시스템. In the image information retrieval system using a smart device,
A smart device having a function of inputting a sound outputted with an image on a TV screen or capturing an image on a TV screen, and transmitting the captured image or screen image sound to an image information server;
An image information server having a function of analyzing the captured image or screen image sound received from the smart device by using an image or sound pattern analysis algorithm and transmitting corresponding screen information to the smart device;
A TV for inputting sound output from the smart device along with an image or capturing an image on a TV screen; Image information retrieval system using a smart device comprising a. 제 1항 또는 제 2항에 있어서,
상기 영상정보서버는 상기 TV 플랫폼 사업자서버로부터 TV 영상 시간정보를 수신하는 TV 영상시간 정보 수신부와, 상기 스마트 디바이스로부터 화면 영상 음향을 전송받고 전송하는 화면 영상 음향 송수신부와, TV 화면의 영상 음향을 입력 받으면 영상정보서버에 내장되어 있는 음향 패턴 분석 알고리즘을 통해 이미 분석된 원본 영상 음향과 입력된 영상 음향을 비교하여 현재 화면의 시간 정보를 추출하여 분석하는 화면 영상 음향 분석부와, 상기 영상정보서버로부터 화면 영상을 전송받고 전송하는 화면 영상 송수신부와, TV 화면의 영상을 촬영하면 영상정보서버에 내장되어 있는 영상 패턴 분석 알고리즘을 통해 이미 분석된 원본 영상 화면과 입력된 영상화면을 비교하여 현재 화면의 시간 정보를 추출하여 분석하는 화면 영상 분석부와, TV화면에 매칭되는 상품, 브랜드를 마케팅하며, 어플리케이션이 설치된 스마트 디바이스와 동시에 TV 플랫폼 사업자 서버에 이벤트를 전송하여 TV 화면에도 표시해 주는 이벤트 전송부를 포함함을 특징으로 하는 스마트 디바이스를 이용한 영상정보 검색시스템. 3. The method according to claim 1 or 2,
The video information server may include a TV video time information receiver for receiving TV video time information from the TV platform operator server, a screen video audio transmitter / receiver for receiving and transmitting screen video sound from the smart device, and a video sound of a TV screen. A screen image sound analysis unit which compares the original image sound and the input image sound, which are already analyzed through the sound pattern analysis algorithm built in the video information server, and extracts and analyzes time information of the current screen when the input is received; Screen image transmission and reception unit that receives and transmits the screen image from the screen, and when the image of the TV screen is taken by comparing the original image screen and the input image screen that has already been analyzed by the image pattern analysis algorithm built in the video information server Screen image analyzer to extract and analyze the time information of the A video information retrieval system using a smart device for marketing a product, a brand, and an event transmitter to transmit an event to a TV platform operator server and display it on a TV screen at the same time as a smart device on which an application is installed. 제 1항 또는 제 2항에 있어서,
상기 스마트 디바이스와 통신하게 연결되어 있으며, TV를 보며 여러 사람들과 스마트 디바이스를 이용하여 이야기를 나누는 대화 내용을 수신하는 대화내용 수신부와, 상기 대화내용을 TV 플랫폼 사업자 서버에 전송하여 TV 화면에 표시할 수 있게 하는 대화내용 전송부와, 상기 대화내용을 저장하는 대화내용 저장부와, TV화면에 매칭되는 상품, 브랜드를 마케팅하며, 어플리케이션이 설치된 스마트 디바이스로 이벤트를 전송하는 이벤트 전송부를 포함하는 채팅서버; 을 더 포함함을 특징으로 하는 스마트 디바이스를 이용한 영상정보 검색시스템. 3. The method according to claim 1 or 2,
A conversation content receiver connected to communicate with the smart device and receiving a conversation content using a smart device while watching a TV, and transmitting the conversation content to a TV platform operator server for display on a TV screen. Chat server including a conversation content transmission unit, a conversation content storage unit for storing the conversation content, an event transmitter for marketing the goods, brands matching the TV screen, and sending the event to the smart device installed application ; Image information retrieval system using a smart device, characterized in that it further comprises. 제 1항 또는 제 2항에 있어서,
상기 TV 플랫폼 사업자 서버 및 영상정보서버와 연결되며, 의류, 액세서리, 잡화, 브랜드, 상품코드, 가격, 사이즈, 색깔과 같은 상품정보와, 장소, 시설 정보가 저장되어 있는 영상정보 DB와, 사용자의 주민등록번호, 주소, 전화번호, 취향, 인증번호, ID, 패스워드가 저장되어 있는 사용자 정보 DB와, 이벤트의 정보가 저장되어 있는 이벤트 정보 DB를 포함하는 DB 서버; 을 더 포함함을 특징으로 하는 스마트 디바이스를 이용한 영상정보 검색시스템. 3. The method according to claim 1 or 2,
It is connected to the TV platform service server and the image information server, and a product information DB, such as clothing, accessories, miscellaneous goods, brand, product code, price, size, color, and the like, the location and facility information is stored, A DB server including a user information DB storing a social security number, an address, a phone number, a taste, an authentication number, an ID, a password, and an event information DB storing information of an event; Image information retrieval system using a smart device, characterized in that it further comprises. 스마트 디바이스를 이용한 영상정보 검색방법에 있어서,
사용자가 TV를 통해 영상을 시청하는 단계와;
상기 TV 화면상에 원하는 영상정보가 표시되는 단계와;
상기 원하는 영상정보가 TV 화면상에 표시되면, 스마트 디바이스에 어플리케이션을 설치하고 실행하는 단계와;
상기 스마트 디바이스에서 TV 화면에 표시된 영상, 음향, 시간정보를 화면 영상 검색과, 화면영상 음향 검색과, TV 플랫폼 사업자 연동 검색 및 수동검색으로 구분하여 검색하는 단계와;
상기 화면 영상 검색과, 화면영상 음향 검색과, TV 플랫폼 사업자 연동 검색과, 수동검색의 결과가 스마트 디바이스의 화면상에 표시되는 단계; 을 포함함을 특징으로 하는 스마트 디바이스를 이용한 영상정보 검색방법.In the image information search method using a smart device,
A user watching an image through a TV;
Displaying desired image information on the TV screen;
If the desired image information is displayed on a TV screen, installing and executing an application on a smart device;
Retrieving the image, sound, and time information displayed on the TV screen into screen image search, screen image sound search, TV platform service provider search, and manual search in the smart device;
Displaying results of the screen image search, screen image sound search, TV platform service provider search, and manual search on a screen of a smart device; Image information retrieval method using a smart device comprising a. 제 6항에 있어서,
상기 화면 영상 검색은 시청자의 스마트 디바이스에 장착된 카메라를 이용하여 TV 화면을 촬영하고, 상기 촬영된 화면을 분석하여 화면에 해당되는 정보를 스마트 디바이스에 표시해 주는데, TV 화면의 영상을 촬영하면 영상정보서버에 내장되어 있는 영상 패턴 분석 알고리즘을 통해 이미 분석된 원본 영상 화면과 입력된 영상화면을 비교하여 현재 화면의 시간 정보를 추출하는 것을 특징으로 하는 스마트 디바이스를 이용한 영상정보 검색방법.The method according to claim 6,
The screen image search captures a TV screen using a camera mounted on a viewer's smart device, analyzes the captured screen, and displays information corresponding to the screen on the smart device. Image information retrieval method using a smart device, characterized in that the time information of the current screen is extracted by comparing the original image screen and the input image screen analyzed by the image pattern analysis algorithm built in the server. 제 6항에 있어서,
상기 화면영상 음향 검색은 시청자의 스마트 디바이스의 마이크로폰을 이용하여 TV에서 나오는 소리를 분석하여 화면에 해당되는 정보를 스마트 디바이스에 표시해 주는데, TV 화면의 영상 음향을 입력 받으면 영상정보서버에 내장되어 있는 음향 패턴 분석 알고리즘을 통해 이미 분석된 원본 영상 음향과 입력된 영상 음향을 비교하여 현재 화면의 시간 정보를 추출하는 것을 특징으로 하는 스마트 디바이스를 이용한 영상정보 검색방법.The method according to claim 6,
The screen image sound search analyzes the sound from the TV using the microphone of the smart device of the viewer and displays the information corresponding to the screen on the smart device. When the image sound of the TV screen is input, the sound embedded in the video information server A method of retrieving image information using a smart device, comprising: extracting time information of a current screen by comparing an original image sound and an input image sound analyzed through a pattern analysis algorithm. 제 6항에 있어서,
상기 TV 플랫폼 사업자 연동 검색은 TV 플랫폼 사업자 서버와 시청자 개인의 스마트 디바이스와 동기화시켜 TV 플랫폼 사업자의 서버에서 시간정보를 전송받아 화면에 해당되는 정보를 스마트 디바이스에 표시해 주는데, 상기 동기화는 사용자가 사용하고 있는 TV Set Top Box의 고유 넘버를 어플리케이션과 동기화시켜 TV 화면의 시간정보를 TV 플랫폼 사업자에게 받아 화면에 해당되는 정보를 스마트 디바이스에 표시해 주는 것을 특징으로 하는 스마트 디바이스를 이용한 영상정보 검색방법.The method according to claim 6,
The TV platform provider interlocked search is synchronized with the TV platform provider server and the viewer's personal smart device to receive time information from the server of the TV platform provider and displays information corresponding to the screen on the smart device. A method for retrieving video information using a smart device, comprising synchronizing a unique number of a TV Set Top Box with an application and receiving time information of a TV screen from a TV platform operator and displaying information corresponding to the screen on a smart device. 제 6항에 있어서,
상기 수동 검색은 IPTV 또는 Cable TV의 방송시간 보기 기능을 이용하여 개인의 스마트 디바이스에 설치된 어플리케이션에서 검색하여 정보를 제공받는 것을 특징으로 하는 스마트 디바이스를 이용한 영상정보 검색방법.The method according to claim 6,
The manual search is a video information search method using a smart device, characterized in that the information provided by searching in the application installed on the personal smart device using the broadcast time viewing function of the IPTV or Cable TV.
KR1020120085050A 2012-08-03 2012-08-03 The image information search system using smart device and method thereof KR20140018650A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020120085050A KR20140018650A (en) 2012-08-03 2012-08-03 The image information search system using smart device and method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020120085050A KR20140018650A (en) 2012-08-03 2012-08-03 The image information search system using smart device and method thereof

Publications (1)

Publication Number Publication Date
KR20140018650A true KR20140018650A (en) 2014-02-13

Family

ID=50266603

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120085050A KR20140018650A (en) 2012-08-03 2012-08-03 The image information search system using smart device and method thereof

Country Status (1)

Country Link
KR (1) KR20140018650A (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020091121A1 (en) * 2018-11-02 2020-05-07 라인플러스 주식회사 Method, system, and non-transitory computer-readable recording medium for providing work of fiction through messenger
KR20220054050A (en) * 2020-10-23 2022-05-02 주식회사 이알마인드 Apparatus and method for providing information recommendation service

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020091121A1 (en) * 2018-11-02 2020-05-07 라인플러스 주식회사 Method, system, and non-transitory computer-readable recording medium for providing work of fiction through messenger
US11418469B2 (en) 2018-11-02 2022-08-16 LINE Plus Corporation Method, system, and non-transitory computer-readable record medium for providing fiction in messenger
KR20220054050A (en) * 2020-10-23 2022-05-02 주식회사 이알마인드 Apparatus and method for providing information recommendation service

Similar Documents

Publication Publication Date Title
KR101314865B1 (en) Method, additional service server and broadcasting system for providing augmented reality associated tv screen in mobile environment
US10650442B2 (en) Systems and methods for presentation and analysis of media content
KR101211098B1 (en) System and method for providing advertisement related informatiion included in broadcasting to client terminal through network
CN102509235B (en) Purchase interactive method based on mobile video of intelligent handheld device
JP6550156B2 (en) Live streaming video generation method and apparatus, live service providing method and apparatus, and live streaming system
CA2879522C (en) Systems, methods and computer-readable media for determining outcomes for program promotions
KR101482094B1 (en) Method and system for providing information associated with image
KR101995914B1 (en) Method and system for ordering goods using smart terminal with applying an augmented reality marker or real picture to the tv siginal on the tv broadcast
JP2006005897A (en) Terminal device, content distribution system, information output method, information output program
CN102025933A (en) Method and Television used for recognizing user-selected object in television program
CN102129636A (en) System and method for providing viewer identification-based advertising
KR101708153B1 (en) Method for providing advertisement platform by using non-audible sound wave and apparatus using the same
WO2013019018A2 (en) System for playing video files and providing video information services
US20130085846A1 (en) System and method for online selling of products appearing on a display
JP4390448B2 (en) Interactive digital CM broadcasting system
KR20140018650A (en) The image information search system using smart device and method thereof
US10721532B2 (en) Systems and methods for synchronizing media and targeted content
US20140282632A1 (en) Using audio data to identify and record video content
TW201424352A (en) Marketing method and computer system thereof for cloud system
KR101566231B1 (en) Smart display
KR101257913B1 (en) Interworking system of media relational information using a smart media play-back device and smart terminal unit and method thereof
WO2005039080A1 (en) Information distribution system
CN108322782B (en) Method, device and system for pushing multimedia information
KR20150066657A (en) Marketing method and apparatus using moving picture contents
KR20100123124A (en) Order system in iptv and method for operating the same

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application