KR101536267B1 - Smart display having screen division module - Google Patents

Smart display having screen division module Download PDF

Info

Publication number
KR101536267B1
KR101536267B1 KR1020130123425A KR20130123425A KR101536267B1 KR 101536267 B1 KR101536267 B1 KR 101536267B1 KR 1020130123425 A KR1020130123425 A KR 1020130123425A KR 20130123425 A KR20130123425 A KR 20130123425A KR 101536267 B1 KR101536267 B1 KR 101536267B1
Authority
KR
South Korea
Prior art keywords
information
image
screen
module
displayed
Prior art date
Application number
KR1020130123425A
Other languages
Korean (ko)
Other versions
KR20150044498A (en
Inventor
송지성
박수조
김우영
박성준
김민선
이주형
Original Assignee
한양대학교 에리카산학협력단
송지성
박수조
김우영
박성준
김민선
이주형
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한양대학교 에리카산학협력단, 송지성, 박수조, 김우영, 박성준, 김민선, 이주형 filed Critical 한양대학교 에리카산학협력단
Priority to KR1020130123425A priority Critical patent/KR101536267B1/en
Publication of KR20150044498A publication Critical patent/KR20150044498A/en
Application granted granted Critical
Publication of KR101536267B1 publication Critical patent/KR101536267B1/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4722End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/44Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • User Interface Of Digital Computer (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

본 발명의 일 측면에 따른 스마트 디스플레이는 사용자의 동작을 인식하여 신호를 생성하는 입력부, 및 입력된 신호에 의하여 화면을 캡쳐하여 이미지로 저장하고 저장된 이미지에 포함된 상품에 대한 정보를 제공하는 제어부를 포함하고, 상기 제어부는, 화면을 이미지로 저장하는 화면 캡쳐모듈과, 저장된 이미지 목록을 화면에 표시하는 이미지 목록 로딩모듈과, 화면을 분할하여 이미지를 표시하는 화면 분할모듈과, 분할된 화면에 상품정보를 표시하는 상품정보 로딩모듈을 포함한다.According to an aspect of the present invention, there is provided a smart display comprising: an input unit for generating a signal by recognizing an operation of a user; a control unit for capturing a screen according to an input signal and storing the captured image as an image, And a control unit for controlling the display unit to display a list of images on a screen, a screen division module for displaying an image by dividing the screen, And a goods information loading module for displaying information.

Description

화면 분할모듈을 갖는 스마트 디스플레이{SMART DISPLAY HAVING SCREEN DIVISION MODULE}[0001] SMART DISPLAY HAVING SCREEN DIVISION MODULE WITH SCREEN DIVISION MODULE [0002]

본 발명은 스마트 디스플레이에 관한 것으로서, 더욱 상세하게는 화면 분할모듈을 갖는 스마트 디스플레이에 관한 것이다.
The present invention relates to a smart display, and more particularly, to a smart display having a screen division module.

기존의 아날로그 방송에서 디지털 기반의 디지털TV 기술이 개발되고 상용화되면서, 기존의 전파 매체 외에도 각 가정에 연결되어 있는 인터넷 망을 이용하여 실시간 방송, COD(Contents on Demand), 게임, 뉴스 등 다양한 종류의 컨텐츠 서비스를 사용자에게 제공할 수 있게 되었다.As digital-based digital TV technology has been developed and commercialized in existing analog broadcasting, it is possible to use various types of digital media such as real-time broadcast, COD (Contents on Demand), game Content services can be provided to users.

인터넷 망을 이용한 컨텐츠 서비스 제공의 예로서 IPTV(Internet Protocol TV)를 들 수 있다. IPTV는 초고속 인터넷 망을 이용하여 각종 정보 서비스, 동영상 컨텐츠 및 방송 등을 전송하여 사용자의 텔레비전에 제공하는 것을 말한다.An example of providing content service using the Internet network is IPTV (Internet Protocol TV). IPTV refers to the transmission of various information services, video contents, and broadcasts using a broadband internet network and providing them to the user's television.

최근에는 이러한 IPTV에서 한 단계 더 발전한 네트워크 TV 형태로서, 브로드밴드(Broadband) TV, 웹 TV 등의 개념이 제안되었다. 브로드밴드 TV 또는 웹 TV는 종래의 IPTV와는 달리 다수의 컨텐츠 제공자가 존재하고, 사용자는 다수의 컨텐츠 제공자의 서버에 개별적으로 접속하여, 컨텐츠 제공자가 제공하는 다양한 VOD, 게임, 화상전화 서비스 등의 컨텐츠를 제공받을 수 있다.In recent years, the concept of broadband TV, web TV, etc. has been suggested as a form of network TV that has advanced further in IPTV. Unlike the conventional IPTV, a broadband TV or a web TV has a plurality of content providers. Users access the servers of a plurality of content providers individually to transmit various contents such as VOD, game, Can be provided.

이와 같이 사용자가 방송 또는 다양한 컨텐츠를 시청함에 있어서 화면에 표시되는 물건이나, 음식, 등을 원하는 경우에는 방송 중이나 방송이 종료된 후에 인터넷 등을 이용하여 물건을 검색하고 찾아야 하는 불편이 있다.
In this way, when a user wishes to display goods displayed on the screen, food, etc. in view of broadcasting or viewing various contents, there is an inconvenience to search for and search for goods using the Internet or the like after the broadcasting or broadcasting ends.

[관련기술문헌][Related Technical Literature]

1. 스마트폰 광고 응용 프로그램이 스마트폰에 광고를 사용자가 선택한 시간과 방법으로 노출시킬 때 광고주가 선택한 전화 번호가 표시되며, 사용자가 통화 버튼을 클릭 시 선택한 번호로 연결되는 시스템(when smartphone advertising program expose advertise based on user selceted time and method on smartphone, the advertiser selected phone number is displayed, the user clicks the calling button and then it makes calling to the number)(특허출원번호 제10-2012-0033304호)1. The smartphone advertisement application displays the telephone number selected by the advertiser when the advertisement is displayed on the smartphone according to the time and the method selected by the user, and when the user clicks the call button, (Patent Application No. 10-2012-0033304), which discloses a method and apparatus for identifying a user,

2. 스마트폰 광고 노출 관리 방법 및 스마트폰에서 실행 가능한 프로그램 저장매체(Method for managing advertising exposure in smart phone and storage media for applications thereof)(특허출원번호 제10-2011-0107726호)
2. Method for managing advertisement exposure of smartphone and method for managing advertisement exposure in smart phone and storage media for applications thereof (Patent Application No. 10-2011-0107726)

본 발명은 상기한 바와 같은 문제를 해결하기 위해 안출된 것으로서, 본 발명의 목적은 스마트 기기를 이용하여 동영상을 시청하면서 화면에 표시된 물품에 대한 광고정보를 제공하고 이를 활용할 수 있는 스마트 디스플레이를 제공함에 있다.
It is an object of the present invention to provide a smart display capable of providing advertisement information on an item displayed on a screen while watching a moving picture using a smart device and utilizing the advertisement information have.

본 발명의 일 측면에 따른 스마트 디스플레이는 사용자의 동작을 인식하여 신호를 생성하는 입력부, 및 화면을 캡쳐하여 이미지로 저장하고 저장된 이미지에 포함된 상품에 대한 정보를 제공하는 제어부를 포함하고, 상기 제어부는, 화면을 이미지로 저장하는 화면 캡쳐모듈과, 저장된 이미지 목록을 화면에 표시하는 이미지 목록 로딩모듈과, 화면을 분할하여 이미지를 표시하는 화면 분할모듈과, 분할된 화면에 상품정보를 표시하는 상품정보 로딩모듈을 포함한다.According to an aspect of the present invention, there is provided a smart display including an input unit for recognizing an operation of a user and generating a signal, and a control unit for capturing a screen and storing the image as an image and providing information on a product included in the stored image, A screen capture module for storing a screen as an image; an image list loading module for displaying a stored image list on a screen; a screen division module for displaying an image by dividing the screen; And an information loading module.

상기 입력부는 사용자의 동작을 촬영하는 카메라와 사용자의 동작에서 손가락 움직임을 추출하여 인식하는 형상 인식모듈, 및 손가락 사이의 간격을 측정하여 이의 변화에 따라 신호를 생성하는 간격 측정모듈을 포함할 수 있다.The input unit may include a camera for photographing a user's operation, a shape recognition module for extracting and recognizing finger movements in a user's operation, and an interval measurement module for measuring a gap between the fingers and generating a signal according to the change .

상기 간격 측정모듈은 엄지와 검지 사이의 간격 변화를 측정하여 입력신호를 발생시킬 수 있다.The interval measurement module may measure an interval change between the thumb and the index and generate an input signal.

상기 간격 측정모듈은 양손의 엄지와 검지에 의하여 형성되는 사각형상을 선택 영역으로 인식하여 입력신호를 생성할 수 있다.The interval measurement module may recognize a rectangular shape formed by the thumb and the index finger of both hands as a selection area to generate an input signal.

상기 화면 캡쳐모듈은 캡쳐된 이미지에 나타난 상품의 정보를 상기 이미지에 결합하여 저장할 수 있다.The screen capture module may combine the information of the goods displayed in the captured image with the image and store the combined information.

상기 화면 분할모듈은 이미지가 표시되는 이미지 영역과, 복수 개의 상품의 개략정보가 표시된 상품정보 영역, 및 선택된 상품의 가격을 포함하는 상세 정보가 표시된 상세정보 영역으로 화면을 분할할 수 있다.The screen division module may divide the screen into an image area in which an image is displayed, a product information area in which approximate information on a plurality of products is displayed, and a detailed information area in which detailed information including the price of the selected product is displayed.

상기 상품정보 로딩모듈은 캡쳐된 이미지에 포함된 상품을 인식하여 상품목록을 생성하고, 상기 상품정보 영역에 상품의 명칭, 상표, 및 상품 이미지를 포함하는 개략정보를 표시할 수 있다.The merchandise information loading module recognizes the merchandise included in the captured image to generate a merchandise list, and may display rough information including the merchandise name, trademark, and merchandise image in the merchandise information area.

상기 제어부는 상품의 수량을 선택하고 결제를 위한 정보를 입력할 수 있도록 입력창을 생성하는 주문 인터페이스 로딩모듈을 포함할 수 있다.The control unit may include an order interface loading module for generating an input window for selecting a quantity of goods and inputting information for settlement.

상기 제어부는 이미지 상에 그리드(grid)를 형성하여 이미지를 복수개의 선택영역으로 분할하고, 선택영역들 중 어느 하나를 선택하는 신호가 입력되면 선택영역을 확대하는 선택영역 확대모듈을 포함할 수 있다.The control unit may include a selection region enlargement module for dividing the image into a plurality of selection regions by forming a grid on the image and enlarging the selection region when a signal for selecting one of the selection regions is inputted .

상품정보 로딩모듈은 선택영역들 중 어느 하나를 선택하는 신호가 입력되면 선택된 영역에만 표시된 상품들의 정보를 표시할 수 있다.The product information loading module may display information of products displayed only in the selected area when a signal for selecting any one of the selection areas is input.

본 발명의 다른 측면에 따른 스마트 디스플레이는 사용자의 동작을 인식하여 신호를 생성하는 입력부, 및 화면에 나타난 상품에 대한 정보를 제공하는 제어부를 포함하고, 상기 제어부는, 화면에 그리드를 형성하여 복수개의 선택영역으로 분할하는 그리드 형성모듈과 지정된 선택영역에 표시된 상품들을 인식하는 상품 인식모듈과, 화면을 복수개의 표시영역으로 분할하는 화면 분할모듈, 및 지정된 표시영역에 나타난 상품정보를 표시하는 상품정보 로딩모듈을 포함한다.
According to another aspect of the present invention, there is provided a smart display including an input unit for recognizing an operation of a user and generating a signal, and a control unit for providing information on a product displayed on the screen, wherein the control unit forms a grid on the screen, A screen division module for dividing the screen into a plurality of display areas, and a product information display unit for displaying the product information displayed in the designated display area, Module.

상기와 같이 본 발명에 따르면 화면을 분할하여 화면에 나타난 상품에 대한 정보를 제공하므로 사용자가 용이하게 상품에 대한 정보를 획득할 수 있다.As described above, according to the present invention, since the screen is divided and the information about the product displayed on the screen is provided, the user can easily obtain information about the product.

또한, 사용자의 손가락 형상과 움직임을 입력 신호로 인식하므로 사용자는 용이하게 화면을 조작하여 원하는 정보를 얻을 수 있다.
In addition, since the user's finger shape and motion are recognized as input signals, the user can easily operate the screen to obtain desired information.

도 1은 본 발명의 제1 실시예에 따른 스마트 디스플레이를 이용한 광고 시스템을 도시한 구성도이다.
도 2는 본 발명의 제1 실시예에 따른 스마트 디스플레이의 구성도이다.
도 3은 본 발명의 제1 실시예에 따른 스마트 디스플레이를 이용한 광고 방법을 나타낸 흐름도이다.
도 4a 내지 도 4d는 제1 실시예에 따른 스마트 디스플레이를 이용한 광고 방법을 설명하기 위한 도면이다.
도 5a 내지 도 5c는 입력부에서 인식하는 사용자의 손 모양을 나타낸 도면이다.
도 6은 본 발명의 제2 실시예에 따른 스마트 디스플레이의 구성도이다.
도 7은 본 발명의 제2 실시예에 따른 스마트 디스플레이를 이용한 광고 방법을 나타낸 흐름도이다.
도 8a 및 도 8b는 본 발명의 제2 실시예에 따른 스마트 디스플레이를 이용한 광고 방법을 설명하기 위한 도면이다.
1 is a configuration diagram illustrating an advertisement system using a smart display according to a first embodiment of the present invention.
2 is a configuration diagram of a smart display according to a first embodiment of the present invention.
3 is a flowchart illustrating an advertisement method using a smart display according to the first embodiment of the present invention.
4A to 4D are diagrams for explaining an advertisement method using a smart display according to the first embodiment.
5A to 5C are diagrams showing a hand shape of the user recognized by the input unit.
6 is a configuration diagram of a smart display according to a second embodiment of the present invention.
7 is a flowchart illustrating an advertisement method using a smart display according to a second embodiment of the present invention.
8A and 8B are views for explaining an advertising method using a smart display according to a second embodiment of the present invention.

본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하여 상세하게 설명한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.The present invention can be variously modified and may have various embodiments, and specific embodiments will be described in detail with reference to the drawings. It should be understood, however, that the invention is not intended to be limited to the particular embodiments, but includes all modifications, equivalents, and alternatives falling within the spirit and scope of the invention.

제1, 제2 등과 같이 서수를 포함하는 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되지는 않는다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. Terms including ordinals, such as first, second, etc., may be used to describe various elements, but the elements are not limited to these terms. The terms are used only for the purpose of distinguishing one component from another.

예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다. 및/또는 이라는 용어는 복수의 관련된 기재된 항목들의 조합 또는 복수의 관련된 기재된 항목들 중의 어느 항목을 포함한다.For example, without departing from the scope of the present invention, the first component may be referred to as a second component, and similarly, the second component may also be referred to as a first component. And / or < / RTI > includes any combination of a plurality of related listed items or any of a plurality of related listed items.

어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다.It is to be understood that when an element is referred to as being "connected" or "connected" to another element, it may be directly connected or connected to the other element, . On the other hand, when an element is referred to as being "directly connected" or "directly connected" to another element, it should be understood that there are no other elements in between.

본 출원에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.The terminology used in this application is used only to describe a specific embodiment and is not intended to limit the invention. The singular expressions include plural expressions unless the context clearly dictates otherwise. In the present application, the terms "comprises" or "having" and the like are used to specify that there is a feature, a number, a step, an operation, an element, a component or a combination thereof described in the specification, But do not preclude the presence or addition of one or more other features, integers, steps, operations, elements, components, or combinations thereof.

다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥 상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.Unless defined otherwise, all terms used herein, including technical or scientific terms, have the same meaning as commonly understood by one of ordinary skill in the art to which this invention belongs. Terms such as those defined in commonly used dictionaries are to be interpreted as having a meaning consistent with the contextual meaning of the related art and are to be interpreted as either ideal or overly formal in the sense of the present application Do not.

이하, 첨부한 도면을 참조하여 본 발명의 실시예에 대하여 당업자가 용이하게 실시할 수 있도록 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되는 것은 아니다.Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings so that those skilled in the art can easily carry out the present invention. The present invention may, however, be embodied in many different forms and should not be construed as limited to the embodiments set forth herein.

도 1은 본 발명의 제1 실시예에 따른 스마트 디스플레이를 이용한 광고 시스템을 도시한 구성도이다.1 is a configuration diagram illustrating an advertisement system using a smart display according to a first embodiment of the present invention.

도 1을 참조하면, 스마트 디스플레이를 이용한 광고 시스템(101)은 스마트 디스플레이(10), 리모컨(40), 스마트 모바일 기기(50), 방송통신망(60), 및 서버(30)를 포함한다.Referring to FIG. 1, an advertisement system 101 using a smart display includes a smart display 10, a remote controller 40, a smart mobile device 50, a broadcast communication network 60, and a server 30.

본 발명에서 스마트 디스플레이(10)는 유무선 통신망을 통해서 영상 및 데이터 정보를 송수신하고 화면에 동영상을 표시할 수 있는 기기를 의미하며, 스마트 TV로 이루어질 수 있다. 스마트 디스플레이(10)는 별도의 셋톱박스(STB)를 구비한 셋톱박스(20) 분리형으로 형성되어 방송통신망(60)을 통해 영상 데이터 송수신을 수행하거나, 셋톱박스(20) 일체형으로 형성되어 별도의 셋톱박스(20) 없이 영상 데이터를 송수신할 수 있다. In the present invention, the smart display 10 refers to a device capable of transmitting and receiving video and data information through a wired / wireless communication network and displaying moving pictures on the screen, and may be a smart TV. The smart display 10 is formed as a separate type of set-top box 20 having a separate set-top box (STB) and performs transmission / reception of video data through the broadcasting communication network 60, or is formed integrally with the set- It is possible to transmit and receive video data without the set-top box 20. [

방송통신망(60)은 대용량, 장거리 음성 및 데이터 서비스에 의해 방송 컨텐츠 또는 동영상 컨텐츠를 전송하기 위한 유선 또는 무선 기간망이며, 유선 또는 무선 인터넷(Internet)이 될 수도 있다.The broadcast communication network 60 is a wired or wireless backbone network for transmitting broadcast contents or moving picture contents by a large-capacity, long-distance voice and data service, and may be a wired or wireless Internet.

서버(30)는 컨텐츠가 저장되는 저장소로서 방송 통신망에 컨텐츠를 제공한다. 서버에는 드라마, 오락 프로그램, 영화와 같은 다양한 종류의 컨텐츠가 저장되어 있다.The server 30 is a repository for storing contents, and provides contents to the broadcasting communication network. The server stores various kinds of contents such as a drama, an entertainment program, and a movie.

리모컨(40)은 스마트 디스플레이(10)가 TV로 이루어진 경우 스마트 디스플레이(10)에 신호를 입력하기 위한 도구이다. 리모컨(40)은 스마트 디스플레이(10) 및 셋톱박스(20)와 적외선 통신을 통신으로 신호를 주고 받는다.The remote controller 40 is a tool for inputting a signal to the smart display 10 when the smart display 10 is composed of a TV. The remote controller 40 communicates infrared communication with the smart display 10 and the set-top box 20 through communication.

스마트 모바일 기기(50)는 스마트 폰, 태블릿 PC 등으로 이루어지며 스마트 디스플레이(10)와 근거리 통신으로 신호를 주고 받는다. 스마트 모바일 기기(50)는 블루투스(bluetooth), 적외선 통신, 전자태그(RFID) RF 통신으로 스마트 디스플레이(10)와 신호를 주고 받을 수 있다. 스마트 모바일 기기(50) 스마트 디스플레이(10)와 동기화되어 동일한 화면이 표시될 수 있으며, 이 경우 스마트 모바일 기기(50)를 터치하면 스마트 디스플레이에도 이를 선택하는 신호가 입력된다.The smart mobile device 50 is composed of a smart phone, a tablet PC, and the like and transmits and receives signals to and from the smart display 10 by short-distance communication. The smart mobile device 50 can exchange signals with the smart display 10 through Bluetooth, infrared communication, and RFID radio communication. The same screen may be displayed in synchronization with the smart mobile device 50. In this case, when the smart mobile device 50 is touched, a signal for selecting the smart screen is input to the smart display.

도 2는 본 발명의 제1 실시예에 따른 스마트 디스플레이의 구성도이다.2 is a configuration diagram of a smart display according to a first embodiment of the present invention.

도 2를 참조하여 설명하면, 스마트 디스플레이(10)는 입력부(11), 출력부(12), 제어부(13), 통신부(17), 및 저장부(18)를 포함한다.2, the smart display 10 includes an input unit 11, an output unit 12, a control unit 13, a communication unit 17, and a storage unit 18.

입력부(11)는 카메라(11a), 형상 인식모듈(11b), 및 간격 측정모듈(11c)을 포함한다. 카메라(11a)는 사용자의 동작을 촬영하여 복수 개의 프레임을 생성하며, 프레임들의 조합으로 사용자의 동작을 동영상 형태로 저장한다.The input unit 11 includes a camera 11a, a shape recognition module 11b, and an interval measurement module 11c. The camera 11a generates a plurality of frames by photographing the motion of the user, and stores the motion of the user in the form of a moving picture by a combination of frames.

형상 인식모듈(11b)은 촬영된 동영상에서 사용자의 손을 인식하고, 손 모양을 추출한다. 형상 인식모듈(11b)에는 다양한 손 동작에 대한 데이터가 저장되어 있으며, 입력된 동영상에서 손과 유사한 이미지를 추출하여 손의 움직임을 인식한다.The shape recognition module 11b recognizes the user's hand and extracts the hand shape from the photographed moving image. The shape recognition module 11b stores data on various hand movements, and extracts hand-like images from the input moving images to recognize hand movements.

또한 형상 인식모듈(11b)은 동영상에서 손가락 움직임을 추출하고 손가락 움직임이 기 설정된 움직임과 유사한지 판단하여 손동작과 일치하는 입력 신호를 지정한다. 예를 들어 손가락으로 동그라미를 형성하는 경우는 화면을 전환하는 신호로 인식할 수 있으며, 주먹을 쥐면 동영상을 일시 정지하는 것으로 인식할 수 있으며 엄지 손가락을 좌우로 흔들면 화면을 전환하는 신호로 인식할 수 있다.In addition, the shape recognition module 11b extracts a finger motion from a moving image and determines whether the finger movement is similar to a preset motion, and designates an input signal matching the hand movement. For example, when a circle is formed with a finger, it can be recognized as a signal to switch the screen. If a finger is held, it can be recognized as a video pause. If the thumb is swung to the left and right, have.

간격 측정모듈(11c)은 추출된 손에 대한 이미지에서 손가락 사이의 간격을 측정한다. 특히, 엄지와 검지의 간격을 측정하여 간격이 좁혀지거나 넓어질 때, 기 설정된 신호를 생성한다. 특히 양손의 엄지와 검지에 의하여 사각형 형상을 형성하는 경우, 이를 선택 영역으로 인식하고, 선택된 영역에 주변보다 어둡거나 밝은 음영마크를 형성하여 표시할 수 있다. The interval measurement module 11c measures the distance between the fingers in the image of the extracted hand. In particular, the interval between the thumb and index finger is measured to generate a predetermined signal when the interval is narrowed or widened. Particularly, when a square shape is formed by the thumb and the index finger of both hands, it can be recognized as a selection area and a dark or bright shadow mark can be formed in the selected area and displayed.

또한, 손을 움직일 때, 음영마크를 함께 이동시킴으로써 사용자가 육안으로 확인하면서 선택 영역을 이동시킬 수 있다. 손가락 사이의 간격이 좁아지면 화면을 캡쳐하여 이미지를 저장하는 신호를 생성할 수 있으며, 손가락 사이의 간격이 넓어지면 선택 영역을 확대하는 신호를 생성할 수 있다.In addition, when the hand is moved, the shaded marks can be moved together so that the user can move the selected area while confirming with the naked eye. When the interval between the fingers is narrowed, a signal for capturing the image and storing the image can be generated. When the interval between the fingers is enlarged, a signal for enlarging the selected region can be generated.

또한, 한 손의 엄지와 검지 사이의 간격을 측정하여 엄지와 검지 사이의 간격이 좁아지면 화면을 캡쳐하여 이미지를 저장하는 신호를 생성할 수 있으며, 엄지와 검지가 맞닿은 상태에서는 화면에 커서를 형성하고, 손의 이동에 따라 커서를 함께 이동시키며, 손가락 사이의 간격이 넓어지면 커서가 위치하는 영역을 선택하거나 커서가 위치하는 영역의 아이콘을 클릭하는 신호를 생성할 수 있다.In addition, when the gap between the thumb and the index finger is narrowed by measuring the distance between the thumb and the index finger of one hand, a signal for storing the image can be generated by capturing the screen. When the thumb and index finger are in contact with each other, And moves the cursor along with the movement of the hand. When the distance between the fingers becomes wider, a signal can be generated by selecting an area where the cursor is positioned or by clicking an icon of the area where the cursor is located.

출력부(12)는 방송 신호를 디코딩하여 화상으로 나타낸다. 또한 출력부(12)는 외부 서버에 저장된 동영상을 화상으로 나타내거나 문자 또는 아이콘을 화면에 나타낸다. The output unit 12 decodes the broadcast signal to display it as an image. The output unit 12 also displays a moving image stored in the external server as an image or a character or icon on the screen.

제어부(13)는 입력부(11)에서 신호를 전달받아 화면을 제어하며 출력부(12)를 통해서 영상 및 정보를 화면에 표시한다. 제어부(13)는 화면 캡쳐모듈(13a), 이미지 목록 로딩모듈(13b), 화면 분할모듈(13c), 상품정보 로딩모듈(13d), 주문 인터페이스 로딩모듈(13e), 및 선택영역 확대모듈(13f)을 포함한다.The control unit 13 receives the signal from the input unit 11 and controls the screen, and displays the image and information on the screen through the output unit 12. The control unit 13 includes a screen capture module 13a, an image list loading module 13b, a screen division module 13c, a product information loading module 13d, an order interface loading module 13e, ).

화면 캡쳐모듈(13a)은 화면을 이미지 형태로 저장하되, 화면에 나타난 복수개의 상품의 정보를 이미지에 결합하여 저장한다. 상품정보는 컨텐츠에 포함되어 있는데, 상품정보는 각 프레임에 코드 형태로 결합되어 있으며, 신호가 입력되기 전까지는 화면에 나타나지 않는다. The screen capture module 13a stores the screen image in the form of an image, and stores information of a plurality of products displayed on the screen in an image. The product information is included in the content, and the product information is combined in a code form in each frame and does not appear on the screen until a signal is input.

일반적으로 동영상은 1초에 30개의 프레임을 화면에 제공하며, 수 많은 프레임들이 모여서 하나의 동영상을 형성한다. 프레임에 상품이 나타나는 경우, 프레임에 상품에 대한 정보를 코드 형식으로 결합시킨다. 상품정보의 결합은 동영상이 촬영된 이후에 별도의 작업을 통해서 이루어질 수 있으며, 컨텐츠가 전송될 때, 상품정보도 사용자에게 전송된다.In general, a moving picture provides 30 frames per second on the screen, and a large number of frames are gathered to form a moving picture. When a commodity appears in a frame, it combines the information about the commodity in a frame in the form of a code. The combination of the product information may be performed through a separate operation after the moving picture is captured, and when the contents are transmitted, the product information is also transmitted to the user.

도 5a에 도시된 바와 같이 사용자가 양손의 엄지와 검지를 이용하여 사각형을 모양을 형성하고 이를 수초간 유지하는 경우, 입력부(11)에서 이를 화면 캡쳐 명령으로 인식하고 화면 캡쳐 신호를 생성할 수 있다. 또한, 도 5b 및 도 5c에 도시된 바와 같이 한손의 엄지와 검지를 인접하게 배치하고, 엄지와 검지 사이의 간격을 감소시키는 경우, 입력부(11)에서 이를 화면 캡쳐 명령으로 인식하고 화면 캡쳐 신호를 생성할 수 있다.5A, when the user forms a quadrangle using the thumb and forefinger of both hands and holds it for a few seconds, the input unit 11 may recognize it as a screen capture command and generate a screen capture signal . 5B and 5C, when the thumb and the index finger of one hand are disposed adjacent to each other and the interval between the thumb and the index finger is reduced, the input unit 11 recognizes this as a screen capture command and outputs a screen capture signal Can be generated.

도 4a에 도시된 바와 같이, 이미지 목록 로딩모듈(13b)은 캡쳐된 이미지를 목록을 화면에 로딩한다. 이미지들은 저장부(18)에 저장되어 있는데, 신호가 입력되면 방송 중 또는 방송이 종료된 이후에 사용자가 저장한 복수개의 이미지목록을 화면에 표시한다.As shown in FIG. 4A, the image list loading module 13b loads the captured image onto the screen. The images are stored in the storage unit 18. When a signal is input, a plurality of image lists stored by the user are displayed on the screen during or after the broadcast ends.

도 4c에 도시된 바와 같이, 화면 분할모듈(13c)은 화면을 복수 개의 표시영역으로 분할한다. 화면 분할모듈(13c)은 이미지가 표시되는 이미지 영역과, 복수 개의 상품의 개략정보가 표시된 상품정보 영역, 및 선택된 상품의 가격을 포함하는 상세 정보가 표시된 상세정보 영역으로 화면을 분할한다. As shown in FIG. 4C, the screen division module 13c divides the screen into a plurality of display areas. The screen division module 13c divides the screen into an image area in which an image is displayed, a product information area in which the summary information of a plurality of products is displayed, and a detailed information area in which detailed information including the price of the selected product is displayed.

상품정보 로딩모듈(13d)은 캡쳐된 이미지에 결합된 상품정보를 인식하여 상품목록을 생성하고, 상품정보 영역에 상품의 명칭, 상표, 및 상품 이미지를 포함하는 개략정보를 표시한다. The product information loading module 13d recognizes the product information combined with the captured image to generate the product list, and displays the rough information including the product name, trademark, and product image in the product information area.

상품정보 영역에는 복수개의 상품 이미지와 상품명, 상표를 포함하는 상품의 개략정보가 표시된다. 상품정보 로딩모듈(13d)은 복수개의 상품을 순서대로 표시하는데, 광고비를 많이 지불한 상품을 프리미엄 상품으로 분류하여 다른 상품보다 앞에 배치할 수 있다.The product information area displays a plurality of product images, rough information of the products including the product names and trademarks. The merchandise information loading module 13d displays a plurality of merchandise in order, and the merchandise paid a large amount of advertising cost can be classified as a premium merchandise and placed in front of other merchandise.

또한 상세정보 영역에는 상품정보 영역에 표시된 상품들 중 선택된 상품에 대한 상세정보가 표시되는데, 상세정보는 상품의 가격, 상품의 재질, 제조원, 및 상품을 판매하는 웹 사이트를 포함할 수 있다. 상세정보는 프레임에 결합되어 있을 수도 있으나, 유무선통신망을 통해서 전송 받아 화면에 표시하는 것이 바람직하다. 상품의 가격과 재고, 등은 수시로 변하는 정보이므로 이를 실시간으로 수신하여 제공할 수 있다.In the detailed information area, detailed information on a selected commodity among the commodities displayed in the commodity information area is displayed. The detailed information may include a price of the commodity, a material of the commodity, a source of the commodity, and a website for selling the commodity. The detailed information may be coupled to the frame, but it is preferable that the detailed information is transmitted through the wired / wireless communication network and displayed on the screen. The price of goods, inventory, etc. are information that changes from time to time, so they can be received and provided in real time.

주문 인터페이스 로딩모듈(13e)은 화면에 상품의 수량을 선택하고 결제를 위한 정보를 입력할 수 있도록 입력창을 생성한다. 주문 인터페이스 로딩모듈(13e)은 사용자가 상품을 선택하는 신호가 입력되면 수량 선택과 결제를 위한 입력창을 생성하고 사용자는 리모컨 등을 이용하여 수량을 선택하고 결제 정보를 입력할 수 있다. 결제 정보는 신용카드 정보, 무선기기를 통해서 전송된 인증번호 등으로 이루어질 수 있다.The order interface loading module 13e selects an item quantity on the screen and creates an input window so that information for settlement can be input. The order interface loading module 13e generates an input window for selection and payment when the user inputs a signal for selecting a product, and the user can select a quantity and enter payment information using a remote controller or the like. The payment information may include credit card information, an authentication number transmitted through the wireless device, and the like.

선택영역 확대모듈(13f)은 이미지 상에 그리드(grid)를 형성하여 이미지를 복수개의 선택영역으로 분할하고, 선택영역들 중 어느 하나를 선택하는 신호가 입력되면 선택영역을 확대한다. 이 때, 상품정보 로딩모듈(13d)은 선택영역들 중 어느 하나를 선택하는 신호가 입력되면 선택된 영역에만 표시된 상품들의 정보를 표시한다.The selection region enlarging module 13f divides the image into a plurality of selection regions by forming a grid on the image, and magnifies the selection region when a signal for selecting one of the selection regions is input. At this time, the product information loading module 13d displays information of products displayed only in the selected area when a signal for selecting any one of the selection areas is inputted.

선택영역들 중 어느 하나의 선택은 사용자의 모션에 의하여 이루어질 수 있다. 선택영역 확대모듈(13f)은 분할된 화면에서 사용자가 양손의 엄지와 검지를 맞닿도록 형성하여 사각형을 만들면 선택영역 중 어느 하나를 어둡거나 밝게 변화시켜 음영변화영역을 형성할 수 있다. 선택영역 확대모듈(13f)은 손이 이동함에 따라 음영변화영역이 이동시키고, 사용자가 엄지와 검지 사이의 간격을 증가시키면 선택영역을 확대하여 화면에 표시할 수 있다.The selection of any one of the selection areas can be made by the user's motion. The selection area enlarging module 13f can form a quadrangle by forming the thumb and forefinger of the both hands so as to be in contact with each other on the divided screen, thereby changing any one of the selected areas to dark or bright to form a shadow changing area. The selection area enlarging module 13f moves the shadow changing area as the hand moves, and when the user increases the interval between the thumb and the index, the selection area can be enlarged and displayed on the screen.

통신부(17)는 상품에 대한 상세 정보를 유무선 통신망을 이용하여 수신할 수 있다. 또한, 통신부(17)는 주문 및 결제 정보를 유무선 통신망을 통해서 전송한다.The communication unit 17 can receive detailed information about the product using the wired / wireless communication network. Further, the communication unit 17 transmits the order and payment information through the wired / wireless communication network.

저장부(18)는 캡쳐 신호가 입력되면 프레임을 이미지 형태로 저장한다. 또한 사용자가 캡쳐한 이미지 목록을 저장하며, 사용자가 주문한 주문 내역을 저장할 수도 있다.The storage unit 18 stores a frame in the form of an image when a capture signal is input. It also stores a list of images captured by the user, and can also store orders that the user has ordered.

도 3은 본 발명의 제1 실시예에 따른 스마트 디스플레이를 이용한 광고 방법을 나타낸 흐름도이고, 도 4a 내지 도 4d는 제1 실시예에 따른 스마트 디스플레이를 이용한 광고 방법을 설명하기 위한 도면이다.FIG. 3 is a flowchart illustrating an advertisement method using a smart display according to a first embodiment of the present invention. FIGS. 4A to 4D are views for explaining an advertisement method using a smart display according to the first embodiment.

도 3 및 도 4를 참조하여 설명하면, 본 실시예에 따른 스마트 디스플레이를 이용한 광고 방법은 신호가 입력되면, 화면에 표시된 프레임을 이미지 형태로 저장하는 화면 캡쳐단계(S101)와, 캡쳐된 이미지 목록을 화면에 표시하는 이미지 목록 로딩단계(S102)와, 화면을 복수개의 표시영역으로 분할하여 이미지를 표시하는 화면 분할단계(S103), 및 어느 하나의 표시영역에 상품정보를 표시하는 상품정보 로딩단계(S104)를 포함한다.3 and 4, the advertisement method using the smart display according to the present embodiment includes a screen capturing step (S101) of storing a frame displayed on the screen in the form of an image when a signal is input, (S103) for displaying an image by dividing the screen into a plurality of display areas, and a product information loading step (S103) for displaying product information in any one of the display areas (S104).

화면 캡쳐단계(S101)는 화면을 이미지 형태로 저장하되, 화면에 나타난 복수개의 상품의 정보를 이미지에 결합하여 저장한다. 상품 정보는 최초 동영상 프레임에 결합되어 있는 바, 이미지를 저장할 때, 상품 정보를 이미지에 결합하여 이미지와 함께 상품 정보도 함께 제공한다.In the screen capturing step S101, the screen is stored in an image form, and information of a plurality of products displayed on the screen is combined with an image and stored. The product information is combined with the initial video frame. When the image is stored, the product information is combined with the image to provide the image together with the product information.

도 5a에 도시된 바와 같이 사용자가 양손의 엄지와 검지를 이용하여 사각형을 모양을 형성하고 이를 수초간 유지하는 경우, 입력부(11)에서 이를 화면 캡쳐 명령으로 인식하고 화면 캡쳐 신호를 생성할 수 있다. 또한, 도 5b 및 도 5c에 도시된 바와 같이, 한손의 엄지와 검지를 인접하게 배치하고, 엄지와 검지 사이의 간격을 감소시키는 경우, 입력부(11)에서 이를 화면 캡쳐 명령으로 인식하고 화면 캡쳐 신호를 생성할 수 있다.5A, when the user forms a quadrangle using the thumb and forefinger of both hands and holds it for a few seconds, the input unit 11 may recognize it as a screen capture command and generate a screen capture signal . 5B and 5C, when the thumb and the index finger of one hand are disposed adjacent to each other and the interval between the thumb and the index finger is reduced, the input unit 11 recognizes this as a screen capture command, Lt; / RTI >

도 4a에 도시된 바와 같이, 이미지 목록 로딩단계(S102)는 캡쳐된 이미지를 목록을 화면에 로딩한다. 이미지들은 저장부(18)에 저장되어 있는데, 신호가 입력되면 방송 중 또는 방송이 종료된 이후에 사용자가 저장한 복수개의 이미지목록을 화면에 표시한다. 도 4b에 도시된 바와 같이 이미지 목록 로딩단계(S102)에서 이미지의 선택은 사용자의 모션에 의하여 이루어질 수 있는데, 사용자가 양손의 엄지와 검지를 이용하여 사각형을 모양을 형성하면 화면에 커서가 형성되고, 이를 이동시키면 커서가 함께 이동하며, 이를 수초간 유지하는 경우 이미지를 선택하는 신호가 생성될 수 있다.As shown in FIG. 4A, the image list loading step (S102) loads the captured image onto the screen. The images are stored in the storage unit 18. When a signal is input, a plurality of image lists stored by the user are displayed on the screen during or after the broadcast ends. As shown in FIG. 4B, in the image list loading step (S102), the selection of the image can be performed by the motion of the user. When the user forms a square using the thumb and index of both hands, a cursor is formed on the screen , Moving the cursor moves together, and if it is held for a few seconds, a signal for selecting an image may be generated.

도 4c에 도시된 바와 같이 화면 분할단계는(S103)은 이미지를 선택하는 신호가 생성되면 화면을 복수개의 표시영역으로 분할한다. 화면 분할단계는(S103)은 화면을 이미지가 표시되는 이미지 영역과, 복수 개의 상품의 개략정보가 표시된 상품정보 영역, 및 선택된 상품의 가격을 포함하는 상세 정보가 표시된 상세정보 영역으로 화면을 분할한다. As shown in FIG. 4C, in step S103, when a signal for selecting an image is generated, the screen is divided into a plurality of display areas. In the screen dividing step (S103), the screen is divided into an image area in which an image is displayed, a product information area in which approximate information on a plurality of products is displayed, and a detailed information area in which detailed information including the price of the selected product is displayed .

상품정보 로딩단계(S104)는 캡쳐된 이미지에 결합된 상품정보를 인식하여 상품목록을 생성하고, 상품정보 영역에 상품의 명칭, 상표, 및 상품 이미지를 포함하는 개략정보를 표시한다. The merchandise information loading step S104 recognizes the merchandise information combined with the captured image to generate a merchandise list, and displays rough information including the merchandise name, trademark, and merchandise image in the merchandise information area.

상품정보 영역에는 복수개의 상품 이미지와 상품명, 상표를 포함하는 상품의 개략정보가 표시된다. 상품정보 로딩단계(S104)에서는 복수개의 상품을 순서대로 표시하는데, 광고비를 많이 지불한 상품을 프리미엄 상품으로 분류하여 다른 상품보다 앞에 배치할 수 있다.The product information area displays a plurality of product images, rough information of the products including the product names and trademarks. In the merchandise information loading step S104, a plurality of merchandise items are displayed in order, and the merchandise paid a large amount of advertisement cost can be classified as premium merchandise and arranged in front of other merchandise.

또한 상세정보 영역에는 상품정보 영역에 표시된 상품들 중 선택된 상품에 대한 상세정보가 표시되는데, 상세정보는 상품의 가격, 색상, 재질, 크기, 제조원, 제조국가, 및 상품을 판매하는 웹 사이트 주소를 포함할 수 있다. 상세정보는 프레임에 결합되어 있을 수도 있으나, 유무선통신망을 통해서 전송 받아 화면에 표시하는 것이 바람직하다. 상품의 가격과 재고, 등은 수시로 변하는 정보이므로 이를 실시간으로 수신하여 제공할 수 있다.Further, the detailed information area displays detailed information on the selected product among the products displayed in the product information area. The detailed information includes the price, color, material, size, manufacturer, country of manufacture, . The detailed information may be coupled to the frame, but it is preferable that the detailed information is transmitted through the wired / wireless communication network and displayed on the screen. The price of goods, inventory, etc. are information that changes from time to time, so they can be received and provided in real time.

본 실시예에 따른 스마트 디스플레이를 이용한 광고 방법은 상품의 수량을 선택하고 결제를 위한 정보를 입력할 수 있도록 입력창을 생성하는 주문 인터페이스 로딩단계를 더 포함한다.The advertisement method using the smart display according to the present embodiment further includes an order interface loading step of creating an input window for selecting a quantity of goods and inputting information for settlement.

주문 인터페이스 로딩단계에서는 사용자가 상품을 선택하는 신호가 입력되면 수량 선택과 결제를 위한 입력창을 생성하고 사용자는 리모컨 등을 이용하여 수량 및 결제 정보를 입력할 수 있다. 결제 정보는 신용카드 정보, 무선기기를 통해서 전송된 인증번호 등으로 이루어질 수 있다.In the order interface loading step, when the user inputs a signal for selecting a product, an input window for selecting a quantity and payment is created, and the user can input the quantity and payment information using a remote controller or the like. The payment information may include credit card information, an authentication number transmitted through the wireless device, and the like.

본 실시예에 따른 스마트 디스플레이를 이용한 광고 방법은 선택영역 확대단계를 더 포함한다. 도 4d에 도시된 바와 같이 선택영역 확대단계는 이미지 상에 그리드(grid)를 형성하여 이미지를 복수개의 선택영역으로 분할하고, 선택영역들 중 어느 하나를 선택하는 신호가 입력되면 선택영역을 확대한다.The advertising method using the smart display according to the present embodiment further includes a selection region enlarging step. As shown in FIG. 4D, in the enlarging selection step, a grid is formed on an image to divide the image into a plurality of selection areas, and when a signal for selecting one of the selection areas is input, the selection area is enlarged .

선택영역 확대단계는 분할된 화면에서 사용자가 양손의 엄지와 검지를 맞닿도록 형성하여 사각형을 만들면 선택영역 중 어느 하나를 어둡거나 밝게 변화시켜 음영변화영역을 형성할 수 있다. 선택영역 확대단계에서는 손이 이동함에 따라 음영변화영역이 이동시키고, 사용자가 엄지와 검지 사이의 간격이 증가시키면 선택영역을 확대하여 화면에 표시할 수 있다.The selection region enlarging step may form a quadrangle by forming a rectangle such that the thumb and the index finger of the both hands are in contact with each other on the divided screen, thereby changing one of the selected regions to dark or bright to form the shadow changing region. In the selection area enlarging step, the shaded area is moved as the hand moves. If the user increases the space between the thumb and the index, the selection area can be enlarged and displayed on the screen.

도 6는 본 발명의 제2 실시예에 따른 스마트 디스플레이의 구성도이다.6 is a configuration diagram of a smart display according to a second embodiment of the present invention.

도 6을 참조하여 설명하면, 스마트 디스플레이(70)는 입력부(11), 출력부(12), 제어부(73), 통신부(17), 및 저장부(18)를 포함한다.6, the smart display 70 includes an input unit 11, an output unit 12, a control unit 73, a communication unit 17, and a storage unit 18.

본 실시예에 따른 스마트 디스플레이(70)는 제어부(73)를 제외하고는 상기한 제1 실시예에 따른 스마트 디스플레이와 동일한 구조로 이루어지므로 동일한 구조에 대한 중복 설명은 생략한다.Since the smart display 70 according to the present embodiment has the same structure as the smart display according to the first embodiment except for the control unit 73, a duplicated description of the same structure will be omitted.

제어부(73)는 입력부(11)에서 신호를 전달받아 화면을 제어하며 출력부(12)를 통해서 영상 및 정보를 화면에 표시한다. 제어부(73)는 그리드 형성모듈(73a), 상품 인식모듈(73b), 화면 분할모듈(73c), 상품정보 로딩모듈(73d), 주문 인터페이스 로딩모듈(73e)을 포함한다.The control unit 73 receives a signal from the input unit 11, controls the screen, and displays the image and information on the screen through the output unit 12. [ The control unit 73 includes a grid forming module 73a, a goods recognition module 73b, a screen division module 73c, a goods information loading module 73d and an order interface loading module 73e.

도 8a에 도시된 바와 같이 그리드 형성모듈(73a)은 화면에 그리드(grid)를 형성하여 화면을 복수개의 선택영역으로 분할한다. 그리드의 형성은 방송이 진행 중이거나 동영상이 재생되는 중에 이루어진다.As shown in FIG. 8A, the grid forming module 73a forms a grid on the screen to divide the screen into a plurality of selection areas. The formation of the grid takes place during broadcast or video playback.

도 8b에 도시된 바와 같이 그리드 형성모듈(73a)은 리모컨이나 사용자의 모션으로 지정된 선택영역의 음영을 변화시켜서 지정되는 선택영역을 화면에 표시한다. 이에 따라 사용자는 음영의 변화를 인지하고 원하는 선택영역을 지정할 수 있다.As shown in FIG. 8B, the grid forming module 73a displays a selection area designated on the screen by changing the shade of the selection area designated by the remote control or the motion of the user. Accordingly, the user can recognize a change in shade and specify a desired selection area.

상품 인식모듈(73b)은 지정된 선택영역에 나타난 상품을 인식하고 이를 저장한다. 프레임에는 화면 전체에 나타난 상품에 대한 정보가 결합되어 있으며, 상품 인식모듈(73b)은 프레임에 결합된 상품 정보들 중 선택영역에 나타난 상품의 정보만 추출한다.The goods recognition module 73b recognizes the goods displayed in the designated selection area and stores them. In the frame, information on the product displayed on the entire screen is combined, and the product recognition module 73b extracts only the product information displayed in the selected area among the product information combined in the frame.

화면 분할모듈(73c)은 화면을 복수 개의 표시영역으로 분할한다. 화면 분할모듈(73c)은 동영상이 표시되는 동영상 영역과, 복수 개의 상품의 개략정보가 표시된 상품정보 영역, 및 선택된 상품의 가격을 포함하는 상세 정보가 표시된 상세정보 영역으로 화면을 분할한다.The screen division module 73c divides the screen into a plurality of display areas. The screen division module 73c divides the screen into a moving picture area in which a moving picture is displayed, a product information area in which the summary information of a plurality of items is displayed, and a detailed information area in which detailed information including the price of the selected product is displayed.

상품정보 로딩모듈(73d)은 선택영역에 결합된 상품의 개략정보를 상품정보 영역에 로딩한다. 상품의 개략정보는 상품의 명칭, 상표, 및 상품 이미지를 포함할 수 있다. 컨텐츠가 재생중인 상태에서 상품정보가 로딩되므로 화면이 전환되면 표시되는 프레임에 결합된 상품도 변화한다. 이에 상품정보는 선택영역의 지정 시에 선택영역에 존재하는 상품정보만 로딩하며, 선택영역이 다시 지정되면 지정된 선택영역에 존재하는 상품정보로 갱신한다. The goods information loading module 73d loads the outline information of the goods combined in the selection area into the goods information area. The outline information of the product may include a name of the product, a trademark, and a product image. Since the merchandise information is loaded while the content is being played back, when the screen is switched, the merchandise associated with the displayed frame also changes. Thus, the product information only loads the product information existing in the selection area when designating the selection area, and updates the product information existing in the designated selection area when the selection area is designated again.

상품정보 로딩모듈(73d)은 복수개의 상품을 순서대로 표시하는데, 광고비를 많이 지불한 상품을 프리미엄 상품으로 분류하여 다른 상품보다 앞에 배치할 수 있다.The merchandise information loading module 73d displays a plurality of merchandise items in order. The merchandise paying a large amount of advertising costs can be classified as premium merchandise and placed in front of other merchandise.

또한 상세정보 영역에는 상품정보 영역에 표시된 상품들 중에서 선택된 상품에 대한 상세정보가 표시되는데, 상세정보는 상품의 가격, 상품의 재질, 제조원, 색상, 크기, 및 상품을 판매하는 웹 사이트 주소를 포함할 수 있다. 상세정보는 프레임에 결합되어 있을 수도 있으나, 유무선통신망을 통해서 전송 받아 화면에 표시하는 것이 바람직하다. 상품의 가격과 재고, 등은 수시로 변하는 정보이므로 이를 실시간으로 수신하여 제공할 수 있다.Further, the detailed information area displays detailed information about the selected commodity among the commodities displayed in the commodity information area. The detailed information includes the price of the commodity, the material of the commodity, the source, the color, the size, can do. The detailed information may be coupled to the frame, but it is preferable that the detailed information is transmitted through the wired / wireless communication network and displayed on the screen. The price of goods, inventory, etc. are information that changes from time to time, so they can be received and provided in real time.

주문 인터페이스 로딩모듈(73e)은 화면에 상품의 수량을 선택하고 결제를 위한 정보를 입력할 수 있도록 입력창을 생성한다. 주문 인터페이스 로딩모듈(73e)은 사용자가 상품을 선택하는 신호가 입력되면 수량 선택과 결제를 위한 입력창을 생성하고 사용자는 리모컨 등을 이용하여 수량을 선택하고 결제 정보를 입력할 수 있다. 결제 정보는 신용카드 정보, 무선기기를 통해서 전송된 인증번호 등으로 이루어질 수 있다.The order interface loading module 73e creates an input window for selecting the quantity of goods on the screen and inputting information for settlement. When the user inputs a signal for selecting a product, the order interface loading module 73e generates an input window for selecting a quantity and a payment, and the user can select a quantity and enter payment information using a remote controller or the like. The payment information may include credit card information, an authentication number transmitted through the wireless device, and the like.

도 7은 본 발명의 제2 실시예에 따른 스마트 디스플레이를 이용한 광고 방법을 나타낸 흐름도이다.7 is a flowchart illustrating an advertisement method using a smart display according to a second embodiment of the present invention.

도 7를 참조하여 설명하면, 본 실시예에 따른 스마트 디스플레이를 이용한 광고 방법은 신호가 입력되면, 그리드를 형성하여 복수개의 선택영역으로 분할하는 그리드 형성단계(S201)와 지정된 선택영역에 표시된 상품들을 인식하는 상품 인식단계(S202)와 화면을 복수개의 표시영역으로 분할하는 화면 분할단계(S203)와 지정된 선택영역에 나타난 상품정보를 표시하는 상품정보 로딩단계(S204)를 포함한다.Referring to FIG. 7, the advertisement method using the smart display according to the present embodiment includes a grid forming step (S201) of forming a grid and dividing the grid into a plurality of selection areas when a signal is input, A screen dividing step S203 for dividing the screen into a plurality of display areas, and a product information loading step S204 for displaying the product information displayed in the designated selection area.

그리드 형성단계(S201)는 화면에 그리드(grid)를 형성하여 화면을 복수개의 선택영역으로 분할한다. 그리드의 형성은 방송이 진행 중이거나 동영상이 재생되는 중에 이루어진다. 그리드 형성단계(S201)는 리모컨이나 사용자의 모션으로 지정된 선택영역의 음영을 변화시켜서 지정되는 선택영역을 화면에 표시한다. 이에 따라 사용자는 음영의 변화를 인지하고 원하는 선택영역을 지정할 수 있다.The grid forming step S201 forms a grid on the screen and divides the screen into a plurality of selection areas. The formation of the grid takes place during broadcast or video playback. The grid forming step S201 displays a selection area designated on the screen by changing the shade of the selection area designated by the remote controller or the user's motion. Accordingly, the user can recognize a change in shade and specify a desired selection area.

상품 인식단계(S202)은 지정된 선택영역에 나타난 상품을 인식하고 이를 저장한다. 상품 인식단계(S202)는 프레임에 결합된 상품 정보들 중 선택영역에 나타난 상품의 정보만 추출한다.The product recognizing step (S202) recognizes the goods displayed in the designated selection area and stores them. In the product recognizing step S202, only the information of the goods displayed in the selected area among the goods information combined in the frame is extracted.

화면 분할단계는(S203)은 선택영역을 지정하는 신호가 생성되면 화면을 복수개의 표시영역으로 분할한다. 화면 분할단계는(S203)은 화면을 동영상이 표시되는 동영상 영역과, 복수 개의 상품의 개략정보가 표시된 상품정보 영역, 및 선택된 상품의 가격을 포함하는 상세 정보가 표시된 상세정보 영역으로 화면을 분할한다. In the screen dividing step (S203), when a signal designating a selection area is generated, the screen is divided into a plurality of display areas. In the screen dividing step (S203), the screen is divided into a moving picture area in which a moving picture is displayed, a product information area in which approximate information of a plurality of items is displayed, and a detailed information area in which detailed information including the price of the selected product is displayed .

상품정보 로딩단계(S204)는 선택영역에 결합된 상품정보를 인식하여 상품목록을 생성하고, 상품정보 영역에 상품의 명칭, 상표, 및 상품 이미지를 포함하는 개략정보를 표시한다. The merchandise information loading step S204 recognizes the merchandise information combined with the selection area to create a merchandise list, and displays rough information including the merchandise name, trademark, and merchandise image in the merchandise information area.

상품정보 로딩단계(S104)에서는 복수개의 상품을 순서대로 표시하는데, 광고비를 많이 지불한 상품을 프리미엄 상품으로 분류하여 다른 상품보다 앞에 배치할 수 있다.In the merchandise information loading step S104, a plurality of merchandise items are displayed in order, and the merchandise paid a large amount of advertisement cost can be classified as premium merchandise and arranged in front of other merchandise.

또한 상세정보 영역에는 상품정보 영역에 표시된 상품들 중 선택된 상품에 대한 상세정보가 표시되는데, 상세정보는 상품의 가격, 상품의 재질, 제조원, 및 상품을 판매하는 웹 사이트를 포함할 수 있다. 상세정보는 프레임에 결합되어 있을 수도 있으나, 유무선통신망을 통해서 전송 받아 화면에 표시하는 것이 바람직하다. 상품의 가격과 재고, 등은 수시로 변하는 정보이므로 이를 실시간으로 수신하여 제공할 수 있다.In the detailed information area, detailed information on a selected commodity among the commodities displayed in the commodity information area is displayed. The detailed information may include a price of the commodity, a material of the commodity, a source of the commodity, and a website for selling the commodity. The detailed information may be coupled to the frame, but it is preferable that the detailed information is transmitted through the wired / wireless communication network and displayed on the screen. The price of goods, inventory, etc. are information that changes from time to time, so they can be received and provided in real time.

본 실시예에 따른 스마트 디스플레이를 이용한 광고 방법은 상품의 수량을 선택하고 결제를 위한 정보를 입력할 수 있도록 입력창을 생성하는 주문 인터페이스 로딩단계를 더 포함한다.The advertisement method using the smart display according to the present embodiment further includes an order interface loading step of creating an input window for selecting a quantity of goods and inputting information for settlement.

주문 인터페이스 로딩단계에서는 사용자가 상품을 선택하는 신호가 입력되면 수량 선택과 결제를 위한 입력창을 생성하고 사용자는 리모컨 등을 이용하여 수량을 선택하고 결제 정보를 입력할 수 있다. 결제 정보는 신용카드 정보, 무선기기를 통해서 전송된 인증번호 등으로 이루어질 수 있다.In the order interface loading step, when the user inputs a signal for selecting a product, an input window for selecting a quantity and a payment is created, and a user can select a quantity and enter payment information using a remote controller or the like. The payment information may include credit card information, an authentication number transmitted through the wireless device, and the like.

상기에서는 본 발명의 바람직한 실시예에 대하여 설명하였지만, 본 발명은 이에 한정되는 것이 아니고 특허청구범위와 발명의 상세한 설명 및 첨부한 도면의 범위 안에서 여러 가지로 변형하여 실시하는 것이 가능하고 이 또한 본 발명의 범위에 속하는 것은 당연하다.While the present invention has been described in connection with what is presently considered to be practical exemplary embodiments, it is to be understood that the invention is not limited to the disclosed embodiments, but, on the contrary, Of course.

10: 스마트 디스플레이 11: 입력부
11a: 카메라 11b: 형상 인식모듈
11c: 간격 측정모듈 12: 출력부
13, 73: 제어부 13a: 화면 캡쳐모듈
13b: 이미지 목록 로딩모듈 13c, 73c: 화면 분할모듈
13d, 73d: 상품정보 로딩모듈
13e, 73e: 주문 인터페이스 로딩모듈
13f: 선택영역 확대모듈
17: 통신부 18: 저장부
20: 셋톱박스 30: 서버
40: 리모컨 50: 스마트 모바일 기기
60: 방송통신망 73a: 그리드 형성모듈
73b: 상품 인식모듈
10: smart display 11: input
11a: camera 11b: shape recognition module
11c: interval measurement module 12: output section
13, 73: control unit 13a: screen capture module
13b: image list loading module 13c, 73c:
13d, 73d: Commodity information loading module
13e, 73e: Custom Interface Loading Module
13f: Selection Area Expansion Module
17: communication unit 18:
20: set-top box 30: server
40: Remote control 50: Smart mobile device
60: Broadcast communication network 73a: Grid forming module
73b: goods recognition module

Claims (11)

사용자의 동작을 인식하여 신호를 생성하는 입력부; 및
입력된 신호에 의하여 화면을 캡쳐하여 이미지로 저장하고 저장된 이미지에 포함된 상품에 대한 정보를 제공하는 제어부;
를 포함하고,
상기 제어부는, 화면을 이미지로 저장하는 화면 캡쳐모듈과, 저장된 이미지 목록을 화면에 표시하는 이미지 목록 로딩모듈과, 화면을 분할하여 이미지를 표시하는 화면 분할모듈과, 분할된 화면에 상품정보를 표시하는 상품정보 로딩모듈을 포함하고,
상기 제어부는 이미지 상에 그리드(grid)를 형성하여 이미지를 복수개의 선택영역으로 분할하고, 선택영역들 중 어느 하나를 선택하는 신호가 입력되면 선택영역을 확대하는 선택영역 확대모듈을 포함하고,
상기 상품정보 로딩모듈은 상기 선택영역들 중 어느 하나를 선택하는 신호가 입력되면 선택된 영역에만 표시된 상품들의 정보를 표시하는 스마트 디스플레이.
An input unit for recognizing the operation of the user and generating a signal; And
A controller for capturing a screen by an input signal and storing the image as an image and providing information on a product included in the stored image;
Lt; / RTI >
The control unit may include a screen capture module that stores a screen as an image, an image list loading module that displays the stored image list on a screen, a screen division module that displays an image by dividing the screen, A goods information loading module,
Wherein the control unit includes a selection region enlargement module for dividing the image into a plurality of selection regions by forming a grid on the image and enlarging the selection region when a signal for selecting one of the selection regions is input,
Wherein the product information loading module displays information of products displayed only in the selected area when a signal for selecting any one of the selection areas is input.
제1 항에 있어서,
상기 입력부는 사용자의 동작을 촬영하는 카메라와 사용자의 동작에서 손가락 움직임을 추출하여 인식하는 형상 인식모듈, 및 손가락 사이의 간격을 측정하여 이의 변화에 따라 신호를 생성하는 간격 측정모듈을 포함하는 스마트 디스플레이.
The method according to claim 1,
The input unit includes a camera for photographing a user's operation, a shape recognition module for extracting and recognizing finger movements in a user's operation, and an interval display module for measuring a distance between the fingers and generating a signal according to the change, .
청구항 3은(는) 설정등록료 납부시 포기되었습니다.Claim 3 has been abandoned due to the setting registration fee. 제2 항에 있어서,
상기 간격 측정모듈은 엄지와 검지 사이의 간격 변화를 측정하여 입력신호를 생성하는 스마트 디스플레이.
3. The method of claim 2,
Wherein the interval measurement module measures an interval change between the thumb and the index and generates an input signal.
청구항 4은(는) 설정등록료 납부시 포기되었습니다.Claim 4 has been abandoned due to the setting registration fee. 제2 항에 있어서,
상기 간격 측정모듈은 양손의 엄지와 검지에 의하여 형성되는 사각형상을 선택 영역으로 인식하여 입력신호를 생성하는 스마트 디스플레이.
3. The method of claim 2,
Wherein the interval measurement module recognizes a square shape formed by the thumb and the index finger of both hands as a selection area to generate an input signal.
청구항 5은(는) 설정등록료 납부시 포기되었습니다.Claim 5 has been abandoned due to the setting registration fee. 제2 항에 있어서,
상기 화면 캡쳐모듈은 캡쳐된 이미지에 나타난 상품의 정보를 상기 이미지에 결합하여 저장하는 스마트 디스플레이.
3. The method of claim 2,
Wherein the screen capture module combines information of goods displayed in the captured image with the image and stores the combined information.
제1 항에 있어서,
상기 화면 분할모듈은 이미지가 표시되는 이미지 영역과, 복수 개의 상품의 개략정보가 표시된 상품정보 영역, 및 선택된 상품의 가격을 포함하는 상세 정보가 표시된 상세정보 영역으로 화면을 분할하는 스마트 디스플레이.
The method according to claim 1,
Wherein the screen division module divides the screen into an image region in which an image is displayed, a product information region in which approximate information on a plurality of products is displayed, and a detailed information region in which detailed information including a price of the selected product is displayed.
제6 항에 있어서,
상기 상품정보 로딩모듈은 저장된 이미지에 포함된 상품을 인식하여 상품목록을 생성하는 스마트 디스플레이.
The method according to claim 6,
The merchandise information loading module recognizes the merchandise included in the stored image and generates a merchandise list.
제7 항에 있어서,
상기 제어부는 상품의 수량을 선택하고 결제를 위한 정보를 입력할 수 있도록 입력창을 생성하는 주문 인터페이스 로딩모듈을 포함하는 스마트 디스플레이.
8. The method of claim 7,
Wherein the control unit includes an order interface loading module for generating an input window for selecting a quantity of goods and inputting information for settlement.
삭제delete 삭제delete 삭제delete
KR1020130123425A 2013-10-16 2013-10-16 Smart display having screen division module KR101536267B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020130123425A KR101536267B1 (en) 2013-10-16 2013-10-16 Smart display having screen division module

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130123425A KR101536267B1 (en) 2013-10-16 2013-10-16 Smart display having screen division module

Publications (2)

Publication Number Publication Date
KR20150044498A KR20150044498A (en) 2015-04-27
KR101536267B1 true KR101536267B1 (en) 2015-11-23

Family

ID=53036794

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130123425A KR101536267B1 (en) 2013-10-16 2013-10-16 Smart display having screen division module

Country Status (1)

Country Link
KR (1) KR101536267B1 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102368847B1 (en) 2017-04-28 2022-03-02 삼성전자주식회사 Method for outputting content corresponding to object and electronic device thereof
KR102071128B1 (en) * 2018-02-23 2020-01-29 한국철도기술연구원 real-time status information extraction method for train using image processing and system

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2011142317A1 (en) * 2010-05-11 2011-11-17 日本システムウエア株式会社 Gesture recognition device, method, program, and computer-readable medium upon which program is stored

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2011142317A1 (en) * 2010-05-11 2011-11-17 日本システムウエア株式会社 Gesture recognition device, method, program, and computer-readable medium upon which program is stored

Also Published As

Publication number Publication date
KR20150044498A (en) 2015-04-27

Similar Documents

Publication Publication Date Title
KR101536267B1 (en) Smart display having screen division module
KR20150120899A (en) Advertising method using smart display having screen division module
KR101566231B1 (en) Smart display
KR101506657B1 (en) Advertising method using smart display having seekbar loading module
KR101453824B1 (en) Smart display having seekbar loading module
KR20150044500A (en) Advertising method using smart display having screen division module
KR101519035B1 (en) Smart display having icon loading part
KR20150090314A (en) Advertising method using smart display having division area changing module
KR101519032B1 (en) Smart display having search cursor forming module
KR101566227B1 (en) Advertising method using smart display
KR101519027B1 (en) Smart display
KR20150044507A (en) Smart display having searching module for product of person
KR20150068347A (en) Smart display
KR101566230B1 (en) Advertising method using smart display
KR101664004B1 (en) Method for providing store impormation using smart display
KR101611991B1 (en) Smart display having halo area forming module
KR101664093B1 (en) Advertising method using smart display having halo area forming module
KR20150044520A (en) Smart display having background detecting module
KR101566235B1 (en) Smart display having product image extraction module
KR101519041B1 (en) Advertising method using smart display
KR101612002B1 (en) Advertising method using smart display having advertisment area forming module
KR101769460B1 (en) Advertising method using smart display having icon assembly loading module
KR20150121687A (en) Advertising method using smart display having product image extraction module
KR20150056755A (en) Advertising method using smart display having moving path detecting modele
KR101566236B1 (en) Smart display having icon assembly loading module

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20180709

Year of fee payment: 4