KR101480300B1 - Interactive contents provision system and method using relative distance between the main screen and the second screen - Google Patents

Interactive contents provision system and method using relative distance between the main screen and the second screen Download PDF

Info

Publication number
KR101480300B1
KR101480300B1 KR20120137527A KR20120137527A KR101480300B1 KR 101480300 B1 KR101480300 B1 KR 101480300B1 KR 20120137527 A KR20120137527 A KR 20120137527A KR 20120137527 A KR20120137527 A KR 20120137527A KR 101480300 B1 KR101480300 B1 KR 101480300B1
Authority
KR
South Korea
Prior art keywords
screen device
content
marker
screen
positional relationship
Prior art date
Application number
KR20120137527A
Other languages
Korean (ko)
Other versions
KR20140072297A (en
Inventor
최준균
안상홍
박상민
오현택
양진홍
박효진
장봉진
유인식
Original Assignee
한국과학기술원
주식회사 유비온
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국과학기술원, 주식회사 유비온 filed Critical 한국과학기술원
Priority to KR20120137527A priority Critical patent/KR101480300B1/en
Publication of KR20140072297A publication Critical patent/KR20140072297A/en
Application granted granted Critical
Publication of KR101480300B1 publication Critical patent/KR101480300B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1626—Constructional details or arrangements for portable computers with a single-body enclosure integrating a flat display, e.g. Personal Digital Assistants [PDAs]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F15/00—Digital computers in general; Data processing equipment in general
    • G06F15/16—Combinations of two or more digital computers each having at least an arithmetic unit, a program unit and a register, e.g. for a simultaneous processing of several programs
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/147—Digital output to display device ; Cooperation and interconnection of the display device with other functional units using display panels

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Tourism & Hospitality (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • Software Systems (AREA)
  • Economics (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Information Transfer Between Computers (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

본 발명의 실시예는 메인 스크린과 제2 스크린 간의 상대적인 위치를 이용하여 인터랙티브 콘텐트를 제공하기 위한 시스템과 방법에 관한 것이다. 인터랙티브 콘텐트 제공 시스템에 있어서, 인터랙티브 콘텐트를 제공하는 콘텐트 서버는 제1 스크린 장치와 제2 스크린 장치 간의 상대적인 위치 관계를 수신하는 위치 감지부; 상대적인 위치 관계에 따라 콘텐트를 정렬하는 콘텐트 정렬부; 및 정렬된 콘텐트의 배치 정보를 제1 스크린 장치와 제2 스크린 장치로 각각 전달하는 정보 전달부를 포함하는 것을 특징으로 하는 인터랙티브 콘텐트 제공 시스템이 제공될 수 있다.An embodiment of the present invention relates to a system and method for providing interactive content using a relative location between a main screen and a second screen. 1. An interactive content providing system, comprising: a position sensing unit for receiving a relative positional relationship between a first screen device and a second screen device, the content server providing interactive content; A content arranging unit for arranging contents according to a relative positional relationship; And an information delivery unit for delivering the arrangement information of the sorted content to the first screen device and the second screen device, respectively.

Description

메인 스크린과 제2 스크린 간의 상대 위치를 이용한 인터랙티브 콘텐트 제공 시스템 및 그 방법{INTERACTIVE CONTENTS PROVISION SYSTEM AND METHOD USING RELATIVE DISTANCE BETWEEN THE MAIN SCREEN AND THE SECOND SCREEN}BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an interactive content providing system using a relative position between a main screen and a second screen,

본 발명의 실시예는 메인 스크린과 제2 스크린 간의 상대적인 위치를 이용하여 인터랙티브 콘텐트를 제공하기 위한 시스템과 방법에 관한 것이다.An embodiment of the present invention relates to a system and method for providing interactive content using a relative location between a main screen and a second screen.

최근 들어 스마트 폰, 태블릿 PC 등의 보급에 따라 사용자가 콘텐트를 소비할 때에 세컨드(Second) 스크린 환경이 활성화되고 있다.Recently, with the spread of smart phones and tablet PCs, the second screen environment is activated when the user consumes the content.

예컨대, TV를 보면서 스마트 폰이나 태블릿으로 관련된 내용을 SNS를 통해 공유하는 것, 그리고 해당 TV를 시청하면서 궁금한 점이나, 관련된 내용을 검색하는 것, 또는 관련 제작사 또는 방송 서비스에 접근해 해당 콘텐트의 내용을 찾아보는 등, 두 가지의 스크린 장치를 한꺼번에 사용하는 환경이 활성화되고 있다.For example, while watching TV, sharing related contents through a SNS through a smart phone or a tablet, searching for a question or related content while viewing the TV, or accessing a related publishing company or a broadcast service, The environment in which two screen devices are used at once is being activated.

만약, 사용자가 TV를 통해서 시청중인 콘텐트 또는 사용중인 콘텐트에 대한 부가 정보를 제2 스크린에서 이용하기 위해서는 사용자가 직접 해당 콘텐트의 부가 정보를 검색하기 위해 검색어를 입력하고, 링크를 일일이 확인하면서 해당 콘텐트의 위치에 접근해야 하기 때문에 실시간으로 중요한 부분을 놓치는 등의 불편함이 발생하기도 한다.In order to use the additional information about the content or the content being viewed through the TV on the second screen, the user inputs a search word to search for the additional information of the corresponding content, It is necessary to approach the position of the real time, such as missing an important part may be inconvenient.

더불어, 사용자의 주의가 분산되기 때문에 시청 또는 사용중인 콘텐트에 집중하기 위해서는 스스로 주의를 환기시켜야 한다.In addition, because users are distracted, they need to be careful to focus on the content they are watching or using.

따라서, 본 발명의 실시예를 통해 사용자의 불편함을 해소하기 위한 시스템과 방법을 제공한다.Accordingly, the present invention provides a system and method for solving the inconvenience of users through the embodiments of the present invention.

본 발명의 실시예는 상기에 기재한 사용자의 불편함을 해소하기 위한 것으로, 각 스크린이 서로의 상대적인 위치를 감지하는 구조를 가지는 시스템과 방법을 제시하고, 세컨드 스크린의 콘텐트 동기화 기능을 제시하고자 한다.Embodiments of the present invention are directed to a system and method for solving the above-mentioned inconvenience of a user and having a structure in which each screen senses a relative position of each other, and a content synchronization function of a secondary screen is proposed .

이에, 단말 장치 간의 질의를 통해 서비스 정보를 획득하고, 획득한 정보를 기반으로 세컨드 스크린에 적합한 서비스를 서버 측에 요청해 알아내도록 한다.Accordingly, the service information is obtained through a query between the terminal devices, and a service suitable for the second screen is requested on the basis of the obtained information to request the server.

또한, 본 발명의 실시예를 통해 프라이머리(Primary) 스크린과 세컨드 스크린이 밀접하게 연계된 새로운 콘텐트를 제공하는 서비스의 창출이 가능하도록 한다.In addition, through the embodiment of the present invention, it is possible to create a service for providing new content in which the primary screen and the secondary screen are closely linked.

인터랙티브 콘텐트 제공 시스템에 있어서, 인터랙티브 콘텐트를 제공하는 콘텐트 서버는 제1 스크린 장치와 제2 스크린 장치 간의 상대적인 위치 관계를 수신하는 위치 감지부; 상대적인 위치 관계에 따라 콘텐트를 정렬하는 콘텐트 정렬부; 및 정렬된 콘텐트의 배치 정보를 제1 스크린 장치와 제2 스크린 장치로 각각 전달하는 정보 전달부를 포함하는 것을 특징으로 하는 인터랙티브 콘텐트 제공 시스템이 제공될 수 있다.1. An interactive content providing system, comprising: a position sensing unit for receiving a relative positional relationship between a first screen device and a second screen device, the content server providing interactive content; A content arranging unit for arranging contents according to a relative positional relationship; And an information delivery unit for delivering the arrangement information of the sorted content to the first screen device and the second screen device, respectively.

일측에 있어서, 제1 스크린 장치는 TV, 컴퓨터의 모니터, 빔 프로젝터와 같이 일정 크기보다 큰 디스플레이를 가지는 장치이며, 제2 스크린 장치는 휴대폰, PDA, 태블릿 PC와 같이 사용자에게 휴대가 용이한 사용자 단말이 될 수 있다.In one aspect, the first screen device is a device having a display larger than a predetermined size, such as a TV, a computer monitor, and a beam projector, and the second screen device is a portable device such as a mobile phone, a PDA, .

또 다른 측면에 있어서, 위치 감지부는 제2 스크린 장치를 통해 계산된 상대적인 위치 관계를 수신할 수 있다.In yet another aspect, the position sensing unit may receive the calculated relative positional relationship via the second screen device.

또 다른 측면에 있어서, 콘텐트 정렬부는 제1 스크린 장치에 노출되는 콘텐트의 내용에 부합하도록 상대적인 위치 관계에 따라 상기 제2 콘텐트의 노출 콘텐트를 결정할 수 있다.In yet another aspect, the content arrangement may determine the exposure content of the second content according to a relative positional relationship to match the content of the content exposed to the first screen device.

또 다른 측면에 있어서, 콘텐트 정렬부는 제2 스크린 장치에 노출되는 콘텐트와 상대적인 위치 관계에 따라 제1 스크린 장치의 노출 콘텐트를 결정할 수 있다.In yet another aspect, the content arrangement may determine the exposure content of the first screen device according to the relative positional relationship with the content exposed to the second screen device.

인터랙티브 콘텐트 제공 시스템에 있어서, 일반 콘텐트를 디스플레이하는 제1 스크린 장치; 제1 스크린 장치를 촬영하면서 제1 스크린 장치와의 상대적인 위치 관계를 계산하는 제2 스크린 장치; 및 상대적인 위치 관계에 기반하여 일반 콘텐트의 배치를 정렬하는 콘텐트 서버를 포함하고, 콘텐트 서버는 제1 스크린 장치의 콘텐트 정렬 정보인 제1 배치 정보와 제2 스크린 장치의 콘텐트 정렬 정보인 제2 배치 정보를 결정하여 각각 전송하는 것을 특징으로 하는 인터랙티브 콘텐트 제공 시스템이 제공될 수 있다.An interactive content providing system, comprising: a first screen device for displaying general content; A second screen device for calculating a relative positional relationship with the first screen device while photographing the first screen device; And a content server for sorting the arrangement of the general content based on the relative positional relationship, wherein the content server comprises first layout information which is content arrangement information of the first screen device, second layout information which is content arrangement information of the second screen device, And transmits the contents to the user terminal. The interactive content providing system may be provided.

일측에 있어서, 제2 스크린 장치는 제1 스크린 장치의 존재 여부를 식별하는 스크린 인식부; 제1 스크린 장치와의 상대적인 위치 관계를 인식하는 콘텐트 인식부; 상대적인 위치 관계를 기반으로 제2 배치 정보를 콘텐트 서버로 요청하는 콘텐트 요청부; 및 콘텐트 서버로부터 요청한 제2 배치 정보를 수신하여 디스플레이하는 콘텐트 표시부를 포함할 수 있다.In one aspect, the second screen device includes: a screen recognizer that identifies whether the first screen device is present; A content recognition unit for recognizing a relative positional relationship with the first screen device; A content request unit for requesting a second placement information to a content server based on a relative positional relationship; And a content display unit for receiving and displaying the second placement information requested from the content server.

인터랙티브 콘텐트 제공 방법에 있어서, 제1 스크린 장치와 제2 스크린 장치 간의 상대적인 위치 관계를 수신하는 단계; 상대적인 위치 관계에 따라 콘텐트를 정렬하는 단계; 및 정렬된 콘텐트의 배치 정보를 제1 스크린 장치와 상기 제2 스크린 장치로 각각 전달하는 단계를 포함하는 것을 특징으로 하는 인터랙티브 콘텐트 제공 방법이 제공될 수 있다.A method for providing interactive content, comprising: receiving a relative positional relationship between a first screen device and a second screen device; Aligning the content according to a relative positional relationship; And delivering the arrangement information of the sorted contents to the first screen device and the second screen device, respectively.

디스플레이에 일반 콘텐트를 노출하는 제1 스크린 장치; 및 제1 스크린 장치를 촬영하면서 제1 스크린 장치와의 상대적인 위치 관계를 식별하는 제2 스크린 장치를 포함하고, 제1 스크린 장치와 제2 스크린 장치는 상대적인 위치 관계에 따라 일반 콘텐트의 배치와 촬영하는 콘텐트의 배치를 정렬하는 것을 특징으로 하는 인터랙티브 콘텐트 제공 시스템이 제공될 수 있다.A first screen device for exposing normal content to a display; And a second screen device that identifies a relative positional relationship with the first screen device while photographing the first screen device, wherein the first screen device and the second screen device are arranged such that, And arranging the arrangement of the contents.

본 발명의 실시예를 통해 각 스크린이 서로의 상대적인 위치를 감지하는 구조를 가지는 시스템과 방법을 제시하고, 세컨드 스크린의 콘텐트 동기화 기능을 제시할 수 있다.A system and method having a structure in which each screen senses the relative position of each other through the embodiment of the present invention is presented and a content synchronization function of the second screen can be presented.

이에, 단말 장치 간의 질의를 통해 서비스 정보를 획득하고, 획득한 정보를 기반으로 세컨드 스크린에 적합한 서비스를 서버 측에 요청해 알아낼 수 있다.Accordingly, it is possible to acquire the service information through inquiry between the terminal apparatuses, and to request the service suitable for the second screen based on the acquired information, and to inquire of the server side.

또한, 본 발명의 실시예를 통해 프라이머리(Primary) 스크린과 세컨드 스크린이 밀접하게 연계된 새로운 콘텐트를 제공하는 서비스의 창출이 가능해진다.In addition, through the embodiment of the present invention, it becomes possible to create a service for providing new content in which the primary screen and the secondary screen are closely linked.

도 1은 본 발명의 일실시예에 있어서, 인터랙티브 콘텐트 제공 시스템을 실시하기 위한 환경을 도시한 것이다.
도 2는 본 발명의 일실시예에 있어서, 제1 스크린 장치와 제2 스크린 장치의 상대적인 위치 관계를 설명하기 위한 도면이다.
도 3은 본 발명의 일실시예에 있어서, 인터랙티브 콘텐트 제공 시스템을 통해 나타날 수 있는 콘텐트의 실시예를 설명하기 위한 도면이다.
도 4는 본 발명의 일실시예에 있어서, 인터랙티브 콘텐트 제공 시스템을 통해 나타날 수 있는 또 다른 콘텐트의 실시예를 설명하기 위한 도면이다.
도 5는 본 발명의 일실시예에 있어서, 제1 스크린 장치와 제2 스크린 장치의 상대적인 위치 관계를 이용하여 제공될 수 있는 서비스의 실시예를 위한 도면이다.
도 6은 본 발명의 일실시예에 있어서, 인터랙티브 콘텐트 제공 시스템 중 콘텐트 서버의 구성을 설명하기 위한 블록도이다.
도 7은 본 발명의 일실시예에 있어서, 인터랙티브 콘텐트 제공 시스템 중 제2 스크린 장치의 구성을 설명하기 위한 블록도이다.
도 8은 본 발명의 일실시예에 있어서, 인터랙티브 콘텐트 제공 방법을 설명하기 위한 흐름도이다.1 illustrates an environment for implementing an interactive content providing system in an embodiment of the present invention.
2 is a view for explaining a relative positional relationship between the first screen device and the second screen device in an embodiment of the present invention.
FIG. 3 is a diagram for explaining an embodiment of content that can be presented through an interactive content providing system, according to an embodiment of the present invention.
FIG. 4 is a diagram for explaining another embodiment of content that may be presented through an interactive content providing system, according to an embodiment of the present invention.
5 is a diagram for an embodiment of a service that can be provided using a relative positional relationship between a first screen device and a second screen device, according to an embodiment of the present invention.
6 is a block diagram illustrating a configuration of a content server in an interactive content providing system according to an embodiment of the present invention.
7 is a block diagram for explaining a configuration of a second screen device in an interactive content providing system according to an embodiment of the present invention.
8 is a flowchart illustrating an interactive content providing method according to an embodiment of the present invention.

이하, 제1 스크린 장치와 제2 스크린 장치 간의 상대 위치 감지 시스템과 그 방법에 대해서 첨부된 도면을 참조하여 자세히 설명한다.Hereinafter, a system for detecting a relative position between a first screen device and a second screen device and a method thereof will be described in detail with reference to the accompanying drawings.

도 1은 본 발명의 일실시예에 있어서, 인터랙티브 콘텐트 제공 시스템의 시스템 구조를 설명하기 위한 도면이다. 메인 스크린, 프라이머리(Primary) 스크린 장치인 제1 스크린 장치(110)와 세컨드 스크린 장치인 제2 스크린 장치(120), 그리고 상대 위치 감지 동작을 위해 필요한 데이터를 제1 스크린 장치(110)와 제2 스크린 장치(120) 사이에서 제공하는 콘텐트 서버(130)로 구성될 수 있다.1 is a diagram for explaining a system structure of an interactive content providing system according to an embodiment of the present invention. A first screen device 110 as a primary screen device, a second screen device 120 as a second screen device, and data necessary for a relative position sensing operation to the first screen device 110 And a content server 130 provided between the two screen apparatuses 120.

제1 스크린 장치(110)는 TV나 빔 프로젝터 등과 같은 대형 스크린 장치로, 제2 스크린 장치의 디스플레이보다 큰 디스플레이를 가질 수 있으며, 사용자에게 다양한 콘텐트를 제공하는 장치에 대한 것이다. 예컨대, TV 채널에서 드라마, 다큐멘터리 등의 프로그램이나 영화, 만화 등의 콘텐트를 대형 디스플레이로 제공할 수 있다.The first screen device 110 may be a large screen device such as a TV or a beam projector, and may have a larger display than the display of the second screen device, and is for a device that provides a variety of content to the user. For example, contents such as drama and documentary programs, movies, and cartoons can be provided on a large-sized display on a TV channel.

제2 스크린 장치(120)는 휴대폰, PDA, 태블릿 PC 등 휴대가 용이하며, 제1 스크린 장치(110)보다 비교적 작은 디스플레이를 가지는 사용자 단말로, 제1 스크린 장치(110)를 촬영하기 위한 카메라를 구비하고 있는 장치가 이에 해당할 수 있는데, 실시예에 있어서, 제1 스크린 장치(110)에서 제공하는 콘텐트와 관련된 검색을 실시하는 등의 역할을 수행하는 장치가 될 수 있다.The second screen device 120 is a user terminal having a display relatively easy to carry, such as a mobile phone, a PDA, and a tablet PC, and having a relatively smaller display than the first screen device 110, and a camera for photographing the first screen device 110 The first screen device 110 may be a device that performs a search related to the content provided by the first screen device 110, for example.

실시예에 있어서, 본 발명의 실시예는 제1 스크린 장치(110)와 제2 스크린 장치(120)가 상대적인 위치를 식별하여 콘텐트 서버(130)를 통해 제2 스크린 장치의 콘텐트와 제1 스크린 장치와 동기화되는 구성을 제공한다. 여기서, 제1 스크린 장치(110)와 제2 스크린 장치(120), 그리고 콘텐트 서버(130)는 유무선 네트워크 통신을 통해 콘텐트, 위치 정보 등의 데이터를 송수신할 수 있다.In an embodiment, the embodiment of the present invention identifies the relative positions of the first screen device 110 and the second screen device 120 and transmits the content of the second screen device and the first screen device 120 via the content server 130, Lt; / RTI > Here, the first screen device 110, the second screen device 120, and the content server 130 can transmit and receive data such as content and location information through wired / wireless network communication.

이를 위해서, 제2 스크린 장치(120)는 제1 스크린 장치(110)에서 일반 콘텐트를 디스플레이에 노출할 때에 구비되어 있는 카메라를 이용하여 제1 스크린 장치(110)를 촬영하며, 촬영하는 위치에 따라 제1 스크린 장치(110)와 제2 스크린 장치(120) 간의 상대적인 위치 관계를 계산할 수 있다. 이에, 계산한 위치 관계에 대해서 제1 스크린 장치(110)로 전송할 수 있으며, 제1 스크린 장치(110)의 일반 콘텐트와 동기화를 위하여 콘텐트 서버(130)로 해당 위치에 대하여 콘텐트를 재배치한 정보의 수신을 요청할 수 있다.To this end, the second screen device 120 photographs the first screen device 110 by using a camera provided when the general content is exposed on the display in the first screen device 110, The relative positional relationship between the first screen device 110 and the second screen device 120 can be calculated. The calculated positional relationship may be transmitted to the first screen device 110. In order to synchronize with the general content of the first screen device 110, the content server 130 may transmit information It can request reception.

콘텐트 서버(130)는 제1 스크린 장치(110)에서 노출하는 일반 콘텐트의 종류에 따라 노출 콘텐트를 재배치, 재정렬하기 위한 정보를 저장하고 있으며, 제1 스크린 장치(110)와 제2 스크린 장치(120)로부터 상대적인 위치 정보와 함께 해당 위치 정보에 따른 배치 정보를 요청하면 이에 응답하여 각각 제1 스크린 장치(110)에 노출되고 있는 콘텐트를 재배치한 제1 배치 정보를 전달하고, 제2 스크린 장치(120)에 노출되는 콘텐트를 재배치한 제2 배치 정보를 해당 스크린 장치로 전달할 수 있다.The content server 130 stores information for rearranging and rearranging the exposed content according to the type of general content exposed by the first screen device 110. The first screen device 110 and the second screen device 120 The second screen device 120 transmits the first placement information, which relocates the content exposed in the first screen device 110, to the second screen device 120 in response to the position information, The second layout information rearranged by the content can be transmitted to the corresponding screen device.

이와 같이, 제1 스크린 장치(110)와 제2 스크린 장치(120)가 상호 간의 위치를 식별함으로써 각 스크린 장치에서 노출되는 콘텐트가 동기화되어 나타날 수 있으며, 이에 시스템 사용자의 주의를 분산시키지 않고 새로운 콘텐트를 이용할 수 있도록 한다.In this way, by identifying the positions of the first screen device 110 and the second screen device 120, the contents exposed in each screen device can appear synchronously, and thus, without distracting the system user, .

도 2는 본 발명의 일실시예에 있어서, 제1 스크린 장치와 제2 스크린 장치에서 상대적인 위치 관계를 어떻게 결정하는지 설명하기 위한 도면이다. 도시된 바와 같이, 제1 스크린 장치(210)는 콘텐트 서버로부터 수신하여 삽입한 마커(211)를 일반 콘텐트를 노출하는 디스플레이(212)에 포함할 수 있다. 실시예에 있어서, 마커(211)는 제2 스크린 장치(220)와의 위치 관계를 측정하기 위한 것으로 도시된 바와 같이 디스플레이(212)의 모서리와 꼭지점 곳곳에 적어도 하나 이상 포함하여 제2 스크린 장치(220)의 이동에 따라 지속적으로 그 위치를 바로잡는 역할을 수행할 수 있다.2 is a diagram for explaining how a relative positional relationship between the first screen device and the second screen device is determined in an embodiment of the present invention. As shown in the figure, the first screen device 210 may include the marker 211 received from the content server and inserted into the display 212 for exposing the general content. In an embodiment, the marker 211 includes at least one corner or corner of the display 212, as shown for measuring the positional relationship with the second screen device 220, so that the second screen device 220 And can continuously perform the function of correcting the position according to the movement.

또한, 제2 스크린 장치(220)는 후면에 카메라(221)와 카메라(221)를 통해 제1 스크린 장치(210)를 통해 노출하고 있는 콘텐트를 표시하는 디스플레이(222)를 함께 구비하고 있다. 후면 카메라(221)가 디스플레이(212)의 일반 콘텐트를 촬영할 때 마커(211)를 함께 포착할 수 있고, 실시예에 있어서 각 마커(211)는 제2 스크린 장치(220) 내지 후면 카메라(221)에 의해 감지될 수 있는 것이며 디스플레이(212)에 노출되는 일반 콘텐트의 부분으로 나타날 수 있다. 또는, 제2 스크린 장치(220)가 하나 이상 노출되어 있는 마커(211)의 위치를 식별하여 거리와 위치를 계산하고 이를 통해 촬영하고 있는 콘텐트를 추측해낼 수 있다.The second screen device 220 includes a display 222 for displaying the content exposed through the first screen device 210 through the camera 221 and the camera 221 on the rear side. The rear camera 221 may capture the markers 211 together when capturing the normal content of the display 212 and each marker 211 in the embodiment may be captured by the second screen device 220 or the rear camera 221, And may appear as part of the plain content that is exposed to the display 212. Alternatively, the second screen device 220 can identify the location of one or more exposed markers 211 to calculate the distance and position, and infer the content being photographed through it.

제2 스크린 장치(220)의 디스플레이에 나타나는 콘텐트는 마커(211)의 위치 정보에 기반한 것으로, 같은 일반 콘텐트 내에서도 제2 스크린 장치(220)의 이동에 따라 사용자의 시야에서 스크린 위치를 조정하게 함으로써 새로운 콘텐트 종류를 창출할 수 있다.The content displayed on the display of the second screen device 220 is based on the position information of the marker 211 and allows the screen position to be adjusted in the user's view according to the movement of the second screen device 220 even in the same general content, You can create content types.

도 3은 본 발명의 일실시예에 있어서, 상대적인 위치 기반의 인터랙티브 콘텐트의 일례로, 제2 스크린 장치의 위치에 따라 제공되는 콘텐트의 배치 내용이 달라지는 것을 설명하기 위한 것이다. FIG. 3 illustrates an example of relative location-based interactive content according to an exemplary embodiment of the present invention. Referring to FIG.

실시예에 있어서, 도 3의 제1 스크린 장치(310)는 TV 영상 등의 동영상의 콘텐트를 노출할 수 있으며, 제2 스크린 장치는 제1 스크린 장치의 오른쪽(311), 상단(312), 또는 왼쪽(313)에 위치할 수 있으며, 각 위치에 따라 제2 스크린 장치의 디스플레이를 통해 노출되는 콘텐트의 배치 내용이 달라질 수 있다.In an embodiment, the first screen device 310 of FIG. 3 may expose the content of a moving picture, such as a TV image, and the second screen device may display the right 311, top 312, And the content of the content exposed through the display of the second screen device may be changed according to each position.

제1 스크린 장치(310)에 노출되고 있는 콘텐트 내용에 대한 배치 정보가 될 수 있는데, 실시예에 있어서, 제1 스크린 장치(310)가 어떤 콘텐트의 클로즈업한 장면을 노출하고 있을 때에 제2 스크린 장치를 제1 스크린 장치의 오른쪽(311)에 가져가면, 제1 스크린 장치(310)의 클로즈업된 화면의 오른쪽 부분을 노출하여 디스플레이를 연장하는 효과를 가져올 수 있다. 반대로 같은 제1 스크린 장치(310)의 화면에 대해서 제2 스크린 장치가 왼쪽(313)에 위치하게 되면, 클로즈업된 장면의 왼쪽의 연장 화면을 노출할 수 있다.The first screen device 310 may be the arrangement information of the contents of the content being exposed in the first screen device 310. In this embodiment, when the first screen device 310 exposes a close-up scene of a certain content, To the right 311 of the first screen device may expose the right portion of the close-up screen of the first screen device 310 to extend the display. On the contrary, if the second screen device is positioned on the left 313 with respect to the screen of the first screen device 310, the extended screen on the left side of the close-up scene can be exposed.

여기서, 제2 스크린 장치에서 노출하는 콘텐트는 콘텐트 서버로부터 수신한 것으로 콘텐트 서버는 제1 스크린 장치(310)가 노출하는 일반 콘텐트를 포함하는 더 큰 영역의 콘텐트를 저장할 수 있다. 이에, 제2 스크린 장치를 제1 스크린의 상단(312)에 위치하도록 하면, 클로즈업되어 나타나던 콘텐트의 전체적인 콘텐트 화면이 제공될 수 있다.Here, the content exposed by the second screen device is received from the content server, and the content server may store a larger area of content including general content that the first screen device 310 exposes. Thus, if the second screen device is positioned at the upper end 312 of the first screen, a whole content screen of the content that is displayed close-up can be provided.

이와 같이, 제2 스크린의 위치에 따라 콘텐트 서버는 제2 스크린 장치로 제공하는 콘텐트의 배치를 결정할 수 있다.Thus, according to the position of the second screen, the content server can determine the arrangement of the content to be provided to the second screen device.

도 4는 본 발명의 일실시예에 있어서, 인터랙티브 콘텐트 제공 시스템을 활용한 실시예로서, 제1 스크린 장치(410)에 나타난 일반 콘텐트를 이용하여 제2 스크린 장치(420)에 부분적인 증강 현실의 콘텐트를 표시하는 실시예를 설명하기 위한 도면이다. 제2 스크린 장치(420)가 제1 스크린 장치(410)의 일부 영역을 포인팅할 수 있을 때 이를 응용하여 스크린 장치 간을 연계하는 새로운 콘텐트 형식을 형성할 수 있다.FIG. 4 illustrates an embodiment of an interactive content providing system according to an embodiment of the present invention. Referring to FIG. 4, the second screen device 420 may include a general augmented reality Fig. 8 is a diagram for explaining an embodiment for displaying content. Fig. When the second screen device 420 is able to point to a portion of the first screen device 410, it can apply it to form a new content type that links the screen devices.

실시예에 있어서, 사용자는 디스플레이 영상(411)에서 도면과 같이 자막이 없는 일반 콘텐트를 시청하고 있으며, 제2 스크린 장치(420)를 이동시키면서 후면 카메라를 통해 일반 콘텐트의 부분적인 영상을 촬영하여 디스플레이(421)에 노출 시키고 있다.In an exemplary embodiment, the user views general content without a caption as shown in the display image 411, and captures a partial image of the general content through the rear camera while moving the second screen device 420, (421).

제2 스크린 장치(420)는 일반 콘텐트에 포함되어 있어 감지하는 마커를 함께 촬영할 수 있는데, 제1 스크린 장치(410)와 제2 스크린 장치(420) 간의 상대적인 위치 관계를 측정하고 이를 제1 스크린 장치(410)로 전송하여 상호 간의 위치 관계를 공유하며, 또한 이를 콘텐트 서버로 전송하여 상대적인 위치 관계에 대응하는 재정렬된 콘텐트를 요청할 수 있다.The second screen device 420 is included in the general content so that the first screen device 410 and the second screen device 420 can measure the relative positional relationship between the first screen device 410 and the second screen device 420, To the content server 410 to share the positional relationship between them and to transmit the same to the content server to request the reordered content corresponding to the relative positional relationship.

도 4의 실시예에 있어서, 제2 스크린 장치(420)가 콘텐트 서버로부터 수신하는 재정렬된 콘텐트는 증강 현실을 구현하기 위한 콘텐트가 되며, 실시예에 있어서 콘텐트 서버는 해당 위치 관계에 대한 콘텐트 배치 정보를 소지할 수 있다.In the embodiment of FIG. 4, the reordered content received by the second screen device 420 from the content server is content for implementing the augmented reality, and in the embodiment, the content server stores content arrangement information .

부분적 증강 현실을 표현하기 위한 실시예에 있어서, 디스플레이(421)에서는 촬영 영역에 어울리는 자막을 노출할 수 있으며, 제1 스크린 장치의 디스플레이 영상(411) 내 등장 인물을 비추면 등장 인물에 대한 정보를 일반 콘텐트와 함께 노출하거나 등장 인물이 소지하고 있는 물건의 상품 정보, 광고를 디스플레이할 수 있다.In an embodiment for expressing a partial augmented reality, the display 421 may expose a caption suitable for an image capturing area. If a character in the display image 411 of the first screen device is illuminated, information on the character It is possible to display the product information and the advertisement of the object exposed by the general contents or possessed by the character.

또한, 증강 현실을 구현할 때, 제2 스크린 장치의 디스플레이(421) 상에 적합한 위치를 포착하여 증강 현실의 콘텐트를 표시할 수 있다. 여기서, 제1 스크린 장치의 디스플레이 영상(411)이 같은 시점에 대한 콘텐트라도 제2 스크린 장치(420)가 촬영하는 포인트에 따라 다른 증강 현실 콘텐트를 형성할 수 있다.In addition, when the augmented reality is realized, it is possible to display the content of the augmented reality by capturing a suitable position on the display 421 of the second screen device. Here, even if the display image 411 of the first screen device is at the same point in time, other augmented reality contents can be formed according to points taken by the second screen device 420.

도 5는 본 발명의 일실시예에 있어서, 제1 스크린 장치와 제2 스크린 장치 간의 상대적인 위치 관계를 이용하여 새로운 콘텐트를 제공하는 또 다른 실시예에 대한 것이다. 실시예에 있어서, 제1 스크린 장치(510)는 퍼즐을 입력할 수 있는 퍼즐 판을 제공하는 장치로 이용하고, 제2 스크린 장치(520)는 퍼즐 조각을 맞추는 장치로 이용하여 퍼즐 맞추기를 구현할 수 있다.5 illustrates another embodiment of providing new content using a relative positional relationship between a first screen device and a second screen device, according to an embodiment of the present invention. In an embodiment, the first screen device 510 may be used as an apparatus for providing a puzzle plate capable of inputting a puzzle, and the second screen apparatus 520 may be used as a device for fitting a puzzle piece to implement a puzzle- have.

따라서, 제1 스크린 장치의 디스플레이(511)에는 실시간으로 맞춰진 퍼즐 조각이 배치되어 있고, 제2 스크린 장치의 디스플레이(521)에는 퍼즐 조각이 나타나 있다. 여기서, 사용자는 사용자의 시야를 중심으로 제2 스크린 장치(520)를 퍼즐 조각(521)이 들어가기에 적합한 위치로 이동시켜 퍼즐을 맞출 수 있다.Thus, a puzzle piece arranged in real time is arranged on the display 511 of the first screen device, and a puzzle piece is shown on the display 521 of the second screen device. Here, the user can align the puzzle by moving the second screen device 520 to a position suitable for entering the puzzle piece 521, centering on the field of view of the user.

제2 스크린 장치(520)는 제1 스크린 장치(510)와의 상대적인 위치 관계를 식별하며, 이를 사용자가 확인할 수 있는 정보로 제공하여 퍼즐 조각(521)의 입력 위치를 가늠할 수 있도록 하며, 또한 제1 스크린 장치(510)와 공유함으로써 퍼즐 조각(521)을 입력했을 때, 퍼즐 판(511)에 적합한 위치에 해당 퍼즐 조각(521)이 입력되도록 하고, 이를 사용자에게 콘텐트로 노출할 수 있다. 이에, 스크린 장치 간의 상대적인 위치 관계는 콘텐트 서버를 통해서 가능하며, 또는 스크린 장치 간의 단거리 무선 네트워크 등이 이용될 수 있다.The second screen device 520 identifies the relative positional relationship with the first screen device 510 and provides it as information that can be verified by the user so that the input position of the puzzle piece 521 can be determined, When the puzzle piece 521 is inputted by sharing with the screen device 510, the puzzle piece 521 is inputted at a position suitable for the puzzle plate 511 and can be exposed to the user as content. Thus, the relative positional relationship between the screen devices can be achieved through the content server, or a short-range wireless network between the screen devices can be used.

도 6은 본 발명의 일실시예에 있어서, 도 1을 통해 설명한 인터랙티브 콘텐트 제공 시스템에서 콘텐트의 정보를 포함하여 재배치하여 제공하는 콘텐트 서버(130)의 구성을 설명하기 위한 블록도이다. 도 6에 있어서, 콘텐트 서버(600)는 위치 감지부(610), 콘텐트 정렬부(620), 그리고 정보 전달부(630)를 포함하여 구성될 수 있다.FIG. 6 is a block diagram illustrating a configuration of a content server 130 that relocates and provides content information in the interactive content providing system illustrated in FIG. 1 according to an exemplary embodiment of the present invention. 6, the content server 600 may include a position sensing unit 610, a content arranging unit 620, and an information transmitting unit 630.

위치 감지부(610)는 제1 스크린 장치와 제2 스크린 장치의 상대적인 위치 관계를 감지하는데, 제1 스크린 장치의 어떤 포인트에 제2 스크린 장치가 있으며, 제2 스크린 장치의 회전(횡 방향, 종 방향) 정보를 감지하는 등의 정보가 상대적인 위치 관계에 포함될 수 있다.The position sensing unit 610 senses the relative positional relationship between the first screen device and the second screen device, wherein the second screen device is located at a certain point of the first screen device, and the rotation (lateral direction, Direction) information can be included in the relative positional relationship.

여기서, 위치 감지부(610)는 직접적으로 위치 정보를 수신할 수도 있으나, 제2 스크린 장치가 측정한 정보를 수신하여 저장할 수 있다. 상대적인 위치 관계에 의해 콘텐트가 제공되므로, 실시간 위치 관계 정보 이전에 수신한 정보를 저장하여 참조할 수 있다. 제2 스크린 장치에서 상대적인 위치 관계를 계산하는 것에 대해서는 도 7을 통해 더욱 자세히 설명하고자 한다.Here, the position sensing unit 610 may directly receive position information, but may receive and store information measured by the second screen device. Since the content is provided by the relative positional relationship, the received information can be stored and referred to prior to the real-time positional relationship information. The calculation of the relative positional relationship in the second screen device will be described in more detail with reference to FIG.

콘텐트 정렬부(620)에서는 상대적인 위치 관계를 기반으로 현재의 콘텐트 배치를 재정렬할 수 있다. 예컨대, 도 3과 같은 실시예에서는 제2 스크린 장치의 위치에 따라 오른쪽, 왼쪽 등의 콘텐트 배치를 결정할 수 있으며, 도 5와 같은 실시예에서는 퍼즐 조각이 정위치에 위치했는지 판별하여 퍼즐 조각의 위치를 결정할 수 있다. 여기서, 콘텐트 정렬부(620)는 제1 스크린 장치로 제공되는 콘텐트와 제2 스크린 장치로 제공되는 콘텐트를 각각 정렬할 수 있으며, 콘텐트의 종류에 따라 어느 하나의 스크린 장치로만 콘텐트를 정렬할 수 있다. 이하에서 콘텐트를 정렬한 정보를 배치 정보라 명명한다.In the content arrangement unit 620, the current content arrangement can be rearranged based on the relative positional relationship. For example, in the embodiment as shown in FIG. 3, the right and left content placement can be determined according to the position of the second screen device. In the embodiment as shown in FIG. 5, Can be determined. Here, the content arranging unit 620 may arrange the content provided to the first screen device and the content provided to the second screen device, respectively, and may arrange the content only to one screen device according to the type of the content . Hereinafter, the information in which the content is arranged is referred to as batch information.

정보 전달부(630)는 정렬된 콘텐트의 배치 정보를 제1 스크린 장치와 제2 스크린 장치로 각각 전달할 수 있다. 제1 스크린 장치로 전달할 배치 정보를 제1 배치 정보라 하며 제2 스크린 장치로 전달할 배치 정보를 제2 배치 정보라 한다면, 제1 배치 정보와 제2 배치 정보를 분류하여 적절한 스크린 장치로 전달되도록 할 수 있다.The information transferring unit 630 may transmit the arrangement information of the aligned content to the first screen device and the second screen device, respectively. If the arrangement information to be transmitted to the first screen device is referred to as first arrangement information and the arrangement information to be transmitted to the second screen device is referred to as second arrangement information, the first arrangement information and the second arrangement information are classified and transmitted to an appropriate screen device .

도 7은 본 발명의 일실시예에 있어서, 도 1에 도시한 제2 스크린 장치(120)의 구성을 설명하기 위한 블록도이다. 도시된 제2 스크린 장치(700)는 스크린 인식부(710), 콘텐트 인식부(720), 콘텐트 요청부(730), 그리고 콘텐트 표시부(740)를 포함하여 구성될 수 있다.FIG. 7 is a block diagram for explaining the configuration of the second screen device 120 shown in FIG. 1, according to an embodiment of the present invention. The illustrated second screen device 700 may include a screen recognition unit 710, a content recognition unit 720, a content request unit 730, and a content display unit 740.

스크린 인식부(710)는 물리적인 제1 스크린의 존재 여부를 인식하기 위한 것으로, 실시예에 있어서 후면에 구비하고 있는 카메라를 통해 제1 스크린 장치의 존재를 확인하거나 또는, 제1 스크린 장치에 일반 콘텐트와 함께 삽입되는 마커의 존재를 식별함으로써 제1 스크린 장치의 존재를 확인하는 등의 방법이 적용될 수 있다.The screen recognition unit 710 recognizes the presence or absence of a physical first screen. In an embodiment, the screen recognizing unit 710 confirms the presence of the first screen device through a camera provided on the rear surface, A method of identifying the presence of the first screen device by identifying the presence of a marker inserted with the content, and the like can be applied.

콘텐트 인식부(720)는 제2 스크린 장치의 후면 카메라를 통해 촬영하는 일반 콘텐트를 인식하기 위한 것이다. 자세하게는 일반 콘텐트 상에 표시되는 마커를 식별하는 것이며, 마커는 일반 콘텐트에 포함되는 표시자의 역할을 하고, 제1 스크린 장치의 디스플레이의 가장자리, 예컨대 모서리나 꼭지점 부분에 위치할 수 있다.The content recognition unit 720 is for recognizing general content to be shot through a rear camera of the second screen device. In detail, the marker identifies a marker displayed on the general content, and the marker serves as an indicator included in the general content, and may be located at an edge of the display of the first screen device, e.g., an edge or an apex portion.

실시예에 있어서, 마커는 제2 스크린 장치의 후면 카메라를 통해 촬영되거나 인지될 수 있는 점이나 다른 종류의 표시자가 될 수 있고, 마커는 존재하는 위치마다 색깔을 다르게 하거나 숫자를 다르게 표현하는 등의 방법을 통해서 각 위치에 대한 정보를 포함하여, 제2 스크린 장치에서 그 위치를 식별할 수 있는 표식을 가질 수 있다. 따라서, 촬영된 영상 내의 마커의 위치를 토대로, 제1 스크린 장치와 제2 스크린 장치 간의 상대 위치를 계산할 수 있다. 실시예에 있어서, 제2 스크린 장치에서 계산된 위치 정보는 제1 스크린 장치로 전달되어 상호 간에 이를 감지할 수 있도록 할 수 있다.In an embodiment, the marker may be photographed or recognized through a rear camera of the second screen device or may be a different kind of marker, and the marker may be colored differently for each location in which it is present, Including the information about each position through the method of the second screen device. Therefore, the relative position between the first screen device and the second screen device can be calculated based on the position of the marker in the photographed image. In an embodiment, the position information calculated in the second screen device is transmitted to the first screen device so that they can detect each other.

콘텐트 요청부(730)에서는 콘텐트 인식부(720)에서 식별한 일반 콘텐트와 마커를 기반으로 하는 위치 정보를 식별하여 해당 위치에 대해서 콘텐트를 정렬한 배치 정보의 수신을 콘텐트 서버로 요청할 수 있다. 실시예에 있어서, 각 마커는 위치 정보뿐만 아니라 해당 위치에 대한 부가 정보를 식별할 수 있는 표식을 포함할 수 있다. 여기서, 콘텐트 요청부(730)가 수신하고자 하는 배치 정보는 상기에 설명한 바와 같이, 일반 콘텐트에 노출되어 있는 인물에 대한 정보, 상품에 대한 정보 등을 포함한 콘텐트이거나 위치에 따라 배치가 다르게 나타나는 콘텐트가 이에 해당할 수 있다.The content requesting unit 730 may identify location information based on the general content and the markers identified by the content recognizing unit 720 and may request the content server to receive the arrangement information in which the content is aligned with the corresponding location. In the embodiment, each marker may include not only positional information but also a marker capable of identifying additional information about the position. Here, as described above, the placement information to be received by the content requesting unit 730 may include content including information on a person who is exposed to general content, information on a product, or the like, This may be the case.

또한, 콘텐트 표시부(740)는 해당 배치 정보를 콘텐트 서버로부터 수신하면, 디스플레이에 수신한 콘텐트를 표시할 수 있다. 실시예에 있어서, 수신한 콘텐트를 노출하기에 적당한 위치를 고려하여 선정할 수 있는데, 예컨대 도 4와 같은 부분적 증강 현실을 구현하고자 할 때엔 일반 콘텐트의 노출을 최대한 방해하지 않는 하단에 문구를 추가하여 표시할 수 있다.In addition, when the content display unit 740 receives the arrangement information from the content server, the content display unit 740 can display the received content on the display. For example, when implementing a partial augmented reality as shown in FIG. 4, a phrase may be added to the bottom of the list that does not disturb the exposure of general contents as much as possible Can be displayed.

도 8은 본 발명의 일실시예에 있어서, 인터랙티브 콘텐트 제공 방법을 실시하기 위한 흐름도를 도시한 것이며, 인터랙티브 콘텐트 제공 방법은 도 6을 통해 설명한 콘텐트 서버(600)에 의해서 각 단계가 실시될 수 있다.FIG. 8 is a flowchart illustrating an interactive content providing method according to an embodiment of the present invention. The interactive content providing method may be performed by the content server 600 described with reference to FIG. 6 .

단계(810)에서 콘텐트 서버(600)는 제1 스크린 장치와 제2 스크린 장치의 상대적인 위치 관계를 수신할 수 있다. 여기서, 직접적으로 위치 관계 정보를 수신할 수도 있으나, 제2 스크린 장치가 측정한 정보를 수신하여 저장할 수 있다. 상대적인 위치 관계에 의해 콘텐트가 제공되므로, 실시간 위치 관계 정보 이전에 수신한 정보를 저장하여 참조할 수 있다.In step 810, the content server 600 may receive the relative positional relationship between the first screen device and the second screen device. Here, the location information may be directly received, but the information measured by the second screen device may be received and stored. Since the content is provided by the relative positional relationship, the received information can be stored and referred to prior to the real-time positional relationship information.

단계(820)에서 콘텐트 서버(600)는 수신한 상대적인 위치 관계 정보를 바탕으로 현재 제공되고 있는 콘텐트를 정렬할 수 있다. 여기서, 콘텐트 서버(600)는 제1 스크린 장치로 제공되는 콘텐트와 제2 스크린 장치로 제공되는 콘텐트를 각각 정렬할 수 있으며, 콘텐트의 종류에 따라 두 스크린 장치 중 어느 하나의 스크린 장치만의 콘텐트를 정렬할 수 있다. 이때, 상대적인 위치에 따라 달라지는 콘텐트를 배치하고 콘텐트를 표시하는 방식에 따라서 배치를 결정할 수 있다.In operation 820, the content server 600 may sort the currently provided content based on the received relative positional relationship information. Herein, the content server 600 may arrange the content provided to the first screen device and the content provided to the second screen device, respectively, and may display the content of only one of the two screen devices according to the type of the content You can sort. At this time, it is possible to arrange the content depending on the relative position and determine the layout according to the method of displaying the content.

단계(830)에서 콘텐트 서버(600)는 정렬한 콘텐트 정보, 제1 스크린 장치의 배치 정보와 제2 스크린 장치의 배치 정보를 각각 해당 장치로 전달할 수 있다. 제1 스크린 장치로 전달할 배치 정보를 제1 배치 정보라 하며 제2 스크린 장치로 전달할 배치 정보를 제2 배치 정보라 한다면, 콘텐트 서버(600)는 제1 배치 정보와 제2 배치 정보를 분류하여 적절한 스크린 장치로 전달되도록 할 수 있다.In operation 830, the content server 600 may transmit the sorted content information, the layout information of the first screen device, and the layout information of the second screen device to the corresponding device. If the arrangement information to be transmitted to the first screen device is referred to as first arrangement information and the arrangement information to be transmitted to the second screen device is referred to as second arrangement information, the content server 600 classifies the first arrangement information and the second arrangement information, Screen device.

이와 같이, 본 발명의 실시예를 통해 제1 스크린 장치와 제2 스크린 장치가 서로의 상대적인 위치를 감지하는 구조를 이용하여 스크린 장치 간의 상호적인 콘텐트를 제공하는 시스템과 방법을 제시하고, 각 스크린 장치의 콘텐트를 동기화할 수 있다.As described above, a system and method for providing mutual content among screen devices using a structure in which the first screen device and the second screen device sense relative positions of each other through the embodiments of the present invention are presented, Can synchronize the content of < / RTI >

이에, 단말 장치 간의 질의를 통해 서비스 정보를 획득하고, 획득한 정보를 기반으로 세컨드 스크린에 적합한 서비스를 서버 측에 요청해 알아낼 수 있으며, 또한 본 발명의 실시예를 통해 프라이머리(Primary) 스크린과 세컨드 스크린이 밀접하게 연계된 새로운 콘텐트를 제공하는 서비스의 창출로 나타날 수 있다.Accordingly, it is possible to obtain service information through inquiry between terminal apparatuses, and to request a service suitable for the secondary screen on the basis of the acquired information on the basis of the acquired information. Further, through the embodiment of the present invention, Second screen can appear as the creation of a service that provides new content that is tightly linked.

실시예에 따른 제1 스크린 장치와 제2 스크린 장치의 인터랙티브 콘텐트 제공 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 실시예를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(Magnetic media), CD-ROM, DVD와 같은 광기록 매체(Optical media), 플롭티컬 디스크(Floptical disk)와 같은 자기-광 매체(Magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 실시예의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.The interactive content providing method of the first screen device and the second screen device according to the embodiment may be implemented in the form of a program command that can be executed through various computer means and recorded in a computer readable medium. The computer-readable medium may include program instructions, data files, data structures, and the like, alone or in combination. The program instructions to be recorded on the medium may be those specially designed and configured for the embodiments or may be available to those skilled in the art of computer software. Examples of the computer-readable recording medium include magnetic media such as a hard disk, a floppy disk and a magnetic tape, optical media such as CD-ROM and DVD, magnetic disks such as a floppy disk, - Magneto-optical media, and hardware devices specifically configured to store and execute program instructions such as ROM, RAM, flash memory, and the like. Examples of program instructions include machine language code such as those produced by a compiler, as well as high-level language code that can be executed by a computer using an interpreter or the like. The hardware devices described above may be configured to operate as one or more software modules to perform the operations of the embodiments, and vice versa.

이상과 같이 실시예들이 비록 한정된 실시예와 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기의 기재로부터 다양한 수정 및 변형이 가능하다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등한 것들에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is to be understood that the invention is not limited to the disclosed exemplary embodiments. For example, it is to be understood that the techniques described may be performed in a different order than the described methods, and / or that components of the described systems, structures, devices, circuits, Lt; / RTI > or equivalents thereof, the appropriate results may be achieved.

그러므로, 다른 구현들, 다른 실시예들 및 특허청구범위와 균등한 것들도 후술하는 특허청구범위의 범위에 속한다.Therefore, other implementations, other embodiments, and equivalents to the claims are also within the scope of the following claims.

110: 제1 스크린 장치
120, 700: 제2 스크린 장치
130, 600: 콘텐트 서버
610: 위치 감지부
620: 콘텐트 정렬부
630: 정보 전달부
710: 스크린 인식부
720: 콘텐트 인식부
730: 콘텐트 요청부
740: 콘텐트 표시부110: first screen device
120, 700: a second screen device
130, 600: a content server
610:
620:
630:
710: Screen recognition unit
720:
730:
740:

Claims (14)

인터랙티브 콘텐트 제공 시스템에 있어서,
인터랙티브 콘텐트를 제공하는 콘텐트 서버는
제1 스크린 장치와 제2 스크린 장치 간의 상대적인 위치 관계를 수신하는 위치 감지부;
상기 상대적인 위치 관계에 따라 콘텐트를 정렬하는 콘텐트 정렬부; 및
상기 정렬된 콘텐트의 배치 정보를 상기 제1 스크린 장치와 상기 제2 스크린 장치로 각각 전달하는 정보 전달부
를 포함하고,
상기 제2 스크린 장치는,
카메라를 이용하여 상기 제1 스크린 장치에 노출되는 콘텐트 및 콘텐트에 포함된 마커를 촬영하고,
상기 마커에 기초하여 상기 제1 스크린 장치로부터 상기 제2 스크린 장치 간의 거리 및 상기 제1 스크린 장치를 대상으로 제2 스크린 장치가 위치하는 방향을 나타내는 상기 상대적인 위치를 계산하고,
상기 마커에 해당하는 콘텐트를 노출하기 위한 배치 정보를 상기 콘텐트 서버에 요청하고,
상기 콘텐트 정렬부는,
상기 제2 스크린 장치로부터 배치 정보가 요청됨에 따라, 상기 마커에 해당하는 콘텐트가 상기 제2 스크린 장치에 디스플레이되고, 상기 마커에 해당하는 콘텐트를 제외한 콘텐트가 상기 제1 스크린 장치에 디스플레이되도록 콘텐트를 정렬하는 것
을 특징으로 하는 인터랙티브 콘텐트 제공 시스템.1. An interactive content providing system,
A content server that provides interactive content
A position sensing unit for receiving a relative positional relationship between the first screen device and the second screen device;
A content arrangement unit for arranging the content according to the relative positional relationship; And
And an information transfer unit for transferring the arrangement information of the sorted content to the first screen device and the second screen device,
Lt; / RTI >
The second screen device comprises:
Capturing a marker included in the content and the content exposed by the first screen device using a camera,
Calculating the distance between the first screen device and the second screen device based on the marker and the relative position indicating a direction in which the second screen device is positioned with respect to the first screen device,
Requesting the content server for placement information for exposing the content corresponding to the marker,
The content arranging unit,
The content corresponding to the marker is displayed on the second screen device and the content excluding the content corresponding to the marker is displayed on the first screen device as the arrangement information is requested from the second screen device To do
And an interactive content providing system. 제1항에 있어서,
상기 제1 스크린 장치는 TV, 컴퓨터의 모니터, 빔 프로젝터와 같이 일정 크기보다 큰 디스플레이를 가지는 장치이며,
상기 제2 스크린 장치는 휴대폰, PDA, 태블릿 PC와 같이 사용자에게 휴대가 용이한 사용자 단말인 것
을 특징으로 하는 인터랙티브 콘텐트 제공 시스템.The method according to claim 1,
The first screen device is a device having a display larger than a predetermined size, such as a TV, a computer monitor, and a beam projector,
The second screen device is a portable user terminal such as a mobile phone, a PDA, and a tablet PC
And an interactive content providing system. 제1항에 있어서,
상기 위치 감지부는 상기 제2 스크린 장치를 통해 계산된 상기 상대적인 위치 관계를 수신하는 것
을 특징으로 하는 인터랙티브 콘텐트 제공 시스템.The method according to claim 1,
Wherein the position sensing unit is configured to receive the relative positional relationship calculated through the second screen device
And an interactive content providing system. 삭제delete 삭제delete 인터랙티브 콘텐트 제공 시스템에 있어서,
일반 콘텐트를 디스플레이하는 제1 스크린 장치;
상기 제1 스크린 장치를 촬영하면서 상기 제1 스크린 장치와의 상대적인 위치 관계를 계산하는 제2 스크린 장치; 및
상기 상대적인 위치 관계에 기반하여 상기 일반 콘텐트의 배치를 정렬하는 콘텐트 서버를 포함하고,
상기 제2 스크린 장치는,
카메라를 이용하여 상기 제1 스크린 장치에 노출되는 콘텐트 및 콘텐트에 포함된 마커를 촬영하고,
상기 마커에 기초하여 상기 제1 스크린 장치로부터 상기 제2 스크린 장치 간의 거리 및 상기 제1 스크린 장치를 대상으로 제2 스크린 장치가 위치하는 방향을 나타내는 상기 상대적인 위치를 계산하고,
상기 마커에 해당하는 콘텐트를 노출하기 위한 배치 정보를 상기 콘텐트 서버에 요청하고,
상기 콘텐트 서버는,
상기 제2 스크린 장치로부터 배치 정보가 요청됨에 따라, 상기 마커에 해당하는 콘텐트가 상기 제2 스크린 장치에 디스플레이되고, 상기 마커에 해당하는 콘텐트를 제외한 콘텐트가 상기 제1 스크린 장치에 디스플레이되도록 콘텐트를 정렬하는 것
을 특징으로 하는 인터랙티브 콘텐트 제공 시스템.1. An interactive content providing system,
A first screen device for displaying general contents;
A second screen device for calculating a relative positional relationship with the first screen device while photographing the first screen device; And
And a content server for arranging the arrangement of the general content based on the relative positional relationship,
The second screen device comprises:
Capturing a marker included in the content and the content exposed by the first screen device using a camera,
Calculating the distance between the first screen device and the second screen device based on the marker and the relative position indicating a direction in which the second screen device is positioned with respect to the first screen device,
Requesting the content server for placement information for exposing the content corresponding to the marker,
The content server comprises:
The content corresponding to the marker is displayed on the second screen device and the content excluding the content corresponding to the marker is displayed on the first screen device as the arrangement information is requested from the second screen device To do
And an interactive content providing system. 제6항에 있어서,
상기 제2 스크린 장치는
상기 제1 스크린 장치의 존재 여부를 식별하는 스크린 인식부;
상기 제1 스크린 장치와의 상기 상대적인 위치 관계를 인식하는 콘텐트 인식부;
상기 마커에 해당하는 콘텐트를 상기 콘텐트 서버로 요청하는 콘텐트 요청부; 및
상기 콘텐트 서버로부터 상기 마커에 해당하는 콘텐트를 수신하여 디스플레이하는 콘텐트 표시부
를 포함하는 것을 특징으로 하는 인터랙티브 콘텐트 제공 시스템.The method according to claim 6,
The second screen device
A screen recognition unit for identifying whether or not the first screen device is present;
A content recognition unit for recognizing the relative positional relationship with the first screen device;
A content request unit for requesting the content corresponding to the marker to the content server; And
A content display unit for receiving and displaying the content corresponding to the marker from the content server,
And an interactive content providing system. 제6항에 있어서,
상기 콘텐트 서버는
상기 제1 스크린 장치와 상기 제2 스크린 장치 간의 상기 상대적인 위치 관계를 수신하는 위치 감지부;
상기 상대적인 위치 관계에 따라 콘텐트를 정렬하는 콘텐트 정렬부; 및
상기 마커에 해당하는 콘텐트를 상기 제2 스크린 장치에 디스플레이하기 위한 배치 정보를 상기 제2 스크린 장치로 전달하고, 상기 마커에 해당하는 콘텐트를 제외한 콘텐트를 상기 제1 스크린 장치에 디스플레이하기 위한 배치 정보를 상기 제1 스크린 장치로 전달하는 정보 전달부를 포함하는 것
을 특징으로 하는 인터랙티브 콘텐트 제공 시스템.The method according to claim 6,
The content server
A position sensing unit receiving the relative positional relationship between the first screen device and the second screen device;
A content arrangement unit for arranging the content according to the relative positional relationship; And
To the second screen device, arrangement information for displaying the content corresponding to the marker on the second screen device, and arranges placement information for displaying the content on the first screen device except for the content corresponding to the marker And an information transferring unit for transferring the information to the first screen device
And an interactive content providing system. 인터랙티브 콘텐트 제공 방법에 있어서,
제1 스크린 장치와 제2 스크린 장치 간의 상대적인 위치 관계를 수신하는 단계;
상기 상대적인 위치 관계에 따라 콘텐트를 정렬하는 단계; 및
상기 정렬된 콘텐트의 배치 정보를 상기 제1 스크린 장치와 상기 제2 스크린 장치로 각각 전달하는 단계를 포함하고,
상기 제2 스크린 장치는,
카메라를 이용하여 상기 제1 스크린 장치에 노출되는 콘텐트 및 콘텐트에 포함된 마커를 촬영하고,
상기 마커에 기초하여 상기 제1 스크린 장치로부터 상기 제2 스크린 장치 간의 거리 및 상기 제1 스크린 장치를 대상으로 제2 스크린 장치가 위치하는 방향을 나타내는 상기 상대적인 위치를 계산하고,
상기 마커에 해당하는 콘텐트를 노출하기 위한 배치 정보를 상기 콘텐트 서버에 요청하고,
상기 콘텐트를 정렬하는 단계는,
상기 제2 스크린 장치로부터 배치 정보가 요청됨에 따라, 상기 마커에 해당하는 콘텐트가 상기 제2 스크린 장치에 디스플레이되고, 상기 마커에 해당하는 콘텐트를 제외한 콘텐트가 상기 제1 스크린 장치에 디스플레이되도록 콘텐트를 정렬하는 것
을 특징으로 하는 인터랙티브 콘텐트 제공 방법.In an interactive content providing method,
Receiving a relative positional relationship between the first screen device and the second screen device;
Aligning the content according to the relative positional relationship; And
And delivering the arrangement information of the sorted content to the first screen device and the second screen device, respectively,
The second screen device comprises:
Capturing a marker included in the content and the content exposed by the first screen device using a camera,
Calculating the distance between the first screen device and the second screen device based on the marker and the relative position indicating a direction in which the second screen device is positioned with respect to the first screen device,
Requesting the content server for placement information for exposing the content corresponding to the marker,
The step of sorting the content comprises:
The content corresponding to the marker is displayed on the second screen device and the content excluding the content corresponding to the marker is displayed on the first screen device as the arrangement information is requested from the second screen device To do
And an interactive content providing method. 제9항에 있어서,
상기 제1 스크린 장치는 TV, 컴퓨터의 모니터, 빔 프로젝터와 같이 일정 크기보다 큰 디스플레이를 가지는 장치이며,
상기 제2 스크린 장치는 휴대폰, PDA, 태블릿 PC와 같이 사용자에게 휴대가 용이한 사용자 단말인 것
을 특징으로 하는 인터랙티브 콘텐트 제공 방법.10. The method of claim 9,
The first screen device is a device having a display larger than a predetermined size, such as a TV, a computer monitor, and a beam projector,
The second screen device is a portable user terminal such as a mobile phone, a PDA, and a tablet PC
And an interactive content providing method. 제9항에 있어서,
상기 상대적인 위치 관계를 수신하는 단계는 상기 제2 스크린 장치를 통해 계산된 상기 상대적인 위치 관계를 수신하는 것
을 특징으로 하는 인터랙티브 콘텐트 제공 방법.10. The method of claim 9,
The step of receiving the relative positional relationship may include receiving the relative positional relationship calculated through the second screen device
And an interactive content providing method. 삭제delete 삭제delete 삭제delete
KR20120137527A 2012-11-30 2012-11-30 Interactive contents provision system and method using relative distance between the main screen and the second screen KR101480300B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR20120137527A KR101480300B1 (en) 2012-11-30 2012-11-30 Interactive contents provision system and method using relative distance between the main screen and the second screen

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR20120137527A KR101480300B1 (en) 2012-11-30 2012-11-30 Interactive contents provision system and method using relative distance between the main screen and the second screen

Publications (2)

Publication Number Publication Date
KR20140072297A KR20140072297A (en) 2014-06-13
KR101480300B1 true KR101480300B1 (en) 2015-01-12

Family

ID=51126163

Family Applications (1)

Application Number Title Priority Date Filing Date
KR20120137527A KR101480300B1 (en) 2012-11-30 2012-11-30 Interactive contents provision system and method using relative distance between the main screen and the second screen

Country Status (1)

Country Link
KR (1) KR101480300B1 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102476115B1 (en) 2019-04-18 2022-12-12 안상준 System for providing interactive content using second screen device and the method thereof

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090059651A (en) * 2007-12-07 2009-06-11 서울시립대학교 산학협력단 Apparatus and system for switching contents
KR20110082636A (en) * 2008-09-02 2011-07-20 삼성전자주식회사 Spatially correlated rendering of three-dimensional content on display components having arbitrary positions
JP5193347B2 (en) * 2011-09-30 2013-05-08 株式会社コナミデジタルエンタテインメント Image processing apparatus, image processing system, image processing method, and program

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090059651A (en) * 2007-12-07 2009-06-11 서울시립대학교 산학협력단 Apparatus and system for switching contents
KR20110082636A (en) * 2008-09-02 2011-07-20 삼성전자주식회사 Spatially correlated rendering of three-dimensional content on display components having arbitrary positions
JP5193347B2 (en) * 2011-09-30 2013-05-08 株式会社コナミデジタルエンタテインメント Image processing apparatus, image processing system, image processing method, and program

Also Published As

Publication number Publication date
KR20140072297A (en) 2014-06-13

Similar Documents

Publication Publication Date Title
US11496814B2 (en) Method, system and computer program product for obtaining and displaying supplemental data about a displayed movie, show, event or video game
US9665986B2 (en) Systems and methods for an augmented reality platform
US9699375B2 (en) Method and apparatus for determining camera location information and/or camera pose information according to a global coordinate system
JP5255595B2 (en) Terminal location specifying system and terminal location specifying method
US9477687B2 (en) Mobile terminal and metadata setting method thereof
US20190333478A1 (en) Adaptive fiducials for image match recognition and tracking
US20180184038A1 (en) Method and system for creating virtual message onto a moving object and searching the same
US9591149B2 (en) Generation of a combined image of a presentation surface
US20150172634A1 (en) Dynamic POV Composite 3D Video System
KR101738443B1 (en) Method, apparatus, and system for screening augmented reality content
KR20140102181A (en) Information processing device, information processing method and program
CN110457571B (en) Method, device and equipment for acquiring interest point information and storage medium
KR102332524B1 (en) Method for providing service by bending mobile device and mobile device
KR20160087284A (en) Image processing apparatus, the image processing apparatus for performing image storage method and image search method
KR101480300B1 (en) Interactive contents provision system and method using relative distance between the main screen and the second screen
CN104871179A (en) Method and system for image capture and facilitated annotation
KR20120036494A (en) Method and system for providing real-time broadcasting information
KR20110095443A (en) Method and system of providing information of subject
JP5946315B2 (en) Image search system
JP2012208558A (en) Display control apparatus, terminal device, communication system, and program
US20120155708A1 (en) Apparatus and method for measuring target point in video
KR20170087065A (en) Display mehtod of ecotourism contents in smart device
KR20160141087A (en) Providing system and method of moving picture contents for based on augmented reality location of multimedia broadcast scene
KR101416083B1 (en) A system and method of relative position detecting between the main screen and the second screen
US9596404B2 (en) Method and apparatus for generating a media capture request using camera pose information

Legal Events

Date Code Title Description
A201 Request for examination
N231 Notification of change of applicant
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20180102

Year of fee payment: 4

LAPS Lapse due to unpaid annual fee