KR20150068683A - Method and apparatus for providing related service of content - Google Patents

Method and apparatus for providing related service of content Download PDF

Info

Publication number
KR20150068683A
KR20150068683A KR1020130154632A KR20130154632A KR20150068683A KR 20150068683 A KR20150068683 A KR 20150068683A KR 1020130154632 A KR1020130154632 A KR 1020130154632A KR 20130154632 A KR20130154632 A KR 20130154632A KR 20150068683 A KR20150068683 A KR 20150068683A
Authority
KR
South Korea
Prior art keywords
data
content
information
additional data
display terminal
Prior art date
Application number
KR1020130154632A
Other languages
Korean (ko)
Other versions
KR102157398B1 (en
Inventor
남궁동원
Original Assignee
주식회사 알티캐스트
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 알티캐스트 filed Critical 주식회사 알티캐스트
Priority to KR1020130154632A priority Critical patent/KR102157398B1/en
Publication of KR20150068683A publication Critical patent/KR20150068683A/en
Application granted granted Critical
Publication of KR102157398B1 publication Critical patent/KR102157398B1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home

Abstract

Disclosed are a method and an apparatus for providing content-related services. According to the present invention, provided is a method for providing content-related services wherein a method for performing in a source terminal performing Ethernet communication with a display terminal through a short-range pairing comprises the steps of: encoding content data and additional data related to the content data; and incorporating MPEG-2 TS packets containing the encoded content data, and information packet containing the encoded additional data in a single Ethernet packet and thereafter transmitting to the display terminal wherein the display terminal decodes and outputs the content data and decodes the additional data so as to provide services associated with the additional data.

Description

컨텐츠 연관 서비스 제공 방법 및 장치{Method and apparatus for providing related service of content}TECHNICAL FIELD [0001] The present invention relates to a content-related service providing method and apparatus,

본 발명은 컨텐츠 연관 서비스 제공 방법 및 장치에 관한 것으로서, 보다 상세하게는 이더넷 통신을 통해 소스 단말에서 디스플레이 단말로 전달되는 컨텐츠에 대한 부가 데이터를 전송하고, 이를 통해 전달되는 컨텐츠와 연관된 서비스를 제공할 수 있는 방법 및 장치에 관한 것이다. The present invention relates to a method and apparatus for providing a content-related service, and more particularly, to a method and apparatus for providing content-related service by transmitting additional data on content transmitted from a source terminal to a display terminal through Ethernet communication, And more particularly,

멀티미디어 트래픽, 특히 동영상 및 게임용 트래픽이 증가한 것은 사용자가 언제, 어디서, 어떻게 컨텐츠를 이용하는가에 있어 근본적인 변화가 나타났기 때문이다. The increase in multimedia traffic, especially video and gaming traffic, is a fundamental change in how and when users use content.

근래에 사용자들은 다양한 종류의 Wi-Fi 지원 장치를 보유하고 있다. 스마트폰, 태블릿, 노트북, TV 및 게임 콘솔 등이 이러한 Wi-Fi 지원 장치들로, 가정에서건 혹은 모바일 환경에서건, 사용자들은 다양한 Wi-Fi 장치를 활용하고 있으며, 이러한 장치 가운데 일부는 컨텐츠를 저장하는데 활용되기도 하고 일부는 컨텐츠를 디스플레이 하는데 적합한 경우도 있다. In recent years, users have a wide range of Wi-Fi enabled devices. Whether smartphones, tablets, laptops, TVs, or game consoles, these Wi-Fi-enabled devices are used by consumers in home or mobile environments, And some may be suitable for displaying content.

예를 들면, 사용자들은 인터넷 상에서 태블릿으로 영화를 스트리밍 받되, 이를 거실에 있는 TV에 디스플레이하고 싶어하기도 한다.For example, users may want to stream movies to the tablet on the Internet and display them on a TV in the living room.

Wi-Fi Alliance가 새롭게 도입하는 인증 프로그램인 Wi-Fi CERTIFIED Miracast™는 Wi-Fi 장치 간에 그래픽 동영상 및 오디오 컨텐츠 등 화면의 공유가 끊김 없이 이루어지도록 칩, 모바일 장치 및 전자제품 제조업체를 아우르는 폭넓은 업계의 지원을 바탕으로 개발된 것이다. Wi-Fi CERTIFIED Miracast ™, a new certification program for the Wi-Fi Alliance, is a broad industry encompassing chips, mobile devices and electronics manufacturers to ensure seamless sharing of graphics, including video and audio content between Wi-Fi devices. It was developed based on the support of.

두 개의 Wi-Fi 장치 간 초기 페어링이 이루어지고 나면, 사용자는 컨텐츠를 스트리밍 하거나 또는 하나의 장치(소스 장치)에서 다른 장치(디스플레이 장치)로 디스플레이를 미러링 하도록 선택할 수 있다. Miracast를 통해 사용자는 두 장치 간에 직접적인 Wi-Fi 연결을 형성할 수 있어, 기존 네트워크를 활용할 필요가 없어진다.Once the initial pairing between the two Wi-Fi devices is done, the user may choose to stream the content or to mirror the display from one device (source device) to another (display device). Miracast allows users to establish a direct Wi-Fi connection between two devices, eliminating the need to leverage existing networks.

Miracast는 Wi-Fi를 바탕으로, 사용자에게 자신이 원하는 장치 상에서 컨텐츠를 디스플레이 할 수 있는 자유를 제공하면서, 동시에 사용 편의성, 제조사 간 상호운용성 및 모든 Wi-Fi CERTIFIED 제품이 공유하고 있는 보안성을 유지하고 있다. Miracast, based on Wi-Fi, gives users the freedom to display content on the device they want, while maintaining the ease of use, interoperability between manufacturers, and the security shared by all Wi-Fi CERTIFIED products .

Miracast는 가장 보편적으로 사용되는 코덱 및 동영상 포맷을 지원하고 있어, 사용자들이 자신이 원하는 장치에서 원하는 오디오 및 동영상 컨텐츠에 접근하는 것이 가능하다.Miracast supports the most common codecs and video formats, allowing users to access the audio and video content they want on their device.

Miracast는 Wi-Fi CERTIFIED n (스루풋 및 커버리지 향상), Wi-Fi Direct™ (장치간 연결), Wi-Fi Protected Access® 2 (WPA2™) (보안), Wi-Fi Multimedia™ (WMM®) (트래픽 관리) 및 Wi-Fi Protected Setup™ 등 지난 몇 년 간 사용자 경험을 풍부하게 하고 Wi-Fi에 대한 사용자의 신뢰도를 향상시킨 요소들 가운데 대부분을 활용하고 있다. 일부 Miracast 장치는 또한 인프라 네트워크를 통한 연결이 가능한 TDLS(Tunneled Direct Link Setup)를 지원할 예정이다. TDLS의 경우, 보다 효율적인 데이터 전송이 가능하며, 장치 간 연결이 레거시 인프라 네트워크에 의해 이루어지는 경우보다 더 발전된 Wi-Fi 기능을 사용하는 것이 가능하다.Miracast supports Wi-Fi CERTIFIED n (throughput and coverage enhancement), Wi-Fi Direct ™, Wi-Fi Protected Access® 2 (WPA2 ™) (security), Wi-Fi Multimedia ™ (WMM®) Traffic management), and Wi-Fi Protected Setup ™, all of which have enriched the user experience and improved user confidence in Wi-Fi over the last few years. Some Miracast devices will also support Tunneled Direct Link Setup (TDLS), which allows connections over infrastructure networks. With TDLS, it is possible to use more advanced Wi-Fi functions than when legacy infrastructure networks are used to connect devices with more efficient data transfer.

Miracast는 TV, 셋톱박스, 카메라, 프로젝터, 스마트폰, 태블릿 및 노트북 등 동영상 기능을 지원하는 클라이언트 장치를 위한 선택형 인증 프로그램이다. Miracast를 활용하려면, 디스플레이 장치와 소스 장치 모두 Miracast 인증을 받아야 한다. Wi-Fi가 탑재되어 있지 않은 장치 상에서도 HDMI 또는 USB 등의 인터페이스를 지원하는 Miracast 인증 어댑터를 사용함으로써 Miracast를 이용할 수 있다.Miracast is an optional authentication program for client devices that support video features such as TVs, set-top boxes, cameras, projectors, smart phones, tablets and laptops. To use Miracast, both the display device and the source device must be Miracast certified. Miracast can also be used on devices that do not have Wi-Fi by using Miracast certified adapters that support interfaces such as HDMI or USB.

상기한 바와 같이 Miracast의 활용을 통해 페어링된 장치간 컨텐츠의 전달이 가능해지고 있으나, 아직까지는 소스 장치에서 디스플레이 장치로 컨텐츠를 전달하는 목적으로만 사용되고 있을 뿐, 전달되는 컨텐츠와 연관된 서비스의 제공까지 확장되지 못하고 있는 실정이다. As described above, through the use of Miracast, it is possible to transfer content between paired devices. However, until now, only the purpose of delivering content from a source device to a display device has been extended, It is a fact that it does not become.

즉, 아직까지는 Miracast를 통해 소스 장치에서 디스플레이 장치로 전달되는 컨텐츠에 관련된 부가 데이터, 예를 들어, 컨텐츠 타입, 컨텐츠 설명, 해상도, 위치 정보 및 시간 정보를 전달하기 위한 방안이 제시되지 않고 있는 것이다.That is, a method for transmitting additional data related to the content transmitted from the source apparatus to the display apparatus through the Miracast, for example, the content type, the content description, the resolution, the position information and the time information has not been proposed yet.

상기한 바와 같은 종래기술의 문제점을 해결하기 위해, 본 발명에서는 소스 단말에서 디스플레이 단말로 컨텐츠 데이터 외에 다양한 부가 데이터를 전달할 수 있도록 하여 컨텐츠 데이터와 연관된 서비스를 제공할 수 있는 컨텐츠 연관 서비스 제공 방법 및 장치를 제안하고자 한다. According to an aspect of the present invention, there is provided a content-related service providing method and apparatus capable of providing a service associated with content data by transmitting various additional data in addition to content data from a source terminal to a display terminal, .

본 발명의 다른 목적들은 하기의 실시예를 통해 당업자에 의해 도출될 수 있을 것이다.Other objects of the invention will be apparent to those skilled in the art from the following examples.

상기한 목적을 달성하기 위해 본 발명의 바람직한 일 실시예에 따르면, 근거리 페어링을 통해 디스플레이 단말과 이더넷(Ethernet) 통신하는 소스 단말에서 수행하는 방법으로서, 컨텐츠 데이터 및 상기 컨텐츠 데이터와 관련된 부가 데이터를 인코딩하는 단계; 및 상기 인코딩된 컨텐츠 데이터를 포함하는 복수의 MPEG-2 TS 패킷과 상기 인코딩된 부가 데이터를 포함하는 정보 패킷을 단일 이더넷 패킷에 포함시켜 상기 디스플레이 단말로 전송하는 단계를 포함하되, 상기 디스플레이 단말은 상기 컨텐츠 데이터를 디코딩하여 출력하며, 상기 부가 데이터를 디코딩하여 상기 부가 데이터와 관련된 연관 서비스를 제공하는 컨텐츠 연관 서비스 제공 방법이 제공된다. According to another aspect of the present invention, there is provided a method for performing content data and additional data related to the content data in a source terminal that performs Ethernet communication with a display terminal through near- ; And transmitting a plurality of MPEG-2 TS packets including the encoded content data and an information packet including the encoded additional data in a single Ethernet packet to the display terminal, There is provided a method of providing a content-related service in which content data is decoded and output, and the associated data is decoded to provide an associated service related to the additional data.

상기 정보 패킷은 상기 이더넷 패킷에서 상기 MPEG-2 TS 패킷을 제외한 잔여 TCP 세그먼트에 포함될 수 있다. The information packet may be included in the remaining TCP segments excluding the MPEG-2 TS packet in the Ethernet packet.

상기 정보 패킷은 상기 컨텐츠 데이터와 연관되는 부가 데이터임을 식별할 수 있도록 하는 플래그, 상기 컨텐츠의 타입, 설명, 해상도, 재생 시간, 위치 정보 및 시간 정보 중 적어도 하나를 포함할 수 있다. The information packet may include at least one of a flag for identifying the additional data associated with the content data, a type, a description, a resolution, a reproduction time, a location information, and time information of the content.

상기 컨텐츠 데이터가 사용자가 직접 촬영한 영상인 경우, 상기 정보 패킷은 상기 영상을 촬영한 위치의 위도 및 경도 정보와 상기 영상의 촬영 시간을 포함할 수 있다. When the content data is a video shot by a user, the information packet may include latitude and longitude information of a position at which the video is photographed and a photographing time of the video.

상기 정보 패킷은 1byte의 플래그, 1byte의 컨텐츠 타입, 64 byte의 컨텐츠 설명, 4byte의 해상도, 4byte의 재생 시간, 16byte의 위치 정보 및 4byte의 시간 정보를 포함할 수 있다. The information packet may include a flag of 1 byte, a content type of 1 byte, a content description of 64 bytes, a resolution of 4 bytes, a playback time of 4 bytes, position information of 16 bytes, and time information of 4 bytes.

상기 디스플레이 단말은 네트워크를 통해 서비스 서버에 연결되며, 상기 디코딩된 부가 데이터를 상기 서비스 서버로 전송하고, 상기 서비스 서버로부터 상기 부가 데이터의 연관 서비스 정보를 수신할 수 있다. The display terminal may be connected to a service server through a network, transmit the decoded supplementary data to the service server, and receive the associated service information of the supplementary data from the service server.

상기 연관 서비스 정보는 상기 영상 데이터에 대한 연관 검색 정보, 연관 방송 프로그램 리스트, 추천 컨텐츠 리스트 중 적어도 하나를 포함할 수 있다. The related service information may include at least one of related search information on the video data, an associated broadcast program list, and a recommended content list.

상기 디스플레이 단말은 소정 방향 키가 입력되는 경우, 상기 연관 검색 정보, 연관 방송 프로그램 리스트 및 추천 컨텐츠 리스트 중 적어도 하나를 위한 인터페이스를 화면상에 출력할 수 있다. When the predetermined direction key is input, the display terminal can output an interface for at least one of the related search information, the related broadcast program list, and the recommended content list on the screen.

상기 연관 검색 정보, 연관 방송 프로그램 리스트 및 추천 컨텐츠 리스트를 위한 각각의 인터페이스는 상기 방향 키에 상응하는 방향에 미리 설정된 투명도를 가지면서 출력될 수 있다. Each of the interfaces for the associated search information, the associated broadcast program list, and the recommended content list may be output with a predetermined transparency in a direction corresponding to the direction key.

상기 컨텐츠 데이터는 Miracast 프로토콜을 통해 상기 소스 단말에서 상기 디스플레이 단말로 미러링 또는 스트리밍될 수 있다. The content data may be mirrored or streamed from the source terminal to the display terminal through the Miracast protocol.

본 발명의 다른 측면에 따르면, 상기한 방법을 수행하는 프로그램이 기록된 컴퓨터 판독 가능한 기록매체가 제공된다. According to another aspect of the present invention, there is provided a computer-readable recording medium on which a program for performing the above-described method is recorded.

본 발명의 또 다른 측면에 따르면, 근거리 페어링을 통해 디스플레이 장치와 이더넷(Ethernet) 통신하는 소스 장치로서, 컨텐츠 데이터 및 상기 컨텐츠 데이터와 관련된 부가 데이터를 인코딩하는 인코딩부; 및 상기 인코딩된 컨텐츠 데이터를 포함하는 복수의 MPEG-2 TS 패킷과 상기 인코딩된 부가 데이터를 포함하는 정보 패킷을 단일 이더넷 패킷에 포함시켜 상기 디스플레이 장치로 전송하는 근거리 통신부를 포함하되, 상기 디스플레이 장치는 상기 컨텐츠 데이터를 디코딩하여 출력하며, 상기 부가 데이터를 디코딩하여 상기 부가 데이터와 관련된 연관 서비스를 제공하는 소스 장치가 제공된다. According to another aspect of the present invention, there is provided a source apparatus for Ethernet communication with a display apparatus through near-field pairing, comprising: an encoding unit encoding content data and additional data related to the content data; And a local communication unit transmitting a plurality of MPEG-2 TS packets including the encoded content data and an information packet including the encoded additional data in a single Ethernet packet to the display device, There is provided a source apparatus for decoding and outputting the content data and decoding the additional data to provide an associated service related to the additional data.

본 발명의 또 다른 측면에 따르면, 근거리 페어링을 통해 소스 단말과 이더넷(Ethernet) 통신하는 디스플레이 단말과 네트워크를 통해 연결되는 서비스 서버 장치로서, 상기 디스플레이 단말로부터, 상기 소스 단말에서 상기 디스플레이 단말로 전달되는 컨텐츠 데이터에 대한 부가 데이터를 수신하는 통신부; 및 상기 부가 데이터와 관련된 연관 서비스 정보를 추출하는 연관 서비스 추출부를 포함하되, 상기 통신부는 상기 추출된 연관 서비스 정보를 상기 디스플레이 단말로 전송하며, 상기 소스 단말은 상기 영상 데이터 및 상기 부가 데이터를 인코딩하고, 상기 인코딩된 영상 데이터 및 상기 인코딩된 부가 데이터를 하나의 이더넷 패킷에 포함시켜 상기 디스플레이 단말로 전송하는 서비스 서버 장치가 제공된다. According to another aspect of the present invention, there is provided a service server apparatus connected via a network to a display terminal that performs Ethernet communication with a source terminal through near-field pairing, the service server apparatus comprising: A communication unit for receiving additional data on the content data; And an associated service extracting unit for extracting related service information related to the additional data, wherein the communication unit transmits the extracted associated service information to the display terminal, and the source terminal encodes the video data and the supplementary data And transmitting the encoded image data and the encoded additional data in one Ethernet packet to the display terminal.

본 발명의 또 다른 측면에 따르면, 근거리 페어링을 통해 소스 장치와 이더넷(Ethernet) 통신하는 디스플레이 장치로서, 상기 소스 장치로부터 수신된 이더넷 패킷을 디코딩하는 디코딩부-상기 이더넷 패킷은 인코딩된 컨텐츠 데이터를 포함하는 복수의 MPEG-2 TS 패킷과 인코딩된 부가 데이터를 포함하는 정보 패킷을 포함함-; 상기 부가 데이터를 디코딩하여 서비스 서버로 전송하며, 상기 서비스 서버로부터 상기 부가 데이터와 관련된 연관 서비스 정보를 수신하는 서버 통신부; 및 상기 서비스 서버로부터 수신된 연관 서비스 정보를 이용하여 연관 서비스 이용을 위한 인터페이스를 출력하는 인터페이스 출력부를 포함하는 디스플레이 장치가 제공된다. According to another aspect of the present invention, there is provided a display apparatus for performing Ethernet communication with a source apparatus through near-field pairing, the apparatus comprising: a decoding unit decoding an Ethernet packet received from the source apparatus, the Ethernet packet including encoded content data; An information packet including a plurality of MPEG-2 TS packets and encoded additional data; A server communication unit for decoding the additional data and transmitting the decoded additional data to the service server and receiving the related service information related to the additional data from the service server; And an interface output unit for outputting an interface for using an associated service by using the related service information received from the service server.

본 발명에 따르면, 디스플레이 단말과 이더넷 통신하는 소스 단말에서 컨텐츠 데이터뿐만 아니라 컨텐츠 데이터에 대한 부가 데이터를 함께 인코딩하고 이를 이더넷 패킷에 포함시켜 전송하도록 함으로써 디스플레이 단말이 컨텐츠 데이터와 연관된 서비스를 제공할 수 있는 장점이 있다. According to the present invention, a source terminal that communicates with a display terminal via Ethernet encodes not only content data but also additional data for content data, and transmits the additional data in an Ethernet packet so that the display terminal can provide a service associated with the content data There are advantages.

도 1은 본 발명의 바람직한 일 실시예에 따른 컨텐츠 연관 서비스 제공 시스템의 구성을 도시한 도면.
도 2는 본 발명에 따른 이더넷 패킷 구조를 도시한 도면.
도 3은 본 발명에 따른 정보 패킷의 상세 구조를 도시한 도면.
도 4는 본 발명의 바람직한 일 실시예에 따른 연관 서비스 제공을 위해 디스플레이 단말이 출력하는 인터페이스의 예시 화면을 도시한 도면.
도 5는 본 발명의 일 실시예에 따른 소스 단말의 상세 구성을 도시한 도면.
도 6은 본 발명에 따른 디스플레이 단말의 상세 구성을 도시한 도면.
도 7은 본 발명에 따른 서비스 서버의 상세 구성을 도시한 도면.
도 8은 본 발명에 따른 4방향 UI 예시 화면을 도시한 도면.BRIEF DESCRIPTION OF THE DRAWINGS FIG. 1 is a diagram illustrating a configuration of a content-related service providing system according to a preferred embodiment of the present invention; FIG.
2 is a diagram illustrating an Ethernet packet structure according to the present invention.
3 shows a detailed structure of an information packet according to the present invention;
4 is a diagram illustrating an exemplary screen of an interface output by a display terminal for providing an associated service according to a preferred embodiment of the present invention;
5 illustrates a detailed configuration of a source terminal according to an embodiment of the present invention.
6 is a diagram showing a detailed configuration of a display terminal according to the present invention;
7 is a view showing a detailed configuration of a service server according to the present invention;
8 is a diagram illustrating a 4-way UI example screen according to the present invention.

본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 각 도면을 설명하면서 유사한 참조부호를 유사한 구성요소에 대해 사용하였다. While the invention is susceptible to various modifications and alternative forms, specific embodiments thereof are shown by way of example in the drawings and will herein be described in detail. It should be understood, however, that the invention is not intended to be limited to the particular embodiments, but includes all modifications, equivalents, and alternatives falling within the spirit and scope of the invention. Like reference numerals are used for like elements in describing each drawing.

이하에서, 본 발명에 따른 실시예들을 첨부된 도면을 참조하여 상세하게 설명한다.
Hereinafter, embodiments according to the present invention will be described in detail with reference to the accompanying drawings.

도 1은 본 발명의 바람직한 일 실시예에 따른 컨텐츠 연관 서비스 제공 시스템의 구성을 도시한 도면이다. 1 is a block diagram of a content-related service providing system according to an embodiment of the present invention.

도 1에 도시된 바와 같이, 본 발명에 따른 영상 연관 서비스 제공 시스템은 서비스 서버(100), 디스플레이 단말(102) 및 소스 단말(104)을 포함할 수 있다. As shown in FIG. 1, the video association service providing system according to the present invention may include a service server 100, a display terminal 102, and a source terminal 104.

서비스 서버(100)와 디스플레이 단말(102) 및 소스 단말(104)은 네트워크를 통해 연결되며, 여기서 네트워크는 유무선 인터넷망, 이동 통신망 등을 모두 포함할 수 있다. The service server 100, the display terminal 102, and the source terminal 104 are connected through a network. The network may include a wired / wireless Internet network, a mobile communication network, and the like.

본 발명에 따른 서비스 서버(100)는 디스플레이 단말(102) 및 소스 단말(104)과의 연결 설정을 제어하며, 디스플레이 단말(102)과 소스 단말(104) 간 연결 설정된 상태에서 소스 단말(104)로부터 디스플레이 단말(102)로 전달되는 컨텐츠와 연관된 서비스를 제공한다. The service server 100 according to the present invention controls the connection setting between the display terminal 102 and the source terminal 104 and controls the connection between the display terminal 102 and the source terminal 104, The display terminal 102, and the like.

본 발명에 따르면, 디스플레이 단말(102)과 소스 단말(104)간 연결은 근거리 페어링(pairing)으로 정의될 수 있으며, 이와 같은 페어링은 Wi-Fi를 기반으로 Miracast를 통해 이루어지는 것으로 정의될 수 있다. According to the present invention, the connection between the display terminal 102 and the source terminal 104 can be defined as near-by pairing, and such pairing can be defined to be performed through Miracast based on Wi-Fi.

본 발명에 따른 디스플레이 단말(102)은 방송 사업자가 송출하는 라이브 프로그램 또는 주문형 프로그램을 수신하여 출력하는 셋탑박스 또는 TV일 수 있다. The display terminal 102 according to the present invention may be a set-top box or a TV that receives and outputs a live program or an on-demand program transmitted by a broadcasting company.

또한, 소스 단말(104)은 서비스 서버(100)와 연동할 수 있는 어플리케이션이 설치 및 실행되며, 디스플레이 단말(102)과 페어링될 수 있는 단말로서 이동통신 단말기 및 터치 패드를 포함할 수 있다. In addition, the source terminal 104 may include a mobile communication terminal and a touch pad as a terminal that can be paired with the display terminal 102, and an application capable of interfacing with the service server 100 is installed and executed.

본 발명의 바람직한 일 실시예에 따르면, 서비스 서버(100)는 페어링된 디스플레이 단말(102)과 소스 단말(104)간 인증 처리 과정을 수행할 수 있다. According to a preferred embodiment of the present invention, the service server 100 may perform an authentication process between the paired display terminal 102 and the source terminal 104.

인증 처리 과정은 원 타임 패스워드(One Time Password)를 통해 수행될 수 있다. 이와 같은 인증 처리 과정은 동일 댁내에 있는 사용자가 소유하는 디스플레이 단말(102) 및 소스 단말(104)간 페어링 이후 컨텐츠 전달이 이루어지도록 하기 위함이다. The authentication process can be performed through a One Time Password. The authentication process is performed so that content is delivered after pairing between the display terminal 102 and the source terminal 104 owned by a user in the same home.

페어링이 완료된 이후, 소스 단말(104)에서 실행되는 컨텐츠 데이터가 디스플레이 단말(102)로 전달된다. After the pairing is completed, the content data to be executed in the source terminal 104 is transmitted to the display terminal 102.

여기서 컨텐츠의 전달은 컨텐츠 데이터의 미러링 또는 스트리밍으로 정의될 수 있다. Here, the delivery of the content can be defined as the mirroring or streaming of the content data.

이하에서는 설명의 편의를 위해, Miracast 프로토콜에 따라 소스 단말(104)에서 디스플레이 단말(102)로 컨텐츠 미러링이 수행되는 경우에 미러링 컨텐츠와 연관된 서비스를 제공하는 것을 예로 든다. Hereinafter, for convenience of description, it is assumed that a service associated with the mirrored content is provided when content mirroring is performed from the source terminal 104 to the display terminal 102 according to the Miracast protocol.

소스 단말(104)에서 실행되는 컨텐츠가 디스플레이 단말(102)로 미러링되는 상황에서, 사용자의 요청이 있는 경우 본 발명에 따른 서비스 서버(100)는 미러링되는 컨텐츠와 연관된 서비스를 제공한다. In a situation where the content executed in the source terminal 104 is mirrored to the display terminal 102, the service server 100 according to the present invention provides a service related to the content to be mirrored when a user requests it.

연관 서비스의 제공은 소스 단말(104) 또는 리모트 컨트롤러(미도시)를 통한 연관 서비스 요청에 의해 개시될 수 있다. The provision of the associated service may be initiated by an associated service request through the source terminal 104 or a remote controller (not shown).

본 발명에 따른 연관 서비스는 미러링되고 있는 컨텐츠와 연관된 검색 서비스, 연관 방송 프로그램 리스트 제공 서비스, 추천 컨텐츠 리스트 제공 서비스 등을 포함할 수 있다. The related service according to the present invention may include a search service related to the content being mirrored, an associated broadcast program list providing service, a recommended content list providing service, and the like.

본 발명의 바람직한 일 실시예에 따르면, 연관 서비스 제공을 위해, 소스 단말(104)은 컨텐츠 데이터 외에 컨텐츠에 대한 부가 데이터를 디스플레이 단말(102)로 함께 전송한다. According to a preferred embodiment of the present invention, for the purpose of providing an associated service, the source terminal 104 transmits the additional data for the content in addition to the content data to the display terminal 102 together.

Miracast를 통해 페어링된 장치 간에는 이더넷 통신을 하게 되며, 이더넷 통신에서 TCP/IP 프로토콜에 따른 이더넷 패킷의 MTU(Maximum Transmission Unit)는 1500byte로 정의된다. Miracast에서는 188byte의 MPEG-2 TS 패킷으로 컨텐츠 데이터를 소스 단말(104)에서 디스플레이 단말(102)로 전송하는 것으로 정의하고 있어 하나의 이더넷 패킷에는 7개의 MPEG-2 TS 패킷이 포함된다. Ethernet communication is performed between devices paired via Miracast. In Ethernet communication, MTU (Maximum Transmission Unit) of Ethernet packet according to TCP / IP protocol is defined as 1500 bytes. In Miracast, content data is defined as 188 bytes of MPEG-2 TS packets transmitted from the source terminal 104 to the display terminal 102, and one Ethernet packet includes 7 MPEG-2 TS packets.

본 발명에 따른 소스 단말(104)은 컨텐츠 데이터 및 부가 데이터를 인코딩하고, 인코딩된 컨텐츠 데이터를 포함하는 복수의 MPEG-2 TS 패킷과 인코딩된 부가 데이터를 포함하는 정보 패킷을 하나의 이더넷 패킷에 포함시켜 디스플레이 단말(102)로 전송한다. The source terminal 104 according to the present invention encodes the content data and the additional data, and encapsulates the information packet including the plurality of MPEG-2 TS packets including the encoded content data and the encoded additional data into one Ethernet packet To the display terminal 102.

하나의 이더넷 패킷에 7개의 MPEG-2 TS 패킷이 포함되는 경우, IP 헤더가 20byte, UDP 8byte이므로 156byte가 남게 된다. When one Ethernet packet includes seven MPEG-2 TS packets, the IP header is 20 bytes, and UDP is 8 bytes, so 156 bytes remain.

본 발명은 상기와 같은 이더넷 패킷의 잔여 TCP 세그먼트에 인코딩된 부가 데이터를 포함시킨다. The present invention includes the additional data encoded in the remaining TCP segments of the Ethernet packet as described above.

도 2는 본 발명에 따른 이더넷 패킷 구조를 도시한 도면이다. 2 is a diagram illustrating an Ethernet packet structure according to the present invention.

도 2에 도시된 바와 같이, 본 발명에 따른 이더넷 패킷은 7개의 MPEG-2 TS 패킷(200)과 함께 부가 데이터를 위한 정보 패킷(Info-packet, 202)을 포함한다. As shown in FIG. 2, the Ethernet packet according to the present invention includes seven MPEG-2 TS packets 200 and an information packet 202 for additional data.

본 발명에 따른 정보 패킷은 Miracast를 통해 연결된 두 단말간에 컨텐츠와 관련된 부가 데이터를 전송하기 위한 것으로서, Miracast Info-packet으로 정의될 수 있다. The information packet according to the present invention is for transmitting additional data related to contents between two terminals connected through Miracast, and can be defined as a Miracast Info-packet.

바람직하게, 본 발명에 따른 정보 패킷은 94byte의 사이즈를 가질 수 있다. Preferably, the information packet according to the present invention may have a size of 94 bytes.

도 3은 본 발명에 따른 정보 패킷의 상세 구조를 도시한 도면이다. 3 is a diagram showing a detailed structure of an information packet according to the present invention.

도 3에 도시된 바와 같이, 본 발명에 따른 정보 패킷은 정보 패킷임을 식별할 수 있도록 하는 플래그, 상기 컨텐츠의 타입, 설명, 해상도, 재생 시간, 위치 정보 및 시간 정보 중 적어도 하나를 포함할 수 있다. As shown in FIG. 3, the information packet according to the present invention may include at least one of a flag for identifying the information packet, a type, an explanation, a resolution, a reproduction time, a location information and a time information of the content .

보다 상세하게, 정보 패킷은 1byte의 플래그, 1byte의 컨텐츠 타입, 64byte의 컨텐츠 설명, 4byte의 해상도, 4byte의 재생 시간, 16byte의 위치 정보 및 4byte의 시간 정보를 포함할 수 있다. More specifically, the information packet may include a flag of 1 byte, a content type of 1 byte, a content description of 64 bytes, a resolution of 4 bytes, a playback time of 4 bytes, position information of 16 bytes, and time information of 4 bytes.

여기서, 컨텐츠 설명은 소스 단말(104)에서 디스플레이 단말(102)로 미러링되는 컨텐츠의 이름뿐만 아니라, 컨텐츠에 대해 사용자 직접 입력하거나 미리 입력되어 있는 태그 정보를 모두 포함할 수 있다. Here, the content description may include not only the name of the content to be mirrored from the source terminal 104 to the display terminal 102, but also all of the tag information entered directly by the user or inputted in advance.

예를 들어, 컨텐츠 설명은 제목, 주인공, 줄거리 등을 포함할 수 있으며, 개인 영상(예를 들어, 결혼 동영상, 게임 영상, 여행 사진 등)인 경우 사용자가 입력한 영상에 대한 태그 정보(영상 주제, 장소 등)를 포함할 수 있다. For example, the content description may include a title, a heroine, a plot, etc. In the case of a personal image (for example, a marriage video, a game image, a travel photograph, etc.) , Place, etc.).

또한, 위치 정보는 컨텐츠 데이터가 영상 데이터인 경우, 영상이 촬영된 위치에 관한 정보로서, 8byte의 위도 정보 및 8byte의 경도 정보를 포함할 수 있다. In addition, when the content data is video data, the location information may include 8 bytes of latitude information and 8 bytes of hardness information as information on the position where the video was captured.

컨텐츠 데이터가 사용자가 소스 단말(104)을 통해 직접 촬영한 영상인 경우, GPS 정보를 통해 위치 정보가 계산될 수 있다. If the content data is a video shot directly by the user through the source terminal 104, the location information can be calculated via the GPS information.

한편, 시간 정보는 현재 시간뿐만 아니라, 상기와 같이 영상을 촬영한 시간 정보(날짜)를 포함할 수 있다. On the other hand, the time information may include not only the current time, but also time information (date) of capturing the image as described above.

디스플레이 단말(102)은 이더넷 패킷이 수신되는 경우, 이를 디코딩한다. The display terminal 102 decodes the Ethernet packet when it is received.

보다 상세하게, 디스플레이 단말(102)은 MPEG-2 TS 패킷을 디코딩하여 컨텐츠 데이터를 출력할 수 있다. In more detail, the display terminal 102 can decode the MPEG-2 TS packet and output the content data.

컨텐츠 데이터가 영상인 경우 이를 디스플레이하며, 컨텐츠 데이터가 오디오인 경우 이를 스피커를 통해 출력한다. When the content data is an image, it is displayed. When the content data is audio, the content data is outputted through a speaker.

이와 함께, 디스플레이 단말(102)은 정보 패킷의 플래그를 통해 컨텐츠 데이터와 함께 부가 데이터가 함께 수신되었음을 인지하고, 부가 데이터를 디코딩한다. At the same time, the display terminal 102 recognizes that the additional data is received together with the content data through the flag of the information packet, and decodes the additional data.

본 발명에 따르면, 디스플레이 단말(102)의 부가 데이터의 디코딩을 통해 연관 서비스를 제공할 수 있다. According to the present invention, it is possible to provide an associated service through decoding of additional data of the display terminal 102.

본 발명의 일 실시예에 따르면, 사용자의 연관 서비스 요청 시, 서비스 서버(100)는 디스플레이 단말(102)로부터 현재 소스 단말(104)에서 디스플레이 단말(102)로 미러링되는 컨텐츠 데이터에 대한 부가 데이터를 수신한다. According to an embodiment of the present invention, when a user's associated service is requested, the service server 100 transmits additional data for content data mirrored from the current source terminal 104 to the display terminal 102 from the display terminal 102 .

상기한 바와 같이, 컨텐츠 부가 데이터는 컨텐츠 타입, 설명, 해상도, 재생 시간, 위치 정보, 시간 정보를 포함할 수 있다. As described above, the content addition data may include a content type, a description, a resolution, a playback time, location information, and time information.

서비스 서버(100)는 부가 데이터 분석을 통해 추출된 키워드, 방송 프로그램 리스트, 연관 컨텐츠 리스트 등을 포함하는 연관 서비스 정보를 디스플레이 단말(102)로 전송한다. The service server 100 transmits related service information including a keyword, a broadcast program list, an associated content list, and the like extracted through additional data analysis to the display terminal 102.

도 4는 본 발명의 바람직한 일 실시예에 따른 연관 서비스 제공을 위해 디스플레이 단말이 출력하는 인터페이스의 예시 화면을 도시한 도면이다. 4 is a diagram illustrating an exemplary screen of an interface output by a display terminal for providing an associated service according to an exemplary embodiment of the present invention.

도 4에 도시된 바와 같이, 본 발명에 따른 디스플레이 단말(102)은 연관 서비스 정보를 수신하여 사용자의 소정의 방향 키 선택이 있는 경우 선택된 방향 키에 상응하는 인터페이스를 출력할 수 있다. As shown in FIG. 4, the display terminal 102 according to the present invention may receive the associated service information and output an interface corresponding to the selected direction key when there is a predetermined direction key selection of the user.

이하에서는 도면을 참조하여 본 발명에 따른 서비스 서버(100), 디스플레이 단말(102) 및 소스 단말(104)의 구성을 상세하게 살펴본다. Hereinafter, the configuration of the service server 100, the display terminal 102, and the source terminal 104 according to the present invention will be described in detail with reference to the drawings.

도 5는 본 발명의 일 실시예에 따른 소스 단말의 상세 구성을 도시한 도면이다. 5 is a diagram illustrating a detailed configuration of a source terminal according to an embodiment of the present invention.

이하에서는 본 발명에 따른 소스 단말(104)을 통해 촬영된 영상 데이터를 디스플레이 단말(102)로 미러링하여 출력하는 것을 중심으로 설명한다. Hereinafter, the image data photographed through the source terminal 104 according to the present invention is mirrored by the display terminal 102 and output.

도 5에 도시된 바와 같이, 본 발명에 따른 소스 단말(104)은 컨텐츠 저장부(500), 인코딩부(502), 패킷 생성부(504), 근거리 통신부(506) 및 제어부(508)를 포함할 수 있다. 5, the source terminal 104 according to the present invention includes a content storage unit 500, an encoding unit 502, a packet generation unit 504, a short range communication unit 506, and a control unit 508 can do.

컨텐츠 저장부(500)는 사용자가 촬영한 영상 데이터(컨텐츠 데이터)를 저장한다. 또한, 컨텐츠 저장부(500)는 영상 데이터에 대한 부가 데이터도 함께 저장하고 있다. The content storage unit 500 stores image data (content data) captured by a user. In addition, the content storage unit 500 stores additional data for the image data.

이하에서는 컨텐츠 저장부(500)에 저장된 영상 데이터를 미러링하는 것으로 설명하나, 이에 한정됨이 없이 소스 단말(104)에서 다운로드 되거나 또는 스트리밍되는 컨텐츠를 미러링하는 경우에도 적용될 수 있다. Hereinafter, the image data stored in the content storage unit 500 is described as being mirrored. However, the present invention is not limited thereto, but may be applied to a case of mirroring downloaded or streamed content from the source terminal 104.

본 발명에 따른 부가 데이터는 촬영 위치, 시간(날짜) 및 설명 정보를 포함할 수 있다. The additional data according to the present invention may include photographing position, time (date), and explanatory information.

소스 단말(104)과 디스플레이 단말(102)이 연결 설정되고, 사용자의 영상 미러링 요청이 있는 경우, 인코딩부(502)는 영상 데이터 및 부가 데이터를 인코딩한다. The source terminal 104 and the display terminal 102 are connected to each other, and when there is a video mirroring request of the user, the encoding unit 502 encodes the video data and the additional data.

본 발명에 따른 패킷 생성부(504)는 인코딩된 영상 데이터 및 부가 데이터를 포함하는 이더넷 패킷을 생성한다. The packet generator 504 according to the present invention generates an Ethernet packet including the encoded image data and the additional data.

본 발명에 따른 이더넷 패킷은 인코딩부(502)에 의해 인코딩된 영상 데이터를 이용하여 MPEG-2 TS 패킷과 MPEG-2 TS 패킷이 채워진 부분 외의 잔여 TCP 세그먼트에 인코딩된 부가 데이터에 대한 정보 패킷을 포함한다. The Ethernet packet according to the present invention includes an information packet for the additional data encoded in the remaining TCP segments other than the portion where the MPEG-2 TS packet and the MPEG-2 TS packet are filled using the image data encoded by the encoding unit 502 do.

전술한 바와 같이, 본 발명에 따른 인코딩된 부가 데이터에 대한 정보 패킷에는 부가 데이터가 포함되었음을 나타내는 플래그, 소스 단말(104)에서 디스플레이 단말(102)로 미러링되는 영상의 타입/설명/해상도/재생시간/위치정보/시간정보가 포함될 수 있다. As described above, the information packet for the encoded additional data according to the present invention includes a flag indicating that the additional data is included, a flag indicating the type / description / resolution / reproduction time of the video mirrored by the display terminal 102 from the source terminal 104 / Location information / time information may be included.

근거리 통신부(506)는 근거리에 위치한 디스플레이 단말(102)로 이더넷 패킷을 전송한다. The short-range communication unit 506 transmits the Ethernet packet to the display terminal 102 located at a short distance.

본 발명에 따른 디스플레이 단말(102)은 이더넷 패킷을 수신한 후 이를 디코딩하여 영상 데이터를 출력하는 것과 동시에 정보 패킷을 통해 부가 데이터를 식별할 수 있다. The display terminal 102 according to the present invention can receive the Ethernet packet, decode it, output the image data, and identify the additional data through the information packet.

도 6은 본 발명에 따른 디스플레이 단말의 상세 구성을 도시한 도면이다. 6 is a diagram showing the detailed configuration of a display terminal according to the present invention.

도 6에 도시된 바와 같이, 본 발명에 따른 디스플레이 단말(102)은 근거리 통신부(600), 디코딩부(602), 서버 통신부(604), 인터페이스 출력부(606) 및 제어부(608)를 포함할 수 있다. 6, the display terminal 102 according to the present invention includes a local communication unit 600, a decoding unit 602, a server communication unit 604, an interface output unit 606, and a control unit 608 .

근거리 통신부(600)는 소스 단말(104)로부터 이더넷 패킷을 수신하며, 디코딩부(602)는 이더넷 패킷을 디코딩한다. The local communication unit 600 receives the Ethernet packet from the source terminal 104, and the decoding unit 602 decodes the Ethernet packet.

본 발명에 따른 이더넷 패킷에는 영상 데이터에 대한 MPEG-2 TS 패킷뿐만 아니라, 미러링되는 영상의 부가 데이터에 대한 정보 패킷을 포함하며, 디코딩부(602)는 정보 패킷을 디코딩하여 부가 데이터를 식별한다. The Ethernet packet according to the present invention includes not only MPEG-2 TS packets for image data but also information packets for additional data of the mirrored image, and the decoding unit 602 decodes the information packets to identify additional data.

디스플레이 단말(102)은 디코딩된 영상 데이터를 화면상에 출력한다. The display terminal 102 outputs the decoded image data on the screen.

이와 함께 디스플레이 단말(102)은 사용자의 요청이 있는 경우, 디코딩된 부가 데이터를 이용하여 연관 서비스를 제공할 수 있다. In addition, if there is a request from the user, the display terminal 102 can provide the associated service using the decoded additional data.

본 발명에 따른 서버 통신부(604)는 디코딩된 부가 데이터를 서비스 서버(100)로 전송하고, 서비스 서버(100)로부터 연관 서비스 정보를 수신한다. The server communication unit 604 according to the present invention transmits the decoded additional data to the service server 100 and receives the related service information from the service server 100. [

이하에서는 도 7을 참조하여 본 발명에 따른 서비스 서버의 상세 구성을 살펴본다. Hereinafter, a detailed configuration of a service server according to the present invention will be described with reference to FIG.

도 7에 도시된 바와 같이, 본 발명에 따른 서비스 서버(100)는 통신부(700), 연관 서비스 추출부(702) 및 인증 처리부(704)를 포함할 수 있다. 7, the service server 100 according to the present invention may include a communication unit 700, an associated service extraction unit 702, and an authentication processing unit 704.

통신부(700)는 디스플레이 단말(102)로부터 부가 데이터를 수신한다. The communication unit 700 receives the additional data from the display terminal 102.

여기서, 통신부(700)를 통해 수신되는 부가 데이터는 소스 단말(104)에서 디스플레이 단말(102)로 미러링되는 영상과 관련된 데이터이다. Here, the additional data received through the communication unit 700 is data related to an image that is mirrored from the source terminal 104 to the display terminal 102.

연관 서비스 추출부(702)는 수신된 부가 데이터에 대한 연관 서비스를 추출한다. The associated service extracting unit 702 extracts an associated service for the received additional data.

본 발명에 따른 연관 서비스는 소스 단말(104)에서 디스플레이 단말(102)로 미러링되고 있는 영상과 연관된 검색 서비스, 연관 방송 프로그램 리스트 제공 서비스, 연관 컨텐츠 리스트 제공 서비스 등을 포함할 수 있다. The associated service according to the present invention may include a search service associated with an image mirrored from the source terminal 104 to the display terminal 102, an associated broadcast program list providing service, an associated content list providing service, and the like.

연관 서비스 추출부(702)는 미러링 영상와 연관된 관련 태그 정보, 연관 방송 프로그램 리스트 및 연관 컨텐츠 리스트를 추출하고, 추출된 연관 서비스 정보는 통신부(700)를 통해 디스플레이 단말(102)로 전송된다. The associated service extracting unit 702 extracts related tag information, an associated broadcast program list, and an associated content list associated with the mirrored image, and the extracted related service information is transmitted to the display terminal 102 through the communication unit 700.

연관 서비스 추출부(702)는 방송 프로그램에 대한 스케줄 정보(EPG)를 참조하여 연관 방송 프로그램 리스트를 추출할 수 있으며, OTT 사업자들과 연동하여 연관 컨텐츠 리스트를 추출할 수 있다. The associated service extracting unit 702 can extract an associated broadcast program list by referring to schedule information (EPG) of a broadcast program, and can extract an associated content list by interworking with OTT providers.

디스플레이 단말(102)은 서비스 서버(100)로부터 수신된 연관 서비스 정보를 이용하여 사용자가 현재 미러링되고 있는 영상과 연관된 서비스에 액세스할 수 있도록 한다. The display terminal 102 uses the associated service information received from the service server 100 so that the user can access the service associated with the image currently being mirrored.

서비스 서버(100)의 인증 처리부(704)는 초기 페어링 과정에서 디스플레이 단말(102) 및 소스 단말(104)간 인증 절차를 수행한다. The authentication processing unit 704 of the service server 100 performs an authentication procedure between the display terminal 102 and the source terminal 104 in the initial pairing process.

본 발명에 따른 인증 절차는 디스플레이 단말(102)과 인접한 소스 단말(104)간에 미러링이 이루어질 수 있도록 하는 것으로서, 디스플레이 단말(102) 및 소스 단말(104)의 MAC address를 이용하여 수행될 수 있다. The authentication procedure according to the present invention enables mirroring between the display terminal 102 and the adjacent source terminal 104 and can be performed using the MAC address of the display terminal 102 and the source terminal 104. [

다시 도 6을 참조하면, 디스플레이 단말(102)의 인터페이스 출력부(606)는 연관 서비스 정보 수신 이후, 사용자가 입력하는 키 신호 상응하는 연관 서비스 이용을 위한 인터페이스를 출력한다. Referring again to FIG. 6, the interface output unit 606 of the display terminal 102 outputs an interface for using the associated service corresponding to the key signal input by the user after receiving the related service information.

본 발명의 바람직한 일 실시예에 따르면, 연관 서비스 이용을 위한 인터페이스는 소정 방향 키 조작만으로 출력될 수 있다. According to a preferred embodiment of the present invention, an interface for using an associated service can be output by only a predetermined direction key operation.

예를 들어, 본 발명에 따른 연관 서비스는 4방향 키를 이용하여 제공될 수 있으며, 상부 방향 키 선택이 있는 경우 인터페이스 출력부(606)는 미러링되는 영상에 연관된 태그(키워드) 리스트가 표시되며 사용자의 검색어 입력창을 포함하는 인터페이스(800)를 출력한다. For example, an association service according to the present invention may be provided using a four-way key, and when there is an upward direction key selection, the interface output unit 606 displays a tag (keyword) list associated with the image to be mirrored, And outputs an interface 800 including a search word input window of FIG.

한편, 좌측 방향 키 선택이 있는 경우, 인터페이스 출력부(606)는 미러링되는 영상에 연관된 방송 프로그램 리스트(802)를 출력한다. If there is a left direction key selection, the interface output unit 606 outputs a broadcast program list 802 associated with the image to be mirrored.

여기서, 연관 방송 프로그램 리스트는 방송 사업자에 의해 소정 채널로 제공되는 라이브(live) 프로그램 및 주문형 프로그램(VOD)을 포함할 수 있다. Here, the associated broadcast program list may include a live program and a VOD program, which are provided by a broadcasting company on a predetermined channel.

우측 방향 키 선택이 있는 경우, 인터페이스 출력부(606)는 미러링되는 영상과 연관된 추천 컨텐츠 리스트(804)를 출력한다. If there is a right direction key selection, the interface output unit 606 outputs a recommended content list 804 associated with the image to be mirrored.

본 발명에서 추천 컨텐츠는 OTT(Over-The-Top) 사업자를 통해 제공되는 컨텐츠로 정의되며, 방송 사업자가 아닌 사업자가 인터넷을 통해 제공하는 컨텐츠로 정의될 수 있다. In the present invention, the recommended content is defined as content provided through an over-the-top (OTT) provider, and may be defined as content provided by a provider, rather than a broadcasting company, via the Internet.

또한, 본 발명에 따른 추천 컨텐츠는 사용자가 시청할 수 있는 컨텐츠뿐만 아니라, 미러링되는 영상과 연관된 상품 관련 정보를 포함할 수 있으며, 이러한 경우 사용자는 추천 컨텐츠 리스트에서 원하는 상품을 선택하여 구매할 수도 있을 것이다. In addition, the recommended contents according to the present invention may include not only the contents that the user can view but also the product related information related to the mirrored image. In this case, the user may select and purchase a desired product from the recommended contents list.

하부 방향 키 선택이 있는 경우, 인터페이스 출력부(606)는 사용자가 미리 등록한 컨텐츠 리스트(찜 보관함, 806)를 출력한다. If there is a downward direction key selection, the interface output unit 606 outputs a content list (a jugular storage box) 806 registered in advance by the user.

미리 등록한 컨텐츠는 사용자가 선호하는 것으로 등록한 컨텐츠일 수 있다. The pre-registered content may be content that the user prefers.

본 발명에 따른 연관 서비스 이용을 위한 각 인터페이스는 화면 상에 인식 가능한 상태로 투명하게 4방향 중 하나에 표시될 수 있다. Each interface for use of the associated service according to the present invention can be displayed in one of four directions in a transparent state on the screen in a recognizable state.

보다 상세하게, 연관 서비스 이용을 위한 인터페이스는 사용자가 입력한 방향 키에 상응하는 방향에 미리 설정된 투명도를 가지면서 출력될 수 있다. In more detail, the interface for using the associated service may be output with a predetermined transparency in a direction corresponding to the direction key input by the user.

디스플레이 단말(102)의 제어부(608)는 디코딩 및 서버와의 통신을 위한 전반적인 제어 과정을 수행한다. The control unit 608 of the display terminal 102 performs an overall control process for decoding and communication with the server.

본 발명의 실시예들은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 본 발명의 일 실시예들의 동작을 수행하기 위해 적어도 하나의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.Embodiments of the present invention may be implemented in the form of program instructions that can be executed on various computer means and recorded on a computer readable medium. The computer-readable medium may include program instructions, data files, data structures, and the like, alone or in combination. The program instructions recorded on the medium may be those specially designed and constructed for the present invention or may be available to those skilled in the art of computer software. Examples of computer-readable media include magnetic media such as hard disks, floppy disks, and magnetic tape; optical media such as CD-ROMs and DVDs; magnetic media such as floppy disks; Examples of program instructions, such as magneto-optical and ROM, RAM, flash memory and the like, can be executed by a computer using an interpreter or the like, as well as machine code, Includes a high-level language code. The hardware devices described above may be configured to operate as at least one software module to perform operations of one embodiment of the present invention, and vice versa.

이상과 같이 본 발명에서는 구체적인 구성 요소 등과 같은 특정 사항들과 한정된 실시예 및 도면에 의해 설명되었으나 이는 본 발명의 보다 전반적인 이해를 돕기 위해서 제공된 것일 뿐, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상적인 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다. 따라서, 본 발명의 사상은 설명된 실시예에 국한되어 정해져서는 아니되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등하거나 등가적 변형이 있는 모든 것들은 본 발명 사상의 범주에 속한다고 할 것이다.
As described above, the present invention has been described with reference to particular embodiments, such as specific elements, and specific embodiments and drawings. However, it should be understood that the present invention is not limited to the above- And various modifications and changes may be made thereto by those skilled in the art to which the present invention pertains. Accordingly, the spirit of the present invention should not be construed as being limited to the embodiments described, and all of the equivalents or equivalents of the claims, as well as the following claims, belong to the scope of the present invention .

Claims (14)

근거리 페어링(pairing)을 통해 디스플레이 단말과 이더넷(Ethernet) 통신하는 소스 단말에서 수행하는 방법으로서,
컨텐츠 데이터 및 상기 컨텐츠 데이터와 관련된 부가 데이터를 인코딩하는 단계; 및
상기 인코딩된 컨텐츠 데이터를 포함하는 복수의 MPEG-2 TS 패킷과 상기 인코딩된 부가 데이터를 포함하는 정보 패킷을 단일 이더넷 패킷에 포함시켜 상기 디스플레이 단말로 전송하는 단계를 포함하되,
상기 디스플레이 단말은 상기 컨텐츠 데이터를 디코딩하여 출력하며, 상기 부가 데이터를 디코딩하여 상기 부가 데이터와 관련된 연관 서비스를 제공하는 컨텐츠 연관 서비스 제공 방법.1. A method performed by a source terminal that performs Ethernet communication with a display terminal through near-field pairing,
Encoding the content data and additional data associated with the content data; And
Transmitting a plurality of MPEG-2 TS packets including the encoded content data and an information packet including the encoded additional data in a single Ethernet packet to the display terminal,
Wherein the display terminal decodes and outputs the content data, and decodes the additional data to provide an associated service related to the additional data. 제1항에 있어서,
상기 정보 패킷은 상기 이더넷 패킷에서 상기 MPEG-2 TS 패킷을 제외한 잔여 TCP 세그먼트에 포함되는 컨텐츠 연관 서비스 제공 방법.The method according to claim 1,
Wherein the information packet is included in the remaining TCP segments excluding the MPEG-2 TS packet in the Ethernet packet. 제1항에 있어서,
상기 정보 패킷은 상기 컨텐츠 데이터와 연관되는 부가 데이터임을 식별할 수 있도록 하는 플래그, 상기 컨텐츠의 타입, 설명, 해상도, 재생 시간, 위치 정보 및 시간 정보 중 적어도 하나를 포함하는 컨텐츠 연관 서비스 제공 방법.The method according to claim 1,
Wherein the information packet includes at least one of a flag for identifying the additional data associated with the content data, a type of the content, a description, a resolution, a playback time, location information, and time information. 제3항에 있어서,
상기 컨텐츠 데이터가 사용자가 직접 촬영한 영상인 경우, 상기 정보 패킷은 상기 영상을 촬영한 위치의 위도 및 경도 정보와 상기 영상의 촬영 시간을 포함하는 컨텐츠 연관 서비스 제공 방법. The method of claim 3,
Wherein the information packet includes latitude and longitude information of a position at which the image is photographed and a photographing time of the image when the content data is a user's own photographed image. 제4항에 있어서,
상기 정보 패킷은 1byte의 플래그, 1byte의 컨텐츠 타입, 64byte의 컨텐츠 설명, 4byte의 해상도, 4byte의 재생 시간, 16byte의 위치 정보 및 4byte의 시간 정보를 포함하는 컨텐츠 연관 서비스 제공 방법. 5. The method of claim 4,
Wherein the information packet includes a 1-byte flag, a 1-byte content type, a 64-byte content description, a 4-byte resolution, a 4-byte playback time, 16-byte location information, and 4-byte time information. 제1항에 있어서,
상기 디스플레이 단말은 네트워크를 통해 서비스 서버에 연결되며,
상기 디코딩된 부가 데이터를 상기 서비스 서버로 전송하고, 상기 서비스 서버로부터 상기 부가 데이터의 연관 서비스 정보를 수신하는 컨텐츠 연관 서비스 제공 방법.The method according to claim 1,
The display terminal is connected to a service server through a network,
Transmitting the decoded additional data to the service server, and receiving the associated service information of the supplementary data from the service server. 제6항에 있어서,
상기 연관 서비스 정보는 상기 영상 데이터에 대한 연관 검색 정보, 연관 방송 프로그램 리스트, 추천 컨텐츠 리스트 중 적어도 하나를 포함하는 컨텐츠 연관 서비스 제공 방법. The method according to claim 6,
Wherein the related service information includes at least one of association search information related to the video data, an associated broadcast program list, and a recommended content list. 제7항에 있어서,
상기 디스플레이 단말은 소정 방향 키가 입력되는 경우, 상기 연관 검색 정보, 연관 방송 프로그램 리스트 및 추천 컨텐츠 리스트 중 적어도 하나를 위한 인터페이스를 화면상에 출력하는 컨텐츠 연관 서비스 제공 방법. 8. The method of claim 7,
Wherein the display terminal outputs an interface for at least one of the related search information, the associated broadcast program list and the recommended content list on the screen when a predetermined direction key is input. 제8항에 있어서,
상기 연관 검색 정보, 연관 방송 프로그램 리스트 및 추천 컨텐츠 리스트를 위한 각각의 인터페이스는 상기 방향 키에 상응하는 방향에 미리 설정된 투명도를 가지면서 출력되는 컨텐츠 연관 서비스 제공 방법. 9. The method of claim 8,
Wherein each of the interfaces for the related search information, the associated broadcast program list, and the recommended content list is output with a preset transparency in a direction corresponding to the direction key. 제1항에 있어서,
상기 컨텐츠 데이터는 Miracast 프로토콜을 통해 상기 소스 단말에서 상기 디스플레이 단말로 미러링 또는 스트리밍되는 컨텐츠 연관 서비스 제공 방법. The method according to claim 1,
Wherein the content data is mirrored or streamed from the source terminal to the display terminal through a Miracast protocol. 제1항 내지 제10항 중 어느 한 항에 따른 방법을 수행하는 프로그램이 기록된 컴퓨터 판독 가능한 기록매체. A computer-readable recording medium on which a program for performing the method according to any one of claims 1 to 10 is recorded. 근거리 페어링(pairing)을 통해 디스플레이 장치와 이더넷(Ethernet) 통신하는 소스 장치로서,
컨텐츠 데이터 및 상기 컨텐츠 데이터와 관련된 부가 데이터를 인코딩하는 인코딩부; 및
상기 인코딩된 컨텐츠 데이터를 포함하는 복수의 MPEG-2 TS 패킷과 상기 인코딩된 부가 데이터를 포함하는 정보 패킷을 단일 이더넷 패킷에 포함시켜 상기 디스플레이 장치로 전송하는 근거리 통신부를 포함하되,
상기 디스플레이 장치는 상기 컨텐츠 데이터를 디코딩하여 출력하며, 상기 부가 데이터를 디코딩하여 상기 부가 데이터와 관련된 연관 서비스를 제공하는 소스 장치.1. A source device for performing Ethernet communication with a display device through near-field pairing,
An encoding unit encoding content data and additional data related to the content data; And
And a local communication unit for transmitting a plurality of MPEG-2 TS packets including the encoded content data and an information packet including the encoded additional data in a single Ethernet packet to the display device,
Wherein the display device decodes and outputs the content data, and decodes the supplementary data to provide an associated service related to the supplementary data. 근거리 페어링(pairing)을 통해 소스 단말과 이더넷(Ethernet) 통신하는 디스플레이 단말과 네트워크를 통해 연결되는 서비스 서버 장치로서,
상기 디스플레이 단말로부터, 상기 소스 단말에서 상기 디스플레이 단말로 전달되는 컨텐츠 데이터에 대한 부가 데이터를 수신하는 통신부; 및
상기 부가 데이터와 관련된 연관 서비스 정보를 추출하는 연관 서비스 추출부를 포함하되,
상기 통신부는 상기 추출된 연관 서비스 정보를 상기 디스플레이 단말로 전송하며,
상기 소스 단말은 상기 영상 데이터 및 상기 부가 데이터를 인코딩하고, 상기 인코딩된 영상 데이터 및 상기 인코딩된 부가 데이터를 하나의 이더넷 패킷에 포함시켜 상기 디스플레이 단말로 전송하는 서비스 서버 장치.A service server apparatus connected via a network to a display terminal that performs Ethernet communication with a source terminal through near-pair pairing,
A communication unit for receiving, from the display terminal, additional data on the content data transmitted from the source terminal to the display terminal; And
And an associated service extracting unit for extracting related service information related to the additional data,
Wherein the communication unit transmits the extracted associated service information to the display terminal,
Wherein the source terminal encodes the video data and the additional data, and transmits the encoded video data and the encoded additional data in one Ethernet packet to the display terminal. 근거리 페어링(pairing)을 통해 소스 장치와 이더넷(Ethernet) 통신하는 디스플레이 장치로서,
상기 소스 장치로부터 수신된 이더넷 패킷을 디코딩하는 디코딩부-상기 이더넷 패킷은 인코딩된 컨텐츠 데이터를 포함하는 복수의 MPEG-2 TS 패킷과 인코딩된 부가 데이터를 포함하는 정보 패킷을 포함함-;
상기 부가 데이터를 디코딩하여 서비스 서버로 전송하며, 상기 서비스 서버로부터 상기 부가 데이터와 관련된 연관 서비스 정보를 수신하는 서버 통신부; 및
상기 서비스 서버로부터 수신된 연관 서비스 정보를 이용하여 연관 서비스 이용을 위한 인터페이스를 출력하는 인터페이스 출력부를 포함하는 디스플레이 장치.

1. A display device for performing Ethernet communication with a source device through short-distance pairing,
A decoding unit for decoding an Ethernet packet received from the source apparatus, the Ethernet packet including an information packet including a plurality of MPEG-2 TS packets including encoded content data and encoded additional data;
A server communication unit for decoding the additional data and transmitting the decoded additional data to the service server and receiving the related service information related to the additional data from the service server; And
And an interface output unit outputting an interface for using an associated service by using the associated service information received from the service server.

KR1020130154632A 2013-12-12 2013-12-12 Method and apparatus for providing related service of content KR102157398B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020130154632A KR102157398B1 (en) 2013-12-12 2013-12-12 Method and apparatus for providing related service of content

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130154632A KR102157398B1 (en) 2013-12-12 2013-12-12 Method and apparatus for providing related service of content

Publications (2)

Publication Number Publication Date
KR20150068683A true KR20150068683A (en) 2015-06-22
KR102157398B1 KR102157398B1 (en) 2020-09-17

Family

ID=53516063

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130154632A KR102157398B1 (en) 2013-12-12 2013-12-12 Method and apparatus for providing related service of content

Country Status (1)

Country Link
KR (1) KR102157398B1 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101666508B1 (en) * 2015-09-25 2016-10-24 주식회사 텔레포트나인 Layer sharing system enabling layer to be overlapped
WO2021070976A1 (en) * 2019-10-07 2021-04-15 엘지전자 주식회사 Source device and wireless system

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100861336B1 (en) * 2007-05-23 2008-10-01 (주)유토포스 Picture album providing method, picture album providing system and picture registering method
KR20110024542A (en) * 2009-09-02 2011-03-09 에스케이 텔레콤주식회사 System and method for transmitting packet based wireless personal area network
KR20120022156A (en) * 2010-09-01 2012-03-12 엘지전자 주식회사 Image display apparatus for conducting wireless communicatoin among devices and image displaying method thereof
KR20130065873A (en) * 2011-12-06 2013-06-20 삼성전자주식회사 Method and apparatus for contents management-integrated in portable terminal
WO2013153887A1 (en) * 2012-04-13 2013-10-17 ソニー株式会社 Wireless communication device, information processing device, and communication method

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100861336B1 (en) * 2007-05-23 2008-10-01 (주)유토포스 Picture album providing method, picture album providing system and picture registering method
KR20110024542A (en) * 2009-09-02 2011-03-09 에스케이 텔레콤주식회사 System and method for transmitting packet based wireless personal area network
KR20120022156A (en) * 2010-09-01 2012-03-12 엘지전자 주식회사 Image display apparatus for conducting wireless communicatoin among devices and image displaying method thereof
KR20130065873A (en) * 2011-12-06 2013-06-20 삼성전자주식회사 Method and apparatus for contents management-integrated in portable terminal
WO2013153887A1 (en) * 2012-04-13 2013-10-17 ソニー株式会社 Wireless communication device, information processing device, and communication method

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101666508B1 (en) * 2015-09-25 2016-10-24 주식회사 텔레포트나인 Layer sharing system enabling layer to be overlapped
WO2021070976A1 (en) * 2019-10-07 2021-04-15 엘지전자 주식회사 Source device and wireless system
US11956495B2 (en) 2019-10-07 2024-04-09 Lg Electronics Inc. Source device and wireless system

Also Published As

Publication number Publication date
KR102157398B1 (en) 2020-09-17

Similar Documents

Publication Publication Date Title
CA2824365C (en) Output of content from the internet on a media rendering device
US9049479B2 (en) Set-top box-based TV streaming and redirecting
US9652192B2 (en) Connectionless transport for user input control for wireless display devices
JP6163011B2 (en) Adapter device, mirroring system, and mirroring method
US11842150B2 (en) Delivering auto-play media content element from cross origin resources
CN104756507A (en) Establishing a wireless display session between a computing device and a vehicle head unit
KR20140111010A (en) Bi-directional tunneling via user input back channel for wireless displays
US20130279693A1 (en) Transmitting a signal based on a high-definition multimedia interface signal
US9491210B2 (en) Sink device, source device and method for controlling the sink device
US10034047B2 (en) Method and apparatus for outputting supplementary content from WFD
US20150058454A1 (en) Version selective content delivery
KR102307485B1 (en) Method and apparatus for providing multi user contents service using external dongle
KR20140136752A (en) Method and apparatus for providing related service
KR20220020870A (en) Apparatus and Method for interworking Mobile Terminal with Set-top Box
KR102157398B1 (en) Method and apparatus for providing related service of content
CN112272319A (en) Audio and video data transmission method and device, storage medium and electronic equipment
KR101313592B1 (en) Computing device and method for streaming
KR101231821B1 (en) Method and System for providing contents continuous play service
KR20150068686A (en) Method and apparatus for providing preference content
KR102243778B1 (en) Media service providing method and broadcast receiver
KR20150015233A (en) Apparatus for Processing Image, Method for Providing Personalizaton Service, and Computer-readable Medium
KR102097835B1 (en) Method and apparatus for providing goods information
JP6268355B2 (en) Relay device, relay system, and program
EP2947843B1 (en) Server apparatus, display apparatus, system, and controlling methods thereof
TW201622424A (en) Method and device for providing content/service subscription and providing subscribed content/service

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right