KR102129160B1 - Operating Method Of Terminal And Server To Recommend Contents - Google Patents

Operating Method Of Terminal And Server To Recommend Contents Download PDF

Info

Publication number
KR102129160B1
KR102129160B1 KR1020170166088A KR20170166088A KR102129160B1 KR 102129160 B1 KR102129160 B1 KR 102129160B1 KR 1020170166088 A KR1020170166088 A KR 1020170166088A KR 20170166088 A KR20170166088 A KR 20170166088A KR 102129160 B1 KR102129160 B1 KR 102129160B1
Authority
KR
South Korea
Prior art keywords
information
user
terminal
broadcast server
top box
Prior art date
Application number
KR1020170166088A
Other languages
Korean (ko)
Other versions
KR20190066402A (en
Inventor
최지희
임경빈
Original Assignee
주식회사 엘지유플러스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 엘지유플러스 filed Critical 주식회사 엘지유플러스
Priority to KR1020170166088A priority Critical patent/KR102129160B1/en
Publication of KR20190066402A publication Critical patent/KR20190066402A/en
Application granted granted Critical
Publication of KR102129160B1 publication Critical patent/KR102129160B1/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/466Learning process for intelligent management, e.g. learning user preferences for recommending movies
    • H04N21/4661Deriving a combined profile for a plurality of end-users of the same client, e.g. for family members within a home
    • G06K9/00221
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/178Human faces, e.g. facial parts, sketches or expressions estimating age from face image; using age information for improving recognition
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25866Management of end-user data
    • H04N21/25891Management of end-user data being end-user preferences
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223Cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/466Learning process for intelligent management, e.g. learning user preferences for recommending movies
    • H04N21/4668Learning process for intelligent management, e.g. learning user preferences for recommending movies for recommending content, e.g. movies
    • G06K2009/00322

Abstract

이하의 실시예는 콘텐츠 추천을 위한 단말과 서버의 동작 방법에 관한 것이다. 실시예에 따른 단말의 동작 방법은 카메라를 통해 촬영된 영상에서 적어도 한 명의 사용자를 인식하는 단계; 미리 등록된 사용자 그룹에서 인식된 적어도 한 명의 사용자에 대응하는 사용자 조합을 결정하는 단계; 촬영된 영상, 결정된 사용자 조합 및 시청 환경 정보 중 적어도 하나에 기초하여 시청 상황 정보를 생성하는 단계; 시청 상황 정보를 방송 서버로 전송하는 단계; 및 방송 서버로부터 콘텐츠 추천 정보를 제공 받는 단계를 포함할 수 있다.The following embodiment relates to a method of operating a terminal and a server for recommending content. A method of operating a terminal according to an embodiment may include recognizing at least one user from an image captured through a camera; Determining a user combination corresponding to at least one user recognized in the pre-registered user group; Generating viewing situation information based on at least one of the captured image, the determined user combination, and viewing environment information; Transmitting viewing situation information to a broadcast server; And receiving content recommendation information from the broadcast server.

Description

콘텐츠 추천을 위한 단말과 서버의 동작 방법{Operating Method Of Terminal And Server To Recommend Contents}Operating method of terminal and server for content recommendation {Operating Method Of Terminal And Server To Recommend Contents}

이하의 실시예는 콘텐츠 추천을 위한 단말과 서버의 동작 방법에 관한 것이다.The following embodiment relates to a method of operating a terminal and a server for recommending content.

디지털 텔레비전 방송 기술은 텔레비전 화면을 통해서 방송 콘텐츠를 일방적으로 제공하기만 했던 종래의 방송 기술을 개선하였다. 특히 사용자와 실시간으로 상호적인 관계가 구성되는 환경을 조성했다.Digital television broadcasting technology has improved the conventional broadcasting technology that only unilaterally provides broadcast content through a television screen. In particular, we created an environment in which mutual relationships are established in real time with users.

다만, 현재 제공되는 IPTV 서비스는 집안의 여러 식구가 같이 사용하는 매체임에도 불구하고 콘텐츠 추천 알고리즘은 마치 한 사람이 사용한 것과 같이 사용자의 구분 없이 사용 이력을 수집하고 수집된 사용 이력 기반으로 콘텐츠를 추천하는 형태로 제공된다.However, despite the fact that currently provided IPTV service is a medium used by many family members in the house, the content recommendation algorithm collects usage history without user's distinction and recommends content based on the collected usage history as if one person used it. It is provided in the form.

이와 관련하여 한국공개특허 제10-2015-0139788호에서는 표적 사용자를 식별하여 표적 사용자에게 겨냥되는 미디어 컨텐트를 제공하는 방법을 개시한다.In this regard, Korean Patent Publication No. 10-2015-0139788 discloses a method of identifying a target user and providing media content targeted to the target user.

실시예에 따르면, IPTV 서비스에서 실제 시청자를 인식하고, 시청 환경 정보를 수집함으로써 시청 상황에 대응하여 정확도 높은 추천 콘텐츠를 제공하는 서비스 방법을 제공하도록 한다.According to an embodiment, an IPTV service recognizes an actual viewer and collects viewing environment information to provide a service method for providing highly recommended content in response to a viewing situation.

자세하게는, IPTV 가입자를 포함하는 복수의 사용자 그룹에 대해서 실제 시청 중인 사용자 조합을 결정하여 각 사용자 조합에 대응하는 데이터베이스를 관리하는 방법을 제공하도록 한다.In detail, a method for managing a database corresponding to each user combination is provided by determining a user combination actually being viewed for a plurality of user groups including IPTV subscribers.

카메라를 통해 촬영된 영상에서 적어도 한 명의 사용자를 인식하는 단계; 사용자 그룹에서 상기 인식된 적어도 한 명의 사용자에 대응하는 사용자 조합을 결정하는 단계; 상기 촬영된 영상, 상기 결정된 사용자 조합 및 시청 환경 정보 중 적어도 하나에 기초하여 시청 상황 정보를 생성하는 단계; 상기 시청 상황 정보를 방송 서버로 전송하는 단계; 및 상기 방송 서버로부터 콘텐츠 추천 정보를 제공 받는 단계를 포함하는, 단말의 동작 방법이 제공될 수 있다.Recognizing at least one user from the image taken through the camera; Determining a user combination corresponding to the recognized at least one user in a user group; Generating viewing situation information based on at least one of the captured image, the determined user combination, and viewing environment information; Transmitting the viewing situation information to a broadcast server; And receiving content recommendation information from the broadcast server.

상기 사용자 그룹에 속한 사용자들 각각에 대응하여 프로파일을 획득하는 단계를 더 포함할 수 있다.The method may further include obtaining a profile corresponding to each user belonging to the user group.

상기 사용자 그룹에 속한 사용자들 각각에 대응하여 프로파일을 획득하는 단계는, 상기 촬영된 영상을 통해 상기 사용자들 각각의 얼굴을 출력하는 단계; 및 상기 사용자들 각각의 얼굴에 대응하는 성별 및 연령에 대한 정보를 포함하는 상기 프로파일의 입력을 수신하는 단계를 포함할 수 있다.Acquiring a profile corresponding to each user belonging to the user group includes: outputting the faces of each of the users through the captured image; And receiving input of the profile including information on gender and age corresponding to each face of the users.

상기 시청 상황 정보를 생성하는 단계는, 상기 사용자 조합에 속한 사용자들 각각의 프로파일, 출력 중인 채널 정보, 날짜 정보 및 시간 정보 중 하나 이상을 조합하여 생성하는 단계를 포함할 수 있다.The generating of the viewing situation information may include combining one or more of profiles, output channel information, date information, and time information of each user belonging to the user combination.

상기 콘텐츠 추천 정보를 제공 받는 단계는, 상기 시청 상황 정보에 대응하여 상기 방송 서버의 추천 데이터베이스에 저장되어 있는 콘텐츠 추천 정보를 수신하는 단계를 더 포함할 수 있다.The receiving of the content recommendation information may further include receiving content recommendation information stored in the recommendation database of the broadcast server in response to the viewing situation information.

상기 시청 상황 정보는, 상기 콘텐츠 추천 정보의 생성을 위해 상기 방송 서버의 추천 데이터베이스에 업데이트 될 수 있다.The viewing situation information may be updated in the recommendation database of the broadcast server to generate the content recommendation information.

카메라를 통해 촬영된 영상에 대응하는 시청 상황 정보를 단말로부터 수신하는 단계; 상기 시청 상황 정보에 기초하여 추천 데이터베이스에서 콘텐츠 추천 정보를 추출하는 단계; 및 상기 단말로 상기 콘텐츠 추천 정보를 전송하는 단계를 포함하고, 상기 시청 상황 정보는, 상기 촬영된 영상, 사용자 그룹에서 상기 촬영된 영상에서 인식되는 적어도 한 명의 사용자에 대응하는 사용자 조합 및 시청 환경 정보 중 적어도 하나에 기초하여 생성되는, 방송 서버의 동작 방법이 제공될 수 있다.Receiving viewing situation information corresponding to an image photographed through a camera from a terminal; Extracting content recommendation information from a recommendation database based on the viewing situation information; And transmitting the content recommendation information to the terminal, wherein the viewing situation information includes a user combination and viewing environment information corresponding to at least one user recognized in the captured image, the captured image in the user group. A method of operating a broadcast server, which is generated based on at least one of the above, may be provided.

상기 추천 데이터베이스에 상기 시청 상황 정보를 저장하는 단계; 상기 시청 상황 정보에 대응하여 관련 채널 정보 및 관련 콘텐츠를 수집하는 단계; 및 상기 관련 채널 정보 및 상기 관련 콘텐츠의 매칭을 통해 상기 콘텐츠 추천 정보를 저장하는 단계를 더 포함할 수 있다.Storing the viewing situation information in the recommendation database; Collecting relevant channel information and related content in response to the viewing situation information; And storing the content recommendation information through matching of the relevant channel information and the related content.

제2 단말에서 적어도 한 명의 사용자에 대해 촬영된 영상을 수신하는 단계; 및 상기 제2 단말의 적어도 한 명의 사용자에 대한 인증을 수행하는 단계를 더 포함할 수 있다.Receiving an image captured for at least one user in the second terminal; And it may further include the step of performing authentication for at least one user of the second terminal.

상기 제2 단말의 적어도 한 명의 사용자에 대한 인증이 성공한 경우, 상기 인증 결과에 기초하여 상기 사용자 그룹 내 제2 사용자 조합을 결정하는 단계; 및 상기 추천 데이터베이스에서 상기 제2 사용자 조합에 대응하여 저장된 콘텐츠 추천 정보를 추출하여 상기 제2 단말로 제공하는 단계를 포함할 수 있다.If authentication of at least one user of the second terminal is successful, determining a second user combination in the user group based on the authentication result; And extracting content recommendation information stored corresponding to the second user combination from the recommendation database and providing the content recommendation information to the second terminal.

실시예에 따르면, IPTV 서비스에서 실제 시청자를 인식하고, 시청 환경 정보를 수집함으로써 시청 상황에 대응하여 정확도 높은 추천 콘텐츠를 제공하는 서비스 방법을 제공할 수 있다.According to an embodiment, the IPTV service recognizes an actual viewer and collects viewing environment information to provide a service method that provides highly recommended content in response to the viewing situation.

자세하게는, IPTV 가입자를 포함하는 복수의 사용자 그룹에 대해서 실제 시청 중인 사용자 조합을 결정하여 각 사용자 조합에 대응하는 데이터베이스를 관리하는 방법을 제공할 수 있다.In detail, a method of managing a database corresponding to each combination of users may be provided by determining a combination of users actually being viewed for a plurality of user groups including IPTV subscribers.

도 1은 일실시예에 있어서, 콘텐츠 추천을 위한 단말의 동작 방법을 설명하기 위한 도면이다.
도 2는 일실시예에 있어서, 콘텐츠 추천을 위한 방송 서버의 동작 방법을 설명하기 위한 도면이다.
도 3은 일실시예에 있어서, 콘텐츠 추천 서비스를 제공하는 시나리오를 설명하기 위한 도면이다.
도 4는 일실시예에 있어서, 추천 데이터베이스가 관리되는 예시를 설명하기 위한 도면이다.
도 5는 일실시예에 있어서, 셋톱박스와 방송 서버의 연동 구조를 설명하기 위한 블록도이다.
도 6은 일실시예에 있어서, 스마트폰 단말과 방송 서버의 연동 구조를 설명하기 위한 블록도이다.
도 7은 일실시예에 있어서, 콘텐츠 추천을 위한 스마트폰 단말의 동작 방법을 설명하기 위한 도면이다.
1 is a diagram for explaining an operation method of a terminal for recommending content in an embodiment.
2 is a diagram for explaining a method of operating a broadcast server for content recommendation in one embodiment.
3 is a diagram for explaining a scenario for providing a content recommendation service in one embodiment.
4 is a diagram for explaining an example in which the recommendation database is managed in one embodiment.
5 is a block diagram illustrating an interworking structure of a set-top box and a broadcast server in one embodiment.
6 is a block diagram illustrating an interworking structure of a smartphone terminal and a broadcast server in one embodiment.
7 is a diagram for explaining a method of operating a smartphone terminal for recommending content in one embodiment.

이하, 본 발명의 실시예에 대해서 첨부된 도면을 참조하여 자세히 설명하도록 한다.Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings.

아래 설명하는 실시예들에는 다양한 변경이 가해질 수 있다. 아래 설명하는 실시예들은 실시 형태에 대해 한정하려는 것이 아니며, 이들에 대한 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.Various modifications may be made to the embodiments described below. The examples described below are not intended to be limiting with respect to the embodiments, and should be understood to include all modifications, equivalents, or substitutes thereof.

실시예에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 실시예를 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 명세서에서, "포함하다" 또는 "가지다" 등의 용어는 명세서 상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.The terms used in the examples are only used to describe specific examples, and are not intended to limit the examples. Singular expressions include plural expressions unless the context clearly indicates otherwise. In this specification, the terms "include" or "have" are intended to indicate the presence of features, numbers, steps, actions, components, parts or combinations thereof described in the specification, one or more other features. It should be understood that the existence or addition possibilities of fields or numbers, steps, operations, components, parts or combinations thereof are not excluded in advance.

다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 실시예가 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥 상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.Unless otherwise defined, all terms used herein, including technical or scientific terms, have the same meaning as commonly understood by a person skilled in the art to which the embodiment belongs. Terms, such as those defined in a commonly used dictionary, should be interpreted as having meanings consistent with meanings in the context of related technologies, and should not be interpreted as ideal or excessively formal meanings unless explicitly defined in the present application. Does not.

또한, 첨부 도면을 참조하여 설명함에 있어, 도면 부호에 관계없이 동일한 구성 요소는 동일한 참조부호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다. 실시예를 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 실시예의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다.In addition, in the description with reference to the accompanying drawings, the same reference numerals are assigned to the same components regardless of reference numerals, and redundant descriptions thereof will be omitted. In describing the embodiments, when it is determined that detailed descriptions of related known technologies may unnecessarily obscure the subject matter of the embodiments, the detailed descriptions will be omitted.

도 1은 일실시예에 있어서, 콘텐츠 추천을 위한 단말의 동작 방법을 설명하기 위한 도면이다. 실시예에 따른 단말은 IPTV 서비스를 제공하는 셋톱박스 단말에 해당할 수 있다.1 is a diagram for explaining an operation method of a terminal for recommending content in an embodiment. The terminal according to the embodiment may correspond to a set-top box terminal providing an IPTV service.

단계(110)에서 단말은, 카메라를 통해 촬영된 영상에서 적어도 한 명의 사용자를 인식한다.In step 110, the terminal recognizes at least one user from the image captured through the camera.

실시예에서, 단말은 연동되는 카메라를 구비할 수 있다. 카메라는 TV 주변 일측에 TV의 전면부를 촬영하도록 설치될 수 있다. 카메라를 통해 촬영되는 영상은 TV의 일측에 출력될 수 있다. 카메라는 단말과 USB, HDMI 등의 연결 방식을 통해 연결될 수 있다.In an embodiment, the terminal may have an interlocked camera. The camera may be installed on one side of the TV to photograph the front portion of the TV. Images captured through the camera may be output on one side of the TV. The camera can be connected to the terminal through a connection method such as USB or HDMI.

단계(120)에서 단말은, 미리 등록된 사용자 그룹에서 인식된 적어도 한 명의 사용자에 대응하는 사용자 조합을 결정한다.In step 120, the terminal determines a user combination corresponding to at least one user recognized in the pre-registered user group.

실시예에서, 단말은 카메라를 통해 인식되는 적어도 한 명의 사용자에 대해서 프로파일 정보를 저장할 수 있다. 해당 카메라를 통해 인식 가능한 사용자들의 집단을 사용자 그룹으로 정의하고, 사용자 그룹 내에 포함되는 사용자들 각각에 대한 프로파일, 예를 들어 사용자들 각각의 얼굴에 대응하는 성별 및 연령에 대한 정보를 획득하여 저장할 수 있다. 사용자 그룹 및 사용자 조합은 셋톱박스의 고유 정보 또는 ID 등에 대응시켜 등록될 수 있다.In an embodiment, the terminal may store profile information for at least one user recognized through the camera. A group of users recognizable through the camera is defined as a user group, and a profile for each user included in the user group, for example, information about gender and age corresponding to each user's face can be obtained and stored. have. The user group and the user combination may be registered in correspondence with the unique information or ID of the set top box.

실시예에서, 단말은 카메라를 통해 촬영된 영상에서 한 명 이상의 사용자를 인식하고, 사용자에 대한 프로파일 정보를 매칭시킬 수 있다. 단말은 촬영된 영상을 통해 TV를 시청 중인 사용자들의 수 및 사용자들 각각에 대한 정보를 획득하여 실제 시청 중인 사용자 조합을 결정할 수 있다.In an embodiment, the terminal may recognize one or more users from the image captured through the camera, and match profile information for the user. The terminal may determine the combination of users actually watching by acquiring information on the number of users watching the TV and each of the users through the captured image.

단계(130)에서 단말은 촬영된 영상, 결정된 사용자 조합 및 시청 환경 정보 중 적어도 하나에 기초하여 시청 상황 정보를 생성한다.In step 130, the terminal generates viewing situation information based on at least one of the captured image, the determined user combination, and viewing environment information.

실시예에서, 시청 환경 정보는 실제 시청 중인 채널, 프로그램 정보, 요일이나 시간 정보, 재핑 빈도 등의 정보를 포함할 수 있다. 단말은 사용자 조합에 시청 환경 정보를 대응시켜 시청 상황 정보를 생성할 수 있으며, 시청 상황 정보는 카메라를 통해 촬영된 영상이 포함될 수 있다.In an embodiment, the viewing environment information may include information such as a channel currently being viewed, program information, day or time information, and zapping frequency. The terminal may generate viewing situation information by mapping viewing environment information to a user combination, and the viewing situation information may include an image captured through a camera.

단계(140)에서 단말은 시청 상황 정보를 방송 서버로 전송한다.In step 140, the terminal transmits viewing situation information to the broadcast server.

실시예에서, 단말은 시청 상황 정보를 유무선 통신을 통해 방송 서버로 전송할 수 있다. 방송 서버는 채널 정보 서버, 콘텐츠 편성 서버 및 추천 데이터베이스를 포함할 수 있다.In an embodiment, the terminal may transmit viewing situation information to the broadcast server through wired or wireless communication. The broadcast server may include a channel information server, a content organization server, and a recommendation database.

단계(150)에서 단말은, 시청 상황 정보에 대응하여 방송 서버로부터 콘텐츠 추천 정보를 제공 받는다.In step 150, the terminal receives content recommendation information from the broadcast server in response to viewing situation information.

실시예에서, 단말은 방송 서버의 추천 데이터베이스에 저장되어 있는 콘텐츠 추천 정보를 수신할 수 있다. 실시예에 따른 추천 데이터베이스는 사용자 조합에 대응하여 관리되고, 단말로부터 전달된 시청 상황 정보를 업데이트하여 콘텐츠 추천 정보의 강화 학습을 진행할 수 있다.In an embodiment, the terminal may receive content recommendation information stored in the recommendation database of the broadcast server. The recommendation database according to the embodiment may be managed in response to a user combination, and the viewing situation information transmitted from the terminal may be updated to reinforce learning of the content recommendation information.

단말은 방송 서버의 추천 데이터베이스로부터 제공되는 콘텐츠 추천 정보를 TV의 일측에 출력할 수 있는데 예를 들어, 추천 콘텐츠에 대한 정보와 해당 콘텐츠에 대한 재생 여부를 질의하는 메시지를 함께 출력할 수 있다.The terminal may output the content recommendation information provided from the recommendation database of the broadcast server to one side of the TV. For example, the terminal may output information about the recommended content and a message querying whether to play the content.

실시예에서, 사용자 조합에 대응하여 추천 데이터베이스가 달리 관리되므로, 사용자 조합에 따라 제공되는 콘텐츠 추천 정보가 상이할 수 있고, 요일이나 시간 정보에 따라 제공되는 콘텐츠 추천 정보 또한 상이할 수 있다.In an embodiment, since the recommendation database is managed differently according to the user combination, the content recommendation information provided according to the user combination may be different, and the content recommendation information provided according to the day or time information may also be different.

도 2는 일실시예에 있어서, 콘텐츠 추천을 위한 방송 서버의 동작 방법을 설명하기 위한 도면이다.2 is a diagram for explaining a method of operating a broadcast server for content recommendation in one embodiment.

단계(210)에서 방송 서버는, 카메라를 통해 촬영된 영상에 대응하는 시청 상황 정보를 단말로부터 수신한다.In step 210, the broadcast server receives viewing situation information corresponding to the image captured through the camera from the terminal.

실시예에 따른 시청 상황 정보는 단말에서 카메라를 통해 촬영된 영상, 미리 등록된 사용자 그룹에서 촬영된 영상에서 인식되는 적어도 한 명의 사용자에 대응하는 사용자 조합 및 시청 환경 정보 중 적어도 하나에 기초하여 생성될 수 있고, 단말에서 실제 시청 중인 채널, 프로그램 정보, 요일이나 시간 정보, 재핑 빈도 등의 정보를 포함할 수 있다.The viewing situation information according to the embodiment may be generated based on at least one of a user combination and viewing environment information corresponding to at least one user recognized from an image captured through a camera in a terminal, an image captured in a pre-registered user group, and the like. It may include information such as channel, program information, day or time information, zapping frequency, etc. actually being viewed by the terminal.

방송 서버는 추천 데이터베이스에 시청 상황 정보를 저장하여 추천 데이터베이스를 업데이트할 수 있다. 예를 들어, 시청 상황 정보에 대응하는 관련 채널 정보 및 관련 콘텐츠를 수집하고, 관련 채널 정보 및 관련 콘텐츠의 매칭을 통해 콘텐츠 추천 정보를 저장함으로써 추천 데이터베이스에서 추출 가능한 데이터를 강화할 수 있다.The broadcast server may update the recommendation database by storing viewing situation information in the recommendation database. For example, data that can be extracted from the recommendation database may be enhanced by collecting related channel information and related content corresponding to viewing situation information, and storing content recommendation information through matching of the related channel information and related content.

실시예에서, 단말은 카메라를 통해 촬영된 영상에서 한 명 이상의 사용자를 인식하고, 사용자에 대한 프로파일 정보를 매칭시킬 수 있다. 단말은 촬영된 영상을 통해 TV를 시청 중인 사용자들의 수 및 사용자들 각각에 대한 정보를 획득하여 실제 시청 중인 사용자 조합을 결정할 수 있다. 단말은 사용자 조합에 시청 환경 정보를 대응시켜 시청 상황 정보를 생성할 수 있으며, 시청 상황 정보는 카메라를 통해 촬영된 영상이 포함될 수 있다.In an embodiment, the terminal may recognize one or more users from the image captured through the camera, and match profile information for the user. The terminal may determine the combination of users actually watching by acquiring information on the number of users watching the TV and each of the users through the captured image. The terminal may generate viewing situation information by mapping viewing environment information to a user combination, and the viewing situation information may include an image captured through a camera.

실시예에서, 사용자 그룹이 미리 등록되어있지 않은 경우, 단말의 카메라를 통해 촬영된 영상 내의 사용자에 대해서 프로파일 정보 및 단말에서 획득할 수 있는 정보들을 새로이 획득할 수 있고, 새로운 사용자 조합을 결정할 수 있다.In an embodiment, if the user group is not registered in advance, profile information and information obtainable from the terminal may be newly acquired for a user in the image captured through the camera of the terminal, and a new user combination may be determined. .

방송 서버는 사용자 그룹에 속한 사용자들 각각에 대응하여 프로파일을 획득하여 저장할 수 있다. 예를 들어, 셋톱박스의 ID에 대응하여 사용자들의 프로파일을 저장할 수 있고, 촬영된 영상을 통해 출력된 사용자들 각각의 얼굴에 대응하는 성별 및 연령에 대한 정보를 포함하도록 저장할 수 있다.The broadcast server may acquire and store a profile corresponding to each user belonging to a user group. For example, a user's profile may be stored corresponding to the ID of the set-top box, and may be stored to include information on gender and age corresponding to each face of the users output through the captured image.

단계(220)에서 방송 서버는, 시청 상황 정보에 기초하여 추천 데이터베이스에서 콘텐츠 추천 정보를 생성한다.In step 220, the broadcast server generates content recommendation information in the recommendation database based on the viewing situation information.

실시예에서, 추천 데이터베이스는 사용자 조합에 대응하여 달리 관리될 수 있다. 방송 서버는 시청 상황 정보에 포함되는 사용자 조합에 대응하는 추천 데이터베이스에 기초하여 콘텐츠 추천 정보를 획득할 수 있다. 예를 들어, 방송 서버는 시청 상황 정보의 요일, 시간 정보에 대응하는 콘텐츠 관련 데이터를 추천 데이터베이스에서 검색할 수 있다. 추천되는 콘텐츠의 형태는 실시간 채널 정보 또는 VOD 정보 등을 포함할 수 있다.In an embodiment, the recommendation database may be managed differently in response to a user combination. The broadcast server may obtain content recommendation information based on the recommendation database corresponding to the user combination included in the viewing situation information. For example, the broadcast server may search for content related data corresponding to day and time information of viewing situation information in the recommendation database. The recommended form of content may include real-time channel information or VOD information.

단계(230)에서 방송 서버는, 단말로 콘텐츠 추천 정보를 전송한다.In step 230, the broadcast server transmits content recommendation information to the terminal.

실시예에서, 추천 데이터베이스로부터 획득한 콘텐츠에 대한 정보를 포함하여 콘텐츠의 출력을 질의하는 메시지의 형태로 콘텐츠 추천 정보를 생성할 수 있다.In an embodiment, content recommendation information may be generated in the form of a message querying the output of the content, including information on the content obtained from the recommendation database.

일 실시예에 따른 방송 서버는, 셋톱박스 단말 이외에 스마트폰 단말로 콘텐츠 추천 서비스를 제공할 수 있다. 스마트폰 단말로 서비스를 제공하기 위한 스마트폰 단말의 사용자에 대한 인증을 수행할 수 있다.The broadcast server according to an embodiment may provide a content recommendation service to a smartphone terminal in addition to the set-top box terminal. Authentication of a user of the smartphone terminal to provide a service to the smartphone terminal may be performed.

실시예에서, 스마트폰 단말에서 적어도 한 명의 사용자에 대해 촬영된 영상을 수신하고, 스마트폰 단말에서 촬영된 사용자들에 대한 인증을 수행할 수 있다. 스마트폰 단말에서 촬영된 영상과 함께 인증을 위해 미리 등록된 정보를 획득하여 인증을 수행하는데, 예를 들어 셋톱박스 단말의 ID나 등록 번호 등의 정보가 이용될 수 있다.In an embodiment, an image photographed for at least one user may be received at a smartphone terminal, and authentication for users photographed at the smartphone terminal may be performed. Authentication is performed by acquiring pre-registered information for authentication together with the image captured by the smartphone terminal, for example, information such as an ID or registration number of a set-top box terminal may be used.

스마트폰 단말의 적어도 한 명의 사용자에 대한 인증이 성공한 경우, 방송 서버는 인증 결과에 기초하여 사용자 그룹 내 인증된 사용자들에 대한 사용자 조합을 결정하고, 해당 사용자 조합에 대응하는 추천 데이터베이스에서 콘텐츠 추천 정보를 추출하여 스마트폰 단말로 제공할 수 있다.When authentication for at least one user of the smartphone terminal is successful, the broadcast server determines a user combination for the authenticated users in the user group based on the authentication result, and recommends content in the recommendation database corresponding to the user combination It can be extracted and provided to the smartphone terminal.

일실시예에 있어서, 방송 서버는 단말로부터 수신된 시청 상황 정보에 대응하여 추천 데이터베이스를 관리할 수 있다.In one embodiment, the broadcast server may manage the recommendation database in response to viewing situation information received from the terminal.

예를 들어, 방송 서버는 시청 상황 정보에 대응하여 관련 채널 정보 및 관련 콘텐츠를 타 서버들로부터 수집하여, 시청 상황 정보, 관련 채널 정보 및 관련 콘텐츠를 매칭하여 콘텐츠 추천 정보를 생성하고, 추천 데이터베이스에 저장할 수 있다.For example, the broadcast server collects relevant channel information and related content from other servers in response to the viewing situation information, generates content recommendation information by matching the viewing situation information, the relevant channel information, and the related content, and generates the content recommendation information in the recommendation database. Can be saved.

실시예에서, 방송 서버는 시청 상황 정보에 대응하여 수집된 데이터를 참조하여 IMCS(INTEGRATED MEDIA CONTROL SYSTEM) 데이터에 시청 상황 정보에 대응하는 콘텐츠에 대한 정보를 획득할 수 있다. 예를 들어, 콘텐츠의 장르나, 콘텐츠의 형태(VOD or 실시간) 등을 획득할 수 있다.In an embodiment, the broadcast server may acquire information on content corresponding to viewing situation information in IMEG (INTEGRATED MEDIA CONTROL SYSTEM) data with reference to data collected corresponding to viewing situation information. For example, a genre of content, a form of content (VOD or real time), and the like can be obtained.

실시예에서, 콘텐츠 추천 정보를 생성하는 데에, IMCS 데이터 및 EPG 데이터를 참조하여 실시간 채널 또는 추천 VOD 등의 추천 콘텐츠를 결정하고, 셋톱박스 또는 스마트폰 단말로 추천 콘텐츠의 출력을 위한 콘텐츠 추천 정보를 생성하고, 시청 상황 정보에 콘텐츠 추천 정보를 매칭하여 추천 데이터베이스에 저장할 수 있다.In an embodiment, in generating content recommendation information, recommendation content such as a real-time channel or a recommended VOD is determined by referring to IMCS data and EPG data, and content recommendation information for output of recommended content to a set-top box or a smartphone terminal Create and match the content recommendation information with the viewing situation information and store it in the recommendation database.

도 3은 일실시예에 있어서, 콘텐츠 추천 서비스를 제공하는 시나리오를 설명하기 위한 도면이다.3 is a diagram for explaining a scenario for providing a content recommendation service in one embodiment.

도 3(a)는 A 내지 D의 사용자들이 TV(310)를 시청하는 시나리오에 관한 것이고, 도 3(b)는 A 및 B의 사용자들이 스마트폰 단말(320)을 통해 콘텐츠를 시청하는 시나리오에 관한 것이다.FIG. 3(a) relates to a scenario in which users of A to D watch TV 310, and FIG. 3(b) illustrates a scenario in which users of A and B watch content through a smartphone terminal 320. It is about.

도 3(a)에서 TV(310)는 카메라(311)를 일측에 구비할 수 있고, TV(310), 카메라(311) 및 셋톱박스(312)는 서로 유무선으로 연결되어 있는 상태이다.In FIG. 3(a), the TV 310 may include a camera 311 on one side, and the TV 310, the camera 311, and the set-top box 312 are connected to each other by wire or wireless.

실시예에서, 카메라(311)는 TV(310)의 전면부를 촬영하여 A 내지 D의 사용자들을 촬영한 영상을 획득하고, 여기서, A 내지 D의 사용자들은 셋톱박스(312)에 프로파일이 모두 등록된 사용자로 가정한다.In an embodiment, the camera 311 photographs the front side of the TV 310 to obtain images of users A to D, where the users A to D have all profiles registered in the set-top box 312. Assume user.

셋톱박스(312)는 카메라(311)에서 촬영된 영상을 획득하여, A 내지 D의 사용자들을 인식하여 A 내지 D의 사용자들의 사용자 조합에 대응하도록 시청 상황 정보를 생성하여 방송 서버로 전송할 수 있다.The set-top box 312 may acquire an image captured by the camera 311, recognize users from A to D, and generate viewing situation information to correspond to a user combination of users from A to D, and transmit it to a broadcast server.

셋톱박스(312)는 방송 서버로부터 해당 사용자 조합 및 시청 상황 정보에 기초하여 콘텐츠 추천 정보를 수신하고, TV(310)의 디스플레이로 출력할 수 있다. 예를 들어, 추천되는 콘텐츠의 이름, 형태에 대한 알림과 콘텐츠의 출력을 문의하는 메시지를 출력할 수 있다.The set-top box 312 may receive content recommendation information from the broadcast server based on the user combination and viewing situation information, and output the content recommendation information to the display of the TV 310. For example, a notification about the name and type of the recommended content and a message inquiring about the output of the content may be output.

도 3(b)의 스마트폰 단말(320)은 서비스의 사용 시, 또는 최초 사용 시에 단말의 카메라(321)를 통해 촬영된 영상 내 감지되는 사용자 A, B에 대해서 인증을 수행할 수 있다. 인증은 방송 서버에서 진행될 수 있고, 사용자 A, B가 셋톱박스(312) 및 방송 서버에 미리 등록되어 있는 경우에 인증이 정상적으로 이루어질 수 있다. 인증을 위해 스마트폰 단말은 촬영된 영상을 포함하여 인증을 수행하기 위한 정보를 입력 받을 수 있다. 예를 들어, 셋톱박스(312)에 대한 정보를 확인하기 위한 정보에 해당할 수 있다. 셋톱박스(312)에 대한 정보가 이용되는 경우, 셋톱박스(312)에 등록된 사용자들에 대한 목록 정보를 제공 받아 사용자 A, B를 선택하도록 할 수도 있다.The smartphone terminal 320 of FIG. 3(b) may perform authentication for users A and B detected in an image photographed through the camera 321 of the terminal when using the service or when using the service for the first time. Authentication may be performed in the broadcast server, and authentication may be normally performed when users A and B are previously registered in the set-top box 312 and the broadcast server. For authentication, the smart phone terminal may receive information for performing authentication, including the captured image. For example, it may correspond to information for confirming information about the set-top box 312. When information on the set-top box 312 is used, it is also possible to select users A and B by receiving list information for users registered in the set-top box 312.

실시예에서, 스마트폰 단말(320)은 카메라(321)에서 사용자 A, B에 대해 촬영된 영상을 획득하여 방송 서버로 전송하고, 스마트폰 단말(320)은 방송 서버로부터 사용자 A, B에 해당하는 사용자 조합에 기초하여 콘텐츠 추천 정보를 수신하고, 스마트폰 단말(320)의 디스플레이로 출력할 수 있다. 예를 들어, 추천되는 콘텐츠의 이름, 형태에 대한 알림과 콘텐츠의 출력을 문의하는 메시지를 출력할 수 있다.In an embodiment, the smartphone terminal 320 acquires the images captured for the users A and B from the camera 321 and transmits them to the broadcast server, and the smartphone terminal 320 corresponds to the users A and B from the broadcast server Content recommendation information may be received based on a user combination and output to the display of the smartphone terminal 320. For example, a notification about the name and type of the recommended content and a message inquiring about the output of the content may be output.

도 4는 일실시예에 있어서, 추천 데이터베이스가 관리되는 예시를 설명하기 위한 도면이다.4 is a diagram for explaining an example in which the recommendation database is managed in one embodiment.

실시예에 도시된 바와 같이, 인식되는 사용자 조합에 대응하여 추천 데이터베이스가 달리 관리될 수 있다.As shown in the embodiment, the recommendation database may be managed differently according to the recognized user combination.

도 4(a)는 도 3(a)와 같이 사용자 A, B, C, D가 모두 인식되는 경우에 이용될 수 있는 추천 데이터베이스의 일례이며, 도 4(b)는 도 3(b)와 같이 사용자 A, B가 인식되는 경우에 이용 가능한 추천 데이터베이스의 일례이다.FIG. 4(a) is an example of a recommendation database that can be used when all of users A, B, C, and D are recognized as shown in FIG. 3(a), and FIG. 4(b) is shown in FIG. 3(b). This is an example of a recommendation database available when users A and B are recognized.

실시예에서, 수집되는 데이터는 시청 상황 정보에 대응하여 저장될 수 있으며, 채널, 요일, 시간, 시청 시간, 재핑 빈도 등의 정보를 포함하여 저장할 수 있다. In an embodiment, the collected data may be stored in response to viewing situation information, and may include information such as a channel, day of the week, time, viewing time, zapping frequency, and the like.

시청 상황 정보에 대응하여 채널에 대한 카테고리, 출연자 등에 대한 정보 EPG(Electronic Program Guide) 데이터로 저장할 수 있고, 시청 상황 정보에 대응하여 수집된 데이터를 참조하여 IMCS(INTEGRATED MEDIA CONTROL SYSTEM) 데이터에 시청 상황 정보에 대응하는 콘텐츠에 대한 정보를 저장할 수 있다. 예를 들어, 콘텐츠의 장르나, 콘텐츠의 형태(VOD or 실시간) 등을 저장할 수 있다.In response to viewing situation information, information about a channel category, actors, etc. can be stored as EPG (Electronic Program Guide) data, and viewing conditions in IMCS (INTEGRATED MEDIA CONTROL SYSTEM) data by referring to the collected data corresponding to viewing situation information. Information about content corresponding to the information may be stored. For example, a genre of content, a form of content (VOD or real time), and the like may be stored.

실시예에서, 콘텐츠 추천 정보를 생성하는 데에, IMCS 데이터 및 EPG 데이터를 참조하여 실시간 채널 또는 추천 VOD 등의 추천 콘텐츠를 결정하고, 셋톱박스 또는 스마트폰 단말로 추천 콘텐츠의 출력을 위한 콘텐츠 추천 정보를 생성하여 전송할 수 있다.In an embodiment, in generating content recommendation information, recommendation content such as a real-time channel or a recommended VOD is determined by referring to IMCS data and EPG data, and content recommendation information for output of recommended content to a set-top box or a smartphone terminal Can be generated and transmitted.

도 5는 일실시예에 있어서, 셋톱박스와 방송 서버의 연동 구조를 설명하기 위한 블록도이다.5 is a block diagram illustrating an interworking structure of a set-top box and a broadcast server in one embodiment.

셋톱박스(510)는 USB 또는 HDMI 등을 통해 카메라(520)와 연결될 수 있고, 셋톱박스(510)와 방송 서버(530)는 유무선 통신 수단을 통해 통신할 수 있다.The set-top box 510 may be connected to the camera 520 through USB or HDMI, and the set-top box 510 and the broadcast server 530 may communicate through wired/wireless communication means.

실시예에서, 수집부(413)는 카메라(520)를 통해 촬영된 영상에서 한 명 이상의 사용자를 인식하고, 사용자에 대해 미리 저장되어 있는 프로파일 정보를 매칭시킬 수 있다. 촬영된 영상을 통해 TV를 시청 중인 사용자들의 수 및 사용자들 각각에 대한 정보를 획득하여 실제 시청 중인 사용자 조합을 결정할 수 있다.In an embodiment, the collection unit 413 may recognize one or more users from an image captured through the camera 520 and match profile information stored in advance for the user. The number of users watching TV and information on each of the users may be acquired through the captured image to determine a combination of users actually watching.

실시예에서, 사용자 그룹이 미리 등록되어 있지 않은 경우, 단말의 카메라를 통해 촬영된 영상 내의 사용자에 대해서 프로파일 정보 및 단말에서 획득할 수 있는 정보들을 새로이 획득할 수 있고, 새로운 사용자 조합을 결정할 수 있다.In an embodiment, if the user group is not registered in advance, profile information and information obtainable from the terminal may be newly acquired for a user in the image captured through the camera of the terminal, and a new user combination may be determined. .

전송부(512)는 사용자 조합을 포함하여 셋톱박스(510)에서 수집되는 시청 환경 정보를 종합한 시청 상황 정보를 생성하여 방송 서버(530)로 전송할 수 있다.The transmission unit 512 may generate and transmit viewing situation information, which is a synthesis of viewing environment information collected by the set-top box 510, including a user combination, and transmit it to the broadcasting server 530.

방송 서버(530)는 EPG(531) 및 IMCS (532)에 전송된 시청 상황 정보에 기초하여 채널과 관련된 정보 및 콘텐츠와 관련된 정보를 각각 추출하여 추천 데이터베이스(533)로 시청 상황 정보에 대응하는 추천 콘텐츠를 제공할 수 있다. 추천 데이터베이스(533)는 추천 콘텐츠에 대한 콘텐츠 추천 정보를 생성하여 셋톱박스(510)로 전송할 수 있다.The broadcast server 530 extracts information related to channels and information related to content based on the viewing situation information transmitted to the EPG 531 and the IMCS 532, respectively, and recommends the recommendation database 533 to correspond to the viewing situation information. Content can be provided. The recommendation database 533 may generate content recommendation information for recommended content and transmit it to the set-top box 510.

콘텐츠 추천 정보는 추천부(511)에서 수신하고, 추천부(511)는 수신한 최적의 추천 콘텐츠에 대한 콘텐츠 추천 정보를 TV의 홈 화면에 출력할 수 있다.The content recommendation information is received by the recommendation unit 511, and the recommendation unit 511 can output content recommendation information on the received optimal recommendation content to the home screen of the TV.

실시예에 따른 셋톱박스와 방송 서버의 동작은 도 1 및 도 2를 통해 설명한 동작 방법에 대응할 수 있다.The operation of the set-top box and the broadcast server according to the embodiment may correspond to the operation method described with reference to FIGS. 1 and 2.

도 6은 일실시예에 있어서, 스마트폰 단말과 방송 서버의 연동 구조를 설명하기 위한 블록도이다.6 is a block diagram illustrating an interworking structure of a smartphone terminal and a broadcast server in one embodiment.

도 6의 실시예에 따르면, 셋톱박스가 아닌 스마트폰 단말(610)에서 OTT(Over The Top) 스트리밍 서비스가 제공되는 실시예에 관한 것이다.According to the embodiment of FIG. 6, it relates to an embodiment in which an over the top (OTT) streaming service is provided in a smartphone terminal 610 other than a set-top box.

실시예에서, 사용자들의 시청 상황 정보가 방송 서버(620)에 저장될 시, 해당 정보는 외부 OTT 스트리밍에 API 형태로 제공 가능하도록 가공될 수 있다.In an embodiment, when the viewing situation information of users is stored in the broadcast server 620, the corresponding information may be processed to be provided in an API form to external OTT streaming.

스마트폰 단말(610)은 구비된 카메라(611)를 이용하여 한 명 이상의 사용자에 대해 촬영된 영상을 획득하여 인증부(612)에서 촬영된 영상을 방송 서버(620)로 전송하여 스마트폰 단말(610)에 대한 사용자들을 인증하도록 할 수 있다.The smartphone terminal 610 acquires an image captured for one or more users by using the provided camera 611 and transmits the image captured by the authentication unit 612 to the broadcast server 620, which is a smartphone terminal ( 610).

방송 서버(620)는 도 5에 설명된 실시예와 같이, EPG(621) 및 IMCS(622)에 기초하여 채널과 관련된 정보 및 콘텐츠와 관련된 정보를 각각 추출하여 추천 데이터베이스(623)로 시청 상황 정보에 대응하는 추천 콘텐츠를 제공할 수 있다.The broadcast server 620 extracts information related to a channel and information related to content based on the EPG 621 and the IMCS 622, respectively, as shown in the embodiment illustrated in FIG. 5, and views information on the recommendation database 623 It is possible to provide recommended content corresponding to.

실시예에 의하면, 스마트폰 단말(610)에 대한 인증이 완료된 후에 상기의 서비스가 제공될 수 있는데, 인증부(624)는 스마트폰 단말(610)로부터 전송된 영상 또는 정보를 수신하여 미리 등록되어 있는 정보와 매칭을 진행함으로써 스마트폰 단말(610)의 한 명 이상의 사용자에 대해 인증을 처리할 수 있다.According to an embodiment, the above service may be provided after authentication for the smartphone terminal 610 is completed. The authentication unit 624 is registered in advance by receiving the image or information transmitted from the smartphone terminal 610. By performing matching with the existing information, authentication may be processed for one or more users of the smartphone terminal 610.

다른 실시예에 있어서, 방송 서버(620)는 스마트폰 단말(610)로부터 입력된 셋톱박스의 단말 정보를 인증하여 추천 콘텐츠를 제공할 수 있다.In another embodiment, the broadcast server 620 may provide the recommended content by authenticating the terminal information of the set-top box input from the smartphone terminal 610.

예를 들어, 스마트폰 단말(610)은 입력된 셋톱박스에 대해 인증이 가능한 단말 정보, 예컨대 VN 정보 등을 인증부(612)를 통해 방송 서버(620)로 전송하여 단말 정보에 대응하는 사용자들을 인증하도록 할 수 있다.For example, the smartphone terminal 610 transmits terminal information that can be authenticated to the input set-top box, such as VN information, to the broadcast server 620 through the authentication unit 612, thereby allowing users corresponding to the terminal information. Can be authenticated.

방송 서버(620)의 인증부(624)는 수신된 단말 정보를 미리 등록되어 있는 단말 정보와 매칭함으로써 스마트폰 단말(610)의 사용을 인증하고, 단말 정보에 대응하는 셋톱박스의 사용자 그룹의 사용자 목록을 스마트폰 단말(610)로 제공하여 사용자 목록 중 적어도 한 명을 포함하는 사용자 조합의 선택을 입력 받을 수 있다. 방송 서버(620)는 스마트폰 단말(610)에서 선택되는 적어도 한 명의 사용자 조합에 대응하여 해당 사용자 조합에 기초하여 추천 콘텐츠를 제공할 수 있다.The authentication unit 624 of the broadcast server 620 authenticates the use of the smartphone terminal 610 by matching the received terminal information with previously registered terminal information, and a user of a user group of a set-top box corresponding to the terminal information The list may be provided to the smartphone terminal 610 to receive a selection of a user combination including at least one of the user lists. The broadcast server 620 may provide recommended content based on the user combination corresponding to at least one user combination selected by the smartphone terminal 610.

도 7은 일실시예에 있어서, 콘텐츠 추천을 위한 단말의 동작 방법을 설명하기 위한 도면이다. 실시예에서, 셋톱박스나 스마트폰 단말에서 추천 콘텐츠를 제공 받기 위해 방송 서버로 정보들을 제공하는 방법에 대해서 설명한다.7 is a diagram for explaining a method of operating a terminal for recommending content in an embodiment. In an embodiment, a method of providing information to a broadcast server to receive recommended content from a set-top box or a smartphone terminal will be described.

단계(710)에서 단말은, 카메라를 통해 촬영된 영상에서 적어도 한 명의 사용자를 인식한다.In step 710, the terminal recognizes at least one user from the image captured through the camera.

실시예에서, 단말은 스마트폰 단말이거나 IP TV 서비스를 제공하는 셋톱박스 단말에 해당할 수 있다.In an embodiment, the terminal may be a smartphone terminal or a set-top box terminal providing IP TV service.

예를 들어, 스마트폰 단말은 전면 또는 후면에 구비된 카메라를 통해 촬영하고, 카메라를 통해 촬영되는 영상은 스마트폰 단말의 디스플레이의 일측에 출력될 수 있다.For example, the smartphone terminal may be photographed through a camera provided on the front or rear side, and an image photographed through the camera may be output on one side of the display of the smartphone terminal.

셋톱박스 단말은 카메라를 구비할 수 있다. 카메라는 TV 주변 일측에 TV의 전면부를 촬영하도록 설치될 수 있다. 카메라를 통해 촬영되는 영상은 TV의 일측에 출력될 수 있다. 카메라는 단말과 USB, HDMI 등의 연결 방식을 통해 연결될 수 있다.The set-top box terminal may include a camera. The camera may be installed on one side of the TV to photograph the front part of the TV. Images captured through the camera may be output on one side of the TV. The camera can be connected to the terminal through a connection method such as USB or HDMI.

단계(720)에서 단말은, 인식된 적어도 한 명의 사용자에 대응하는 사용자 조합을 생성한다.In step 720, the terminal generates a user combination corresponding to the recognized at least one user.

실시예에서, 단말은 카메라를 통해 인식되는 적어도 한 명의 사용자에 대해서 프로파일 정보를 저장할 수 있다. 해당 카메라를 통해 인식 가능한 사용자들의 집단을 사용자 그룹으로 정의하고, 사용자 그룹 내에 포함되는 사용자들 각각에 대한 프로파일, 예를 들어 사용자들 각각의 얼굴에 대응하는 성별 및 연령에 대한 정보를 획득하여 저장할 수 있다. 사용자 그룹 및 사용자 조합은 스마트폰 단말과 연동된 셋톱박스의 고유 정보 또는 ID 등에 대응시켜 등록될 수 있다.In an embodiment, the terminal may store profile information for at least one user recognized through the camera. A group of users recognizable through the camera is defined as a user group, and a profile for each user included in the user group, for example, information about gender and age corresponding to each user's face can be obtained and stored. have. The user group and the user combination may be registered in correspondence with the unique information or ID of the set top box linked with the smartphone terminal.

실시예에서, 단말은 카메라를 통해 촬영된 영상에서 한 명 이상의 사용자를 인식하고, 사용자에 대한 프로파일 정보를 매칭시킬 수 있다. 단말은 촬영된 영상을 통해 현재 TV 또는 스마트폰을 시청 중인 사용자들의 수 및 사용자들 각각에 대한 정보를 획득하여 실제 시청 중인 사용자 조합을 결정할 수 있다.In an embodiment, the terminal may recognize one or more users from the image captured through the camera, and match profile information for the user. The terminal may determine the user combination currently being viewed by acquiring information about each of the users and users currently watching the TV or smartphone through the captured image.

예를 들어, 사용자 그룹이 미리 등록되어있지 않은 경우, 카메라를 통해 촬영된 영상 내의 사용자에 대해서 프로파일 정보 및 획득할 수 있는 정보들을 새로이 획득할 수 있고, 새로운 사용자 조합을 결정할 수 있다.For example, if a user group is not registered in advance, profile information and information that can be obtained for a user in an image captured through the camera may be newly acquired, and a new user combination may be determined.

단계(730)에서 단말은, 출력 중인 채널 정보, 날짜 정보 및 시간 정보 중 하나 이상을 조합하여 시청 환경 정보를 생성한다.In step 730, the terminal generates viewing environment information by combining one or more of outputting channel information, date information, and time information.

실시예에서, 시청 환경 정보는 실제 시청 중인 채널, 프로그램 정보, 채널의 재생 횟수, 요일이나 시간 정보, 재핑 빈도 등의 정보를 포함할 수 있다.In an embodiment, the viewing environment information may include information such as a channel actually being viewed, program information, the number of times the channel is played, day or time information, and zapping frequency.

단계(740)에서 단말은, 촬영된 영상, 생성된 사용자 조합 및 시청 환경 정보 중 적어도 하나에 기초하여 시청 상황 정보를 생성한다.In step 740, the terminal generates viewing situation information based on at least one of the captured image, the generated user combination, and viewing environment information.

실시예에서, 사용자 조합에 시청 환경 정보를 대응시켜 시청 상황 정보가 생성될 수 있으며, 시청 상황 정보는 카메라를 통해 촬영된 영상이 포함될 수 있다.In an embodiment, viewing situation information may be generated by mapping viewing environment information to a user combination, and viewing situation information may include an image captured through a camera.

단계(750)에서 단말은, 시청 상황 정보를 방송 서버로 전송한다.In step 750, the terminal transmits the viewing situation information to the broadcast server.

실시예에서, 단말은 시청 상황 정보를 유무선 통신을 통해 방송 서버로 전송할 수 있다. 방송 서버는 채널 정보 서버, 콘텐츠 편성 서버 및 추천 데이터베이스를 포함할 수 있다.In an embodiment, the terminal may transmit viewing situation information to the broadcast server through wired or wireless communication. The broadcast server may include a channel information server, a content organization server, and a recommendation database.

이후, 단말은, 시청 상황 정보에 대응하여 방송 서버로부터 콘텐츠 추천 정보를 제공 받을 수 있다.Thereafter, the terminal may receive content recommendation information from the broadcast server in response to the viewing situation information.

실시예에서, 단말은 방송 서버의 추천 데이터베이스에 저장되어 있는 콘텐츠 추천 정보를 수신할 수 있다. 실시예에 따른 추천 데이터베이스는 사용자 조합에 대응하여 관리되고, 단말로부터 전달된 시청 상황 정보를 업데이트하여 콘텐츠 추천 정보의 강화 학습을 진행할 수 있다.In an embodiment, the terminal may receive content recommendation information stored in the recommendation database of the broadcast server. The recommendation database according to the embodiment may be managed in response to a user combination, and the viewing situation information transmitted from the terminal may be updated to reinforce learning of the content recommendation information.

단말은 방송 서버의 추천 데이터베이스로부터 제공되는 콘텐츠 추천 정보를 스마트폰의 디스플레이 또는 TV에 출력할 수 있는데 예를 들어, 추천 콘텐츠에 대한 정보와 해당 콘텐츠에 대한 재생 여부를 질의하는 메시지를 함께 출력할 수 있다.The terminal may output the content recommendation information provided from the recommendation database of the broadcasting server to the display or TV of the smartphone. For example, the terminal may output information on the recommended content and a message querying whether to play the content. have.

실시예에서, 사용자 조합에 대응하여 추천 데이터베이스가 달리 관리되므로, 사용자 조합에 따라 제공되는 콘텐츠 추천 정보가 상이할 수 있고, 요일이나 시간 정보에 따라 제공되는 콘텐츠 추천 정보 또한 상이할 수 있다.In an embodiment, since the recommendation database is managed differently according to the user combination, the content recommendation information provided according to the user combination may be different, and the content recommendation information provided according to the day or time information may also be different.

이상에서 설명된 장치는 하드웨어 구성요소, 소프트웨어 구성요소, 및/또는 하드웨어 구성요소 및 소프트웨어 구성요소의 조합으로 구현될 수 있다. 예를 들어, 실시예들에서 설명된 장치 및 구성요소는, 예를 들어, 프로세서, 콘트롤러, ALU(arithmetic logic unit), 디지털 신호 프로세서(digital signal processor), 마이크로컴퓨터, FPA(field programmable array), PLU(programmable logic unit), 마이크로프로세서, 또는 명령(instruction)을 실행하고 응답할 수 있는 다른 어떠한 장치와 같이, 하나 이상의 범용 컴퓨터 또는 특수 목적 컴퓨터를 이용하여 구현될 수 있다. 처리 장치는 운영 체제(OS) 및 상기 운영 체제 상에서 수행되는 하나 이상의 소프트웨어 애플리케이션을 수행할 수 있다. 또한, 처리 장치는 소프트웨어의 실행에 응답하여, 데이터를 접근, 저장, 조작, 처리 및 생성할 수도 있다. 이해의 편의를 위하여, 처리 장치는 하나가 사용되는 것으로 설명된 경우도 있지만, 해당 기술분야에서 통상의 지식을 가진 자는, 처리 장치가 복수 개의 처리 요소(processing element) 및/또는 복수 유형의 처리 요소를 포함할 수 있음을 알 수 있다. 예를 들어, 처리 장치는 복수 개의 프로세서 또는 하나의 프로세서 및 하나의 콘트롤러를 포함할 수 있다. 또한, 병렬 프로세서(parallel processor)와 같은, 다른 처리 구성(processing configuration)도 가능하다.The device described above may be implemented with hardware components, software components, and/or combinations of hardware components and software components. For example, the devices and components described in the embodiments include, for example, processors, controllers, arithmetic logic units (ALUs), digital signal processors (micro signal processors), microcomputers, field programmable arrays (FPAs), It may be implemented using one or more general purpose computers or special purpose computers, such as a programmable logic unit (PLU), microprocessor, or any other device capable of executing and responding to instructions. The processing device may run an operating system (OS) and one or more software applications running on the operating system. In addition, the processing device may access, store, manipulate, process, and generate data in response to the execution of the software. For convenience of understanding, a processing device may be described as one being used, but a person having ordinary skill in the art, the processing device may include a plurality of processing elements and/or a plurality of types of processing elements. It can be seen that may include. For example, the processing device may include a plurality of processors or a processor and a controller. In addition, other processing configurations, such as parallel processors, are possible.

소프트웨어는 컴퓨터 프로그램(computer program), 코드(code), 명령(instruction), 또는 이들 중 하나 이상의 조합을 포함할 수 있으며, 원하는 대로 동작하도록 처리 장치를 구성하거나 독립적으로 또는 결합적으로(collectively) 처리 장치를 명령할 수 있다. 소프트웨어 및/또는 데이터는, 처리 장치에 의하여 해석되거나 처리 장치에 명령 또는 데이터를 제공하기 위하여, 어떤 유형의 기계, 구성요소(component), 물리적 장치, 가상 장치(virtual equipment), 컴퓨터 저장 매체 또는 장치, 또는 전송되는 신호 파(signal wave)에 영구적으로, 또는 일시적으로 구체화(embody)될 수 있다. 소프트웨어는 네트워크로 연결된 컴퓨터 시스템 상에 분산되어서, 분산된 방법으로 저장되거나 실행될 수도 있다. 소프트웨어 및 데이터는 하나 이상의 컴퓨터 판독 가능 기록 매체에 저장될 수 있다.The software may include a computer program, code, instruction, or a combination of one or more of these, and configure the processing device to operate as desired, or process independently or collectively You can command the device. Software and/or data may be interpreted by a processing device or to provide instructions or data to a processing device, of any type of machine, component, physical device, virtual equipment, computer storage medium or device. , Or may be permanently or temporarily embodied in the transmitted signal wave. The software may be distributed on networked computer systems and stored or executed in a distributed manner. Software and data may be stored in one or more computer-readable recording media.

실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 실시예를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 실시예의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.The method according to the embodiment may be implemented in the form of program instructions that can be executed through various computer means and recorded on a computer-readable medium. The computer-readable medium may include program instructions, data files, data structures, or the like alone or in combination. The program instructions recorded on the medium may be specially designed and configured for the embodiment or may be known and usable by those skilled in computer software. Examples of computer-readable recording media include magnetic media such as hard disks, floppy disks, and magnetic tapes, optical media such as CD-ROMs, DVDs, and magnetic media such as floptical disks. -Hardware devices specially configured to store and execute program instructions such as magneto-optical media, and ROM, RAM, flash memory, and the like. Examples of program instructions include high-level language code that can be executed by a computer using an interpreter, etc., as well as machine language codes produced by a compiler. The hardware device described above may be configured to operate as one or more software modules to perform the operations of the embodiments, and vice versa.

이상과 같이 실시예들이 비록 한정된 실시예와 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기의 기재로부터 다양한 수정 및 변형이 가능하다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다.As described above, although the embodiments have been described by a limited embodiment and drawings, those skilled in the art can make various modifications and variations from the above description. For example, the described techniques are performed in a different order than the described method, and/or the components of the described system, structure, device, circuit, etc. are combined or combined in a different form from the described method, or other components Alternatively, even if replaced or substituted by equivalents, appropriate results can be achieved.

그러므로, 다른 구현들, 다른 실시예들 및 특허청구범위와 균등한 것들도 후술하는 특허청구범위의 범위에 속한다.Therefore, other implementations, other embodiments, and equivalents to the claims are also within the scope of the following claims.

Claims (37)

OTT 스트리밍 서비스를 제공하는 단말의 동작 방법에 있어서,
제1 모드에서,
카메라를 통해 촬영된 영상에서 사용자들을 인식하는 단계; 및
미리 등록된 사용자 그룹에서 상기 인식된 사용자들 중 상기 촬영된 영상을 기반으로 하는 인증에 성공한 적어도 하나의 사용자에 대응하는 사용자 조합을 결정하는 단계;
제2 모드에서,
상기 단말을 통하여 셋톱박스의 정보를 입력받는 단계;
상기 셋톱박스의 정보를 방송 서버로 전송하는 단계;
상기 셋톱박스의 정보에 기초하여 상기 단말의 사용이 인증됨에 반응하여, 상기 방송 서버로부터 상기 셋톱박스의 정보에 대응하는 사용자 그룹의 사용자 목록을 상기 단말을 통하여 제공하는 단계; 및
상기 단말을 통하여 상기 사용자 목록 중 적어도 하나의 사용자를 선택하는 입력에 기초하여, 상기 사용자 조합을 결정하는 단계;
상기 촬영된 영상, 상기 결정된 사용자 조합 및 시청 환경 정보 중 적어도 하나에 기초하여 시청 상황 정보를 생성하는 단계;
상기 시청 상황 정보를 상기 방송 서버로 전송하는 단계; 및
상기 방송 서버로부터 콘텐츠 추천 정보를 제공 받는 단계
를 포함하고,
상기 콘텐츠 추천 정보는,
상기 미리 등록된 사용자 그룹에 속한 사용자들의 서로 다른 조합들에 대응하여 상기 방송 서버에 의하여 서로 다르게 관리되는 복수의 추천 데이터베이스들 중 상기 결정된 사용자 조합에 대응하여 관리되는 추천 데이터베이스에서 추출 가능한 데이터들 중 상기 시청 상황 정보에 매칭되는 콘텐츠 정보 및 채널 정보 중 적어도 하나를 포함하는,
단말의 동작 방법.
In the operation method of the terminal providing the OTT streaming service,
In the first mode,
Recognizing users in the image taken through the camera; And
Determining a user combination corresponding to at least one user who has successfully authenticated based on the captured image among the recognized users from a group of pre-registered users;
In the second mode,
Receiving information of a set-top box through the terminal;
Transmitting information of the set-top box to a broadcast server;
In response to the use of the terminal being authenticated based on the information of the set top box, providing a user list of a user group corresponding to the set top box information from the broadcast server through the terminal; And
Determining the user combination based on an input for selecting at least one user in the user list through the terminal;
Generating viewing situation information based on at least one of the captured image, the determined user combination, and viewing environment information;
Transmitting the viewing situation information to the broadcast server; And
Receiving content recommendation information from the broadcast server
Including,
The content recommendation information,
Among the plurality of recommendation databases managed differently by the broadcast server corresponding to different combinations of users belonging to the pre-registered user group, among the data extractable from the recommendation database managed corresponding to the determined user combination It includes at least one of content information and channel information that matches the viewing situation information,
How the terminal operates.
제1항에 있어서,
상기 미리 등록된 사용자 그룹에 속한 사용자들 각각에 대응하여 프로파일을 획득하는 단계
를 더 포함하는,
단말의 동작 방법.
According to claim 1,
Obtaining a profile corresponding to each user belonging to the pre-registered user group
Further comprising,
How the terminal operates.
제2항에 있어서,
상기 미리 등록된 사용자 그룹에 속한 사용자들 각각에 대응하여 프로파일을 획득하는 단계는,
상기 촬영된 영상을 통해 상기 사용자들 각각의 얼굴을 출력하는 단계; 및
상기 사용자들 각각의 얼굴에 대응하는 성별 및 연령에 대한 정보를 포함하는 상기 프로파일의 입력을 수신하는 단계
를 포함하는,
단말의 동작 방법.
According to claim 2,
Acquiring a profile corresponding to each of the users belonging to the pre-registered user group,
Outputting faces of each of the users through the captured image; And
Receiving an input of the profile including information on gender and age corresponding to each of the faces of the users
Containing,
How the terminal operates.
제1항에 있어서,
상기 시청 상황 정보를 생성하는 단계는,
상기 사용자 조합에 속한 사용자들 각각의 프로파일, 출력 중인 채널 정보, 날짜 정보 및 시간 정보 중 하나 이상을 조합하여 생성하는 단계
를 포함하는,
단말의 동작 방법.
According to claim 1,
The step of generating the viewing situation information,
Generating by combining one or more of profiles, output channel information, date information and time information of each user belonging to the user combination
Containing,
How the terminal operates.
삭제delete 제1항에 있어서,
상기 시청 상황 정보는,
상기 콘텐츠 추천 정보의 생성을 위해 상기 방송 서버의 추천 데이터베이스에 업데이트 되는,
단말의 동작 방법.
According to claim 1,
The viewing situation information,
To be updated in the recommendation database of the broadcast server to generate the content recommendation information,
How the terminal operates.
OTT 스트리밍 서비스를 제공하는 방송 서버의 동작 방법에 있어서,
제1 모드에서,
카메라를 통해 촬영된 영상에 대응하는 시청 상황 정보를 단말로부터 수신하는 단계;
제2 모드에서,
상기 단말로부터 셋톱박스의 정보를 수신하는 단계;
상기 셋톱박스의 정보에 기초하여 상기 단말의 사용을 인증하는 단계;
상기 인증에 성공하는 경우, 상기 셋톱박스의 정보에 대응하는 사용자 그룹의 사용자 목록을 상기 단말로 전송하는 단계; 및
상기 단말을 통하여 상기 사용자 목록 중 적어도 하나의 사용자를 선택하는 입력에 대응하는 시청 상황 정보를 상기 단말로부터 수신하는 단계;
상기 시청 상황 정보에 기초하여 추천 데이터베이스에서 콘텐츠 추천 정보를 추출하는 단계; 및
상기 단말로 상기 콘텐츠 추천 정보를 전송하는 단계;
를 포함하고,
상기 시청 상황 정보는,
상기 제1 모드에서, 상기 촬영된 영상, 미리 등록된 사용자 그룹에서 상기 촬영된 영상에서 인식되는 사용자들 중 상기 촬영된 영상을 기반으로 하는 인증에 성공한 적어도 하나의 사용자에 대응하는 사용자 조합 및 시청 환경 정보 중 적어도 하나에 기초하여 생성되고,
상기 제2 모드에서, 상기 단말로부터 수신되는 상기 셋톱박스의 정보에 대응하는 사용자 그룹에서 상기 단말을 통하여 선택되는 적어도 하나의 사용자에 대응하는 사용자 조합 및 시청 환경 정보 중 적어도 하나에 기초하여 생성되며,
상기 콘텐츠 추천 정보는,
상기 미리 등록된 사용자 그룹에 속한 사용자들의 서로 다른 조합들에 대응하여 상기 방송 서버에 의하여 서로 다르게 관리되는 복수의 추천 데이터베이스들 중 상기 사용자 조합에 대응하여 관리되는 추천 데이터베이스에서 추출 가능한 데이터들 중 상기 시청 상황 정보에 매칭되는 콘텐츠 정보 및 채널 정보 중 적어도 하나를 포함하는,
방송 서버의 동작 방법.
In the operation method of a broadcast server providing an OTT streaming service,
In the first mode,
Receiving viewing situation information corresponding to an image photographed through a camera from a terminal;
In the second mode,
Receiving information of a set top box from the terminal;
Authenticating the use of the terminal based on the information of the set-top box;
If the authentication is successful, transmitting a user list of a user group corresponding to the information of the set-top box to the terminal; And
Receiving viewing situation information corresponding to an input for selecting at least one user from the user list through the terminal from the terminal;
Extracting content recommendation information from a recommendation database based on the viewing situation information; And
Transmitting the content recommendation information to the terminal;
Including,
The viewing situation information,
In the first mode, a user combination and a viewing environment corresponding to at least one user who has successfully authenticated based on the captured image, among users recognized in the captured image in the pre-registered user group in the first image. Is generated based on at least one of the information,
In the second mode, it is generated based on at least one of a user combination and viewing environment information corresponding to at least one user selected through the terminal in a user group corresponding to the set-top box information received from the terminal,
The content recommendation information,
The viewing among data extractable from a recommendation database managed in response to the user combination among a plurality of recommendation databases differently managed by the broadcast server corresponding to different combinations of users belonging to the pre-registered user group Including at least one of content information and channel information matching the context information,
How the broadcast server works.
제7항에 있어서,
상기 미리 등록된 사용자 그룹에 속한 사용자들 각각에 대응하여 프로파일을 획득하여 저장하는 단계
를 포함하는,
방송 서버의 동작 방법.
The method of claim 7,
Obtaining and storing a profile corresponding to each user belonging to the pre-registered user group
Containing,
How the broadcast server works.
제8항에 있어서,
상기 프로파일은,
상기 촬영된 영상을 통해 출력된 상기 사용자들 각각의 얼굴에 대응하는 성별 및 연령에 대한 정보를 포함하는,
방송 서버의 동작 방법.
The method of claim 8,
The profile,
Including information about the gender and age corresponding to each face of the user output through the captured image,
How the broadcast server works.
제7항에 있어서,
상기 시청 상황 정보는,
상기 사용자 조합에 속한 사용자들 각각의 프로파일, 출력 중인 채널 정보, 날짜 정보 및 시간 정보 중 하나 이상을 조합하여 생성되는,
방송 서버의 동작 방법.
The method of claim 7,
The viewing situation information,
It is generated by combining one or more of profiles, output channel information, date information and time information of each user belonging to the user combination,
How the broadcast server works.
제7항에 있어서,
상기 추천 데이터베이스에 상기 시청 상황 정보를 저장하는 단계;
상기 시청 상황 정보에 대응하여 관련 채널 정보 및 관련 콘텐츠를 수집하는 단계; 및
상기 관련 채널 정보 및 상기 관련 콘텐츠의 매칭을 통해 상기 콘텐츠 추천 정보를 저장하는 단계
를 더 포함하는,
방송 서버의 동작 방법.
The method of claim 7,
Storing the viewing situation information in the recommendation database;
Collecting relevant channel information and related content in response to the viewing situation information; And
Storing the content recommendation information through matching of the relevant channel information and the related content
Further comprising,
How the broadcast server works.
삭제delete 삭제delete 삭제delete 삭제delete 하드웨어와 결합되어 제1항 내지 제4항 및 제6항 내지 제11항 중 어느 하나의 항의 방법을 실행시키기 위하여 매체에 저장된 컴퓨터 프로그램.
A computer program stored in a medium to execute the method of any one of claims 1 to 4 and 6 to 11 in combination with hardware.
OTT 스트리밍 서비스를 제공하는 단말에 있어서,
메모리; 및
상기 메모리에 저장되는 하나 이상의 프로그램을 실행하는 프로세서
를 포함하고,
상기 프로세서는,
제1 모드에서,
카메라를 통해 촬영된 영상에서 사용자들을 인식하고,
미리 등록된 사용자 그룹에서 상기 인식된 사용자들 중 상기 촬영된 영상을 기반으로 하는 인증에 성공한 적어도 하나의 사용자에 대응하는 사용자 조합을 결정하고,
제2 모드에서,
상기 단말을 통하여 셋톱박스의 정보를 입력받고,
상기 셋톱박스의 정보를 방송 서버로 전송하고,
상기 셋톱박스의 정보에 기초하여 상기 단말의 사용이 인증됨에 반응하여, 상기 방송 서버로부터 상기 셋톱박스의 정보에 대응하는 사용자 그룹의 사용자 목록을 상기 단말을 통하여 제공하고,
상기 단말을 통하여 상기 사용자 목록 중 적어도 하나의 사용자를 선택하는 입력에 기초하여, 상기 사용자 조합을 결정하며,
상기 촬영된 영상, 상기 결정된 사용자 조합 및 시청 환경 정보 중 적어도 하나에 기초하여 시청 상황 정보를 생성하고,
상기 시청 상황 정보를 상기 방송 서버로 전송하고,
상기 방송 서버로부터 콘텐츠 추천 정보를 제공 받고,
상기 콘텐츠 추천 정보는,
상기 미리 등록된 사용자 그룹에 속한 사용자들의 서로 다른 조합들에 대응하여 상기 방송 서버에 의하여 서로 다르게 관리되는 복수의 추천 데이터베이스들 중 상기 결정된 사용자 조합에 대응하여 관리되는 추천 데이터베이스에서 추출 가능한 데이터들 중 상기 시청 상황 정보에 매칭되는 콘텐츠 정보 및 채널 정보 중 적어도 하나를 포함하는,
단말.
In the terminal that provides the OTT streaming service,
Memory; And
A processor executing one or more programs stored in the memory
Including,
The processor,
In the first mode,
Recognize users from images captured through the camera,
In the pre-registered user group, a user combination corresponding to at least one user who has successfully authenticated based on the captured image is determined from the recognized users,
In the second mode,
Get the information of the set-top box through the terminal,
The information of the set-top box is transmitted to a broadcasting server,
In response to the use of the terminal being authenticated based on the information of the set top box, a user list of a user group corresponding to the information of the set top box is provided from the broadcast server through the terminal,
The user combination is determined based on an input for selecting at least one user from the user list through the terminal,
Generating viewing situation information based on at least one of the captured image, the determined user combination, and viewing environment information,
Transmitting the viewing situation information to the broadcast server,
Receiving content recommendation information from the broadcast server,
The content recommendation information,
Among the plurality of recommendation databases managed differently by the broadcast server corresponding to different combinations of users belonging to the pre-registered user group, among the data extractable from the recommendation database managed corresponding to the determined user combination It includes at least one of content information and channel information that matches the viewing situation information,
Terminal.
OTT 스트리밍 서비스를 제공하는 방송 서버에 있어서,
메모리; 및
상기 메모리에 저장되는 하나 이상의 프로그램을 실행하는 프로세서
를 포함하고,
상기 프로세서는,
제1 모드에서,
카메라를 통해 촬영된 영상에 대응하는 시청 상황 정보를 단말로부터 수신하고,
제2 모드에서,
상기 단말로부터 셋톱박스의 정보를 수신하고,
상기 셋톱박스의 정보에 기초하여 상기 단말의 사용을 인증하고,
상기 인증에 성공하는 경우, 상기 셋톱박스의 정보에 대응하는 사용자 그룹의 사용자 목록을 상기 단말로 전송하고,
상기 단말을 통하여 상기 사용자 목록 중 적어도 하나의 사용자를 선택하는 입력에 대응하는 시청 상황 정보를 상기 단말로부터 수신하며,
상기 시청 상황 정보에 기초하여 추천 데이터베이스에서 콘텐츠 추천 정보를 추출하고,
상기 단말로 상기 콘텐츠 추천 정보를 전송하고,
상기 시청 상황 정보는,
상기 제1 모드에서, 상기 촬영된 영상, 미리 등록된 사용자 그룹에서 상기 촬영된 영상에서 인식되는 사용자들 중 상기 촬영된 영상을 기반으로 하는 인증에 성공한 적어도 하나의 사용자에 대응하는 사용자 조합 및 시청 환경 정보 중 적어도 하나에 기초하여 생성되고,
상기 제2 모드에서, 상기 단말로부터 수신되는 상기 셋톱박스의 정보에 대응하는 사용자 그룹에서 상기 단말을 통하여 선택되는 적어도 하나의 사용자에 대응하는 사용자 조합 및 시청 환경 정보 중 적어도 하나에 기초하여 생성되며,
상기 콘텐츠 추천 정보는,
상기 사용자 조합에 대응하여 관리되는 상기 방송 서버의 추천 데이터베이스에 추출 가능한 데이터들 중 상기 시청 상황 정보에 매칭되는 콘텐츠 정보 및 채널 정보 중 적어도 하나를 포함하는,
방송 서버.
In the broadcast server providing OTT streaming service,
Memory; And
A processor executing one or more programs stored in the memory
Including,
The processor,
In the first mode,
Viewing situation information corresponding to the image captured through the camera is received from the terminal,
In the second mode,
Receiving the information of the set-top box from the terminal,
Authenticate the use of the terminal based on the information of the set-top box,
If the authentication is successful, the user list of the user group corresponding to the information of the set-top box is transmitted to the terminal,
Viewing situation information corresponding to an input for selecting at least one user from the user list through the terminal is received from the terminal,
Content recommendation information is extracted from the recommendation database based on the viewing situation information,
Transmitting the content recommendation information to the terminal,
The viewing situation information,
In the first mode, a user combination and a viewing environment corresponding to at least one user who has successfully authenticated based on the captured image, among users recognized in the captured image in the pre-registered user group in the first image. Is generated based on at least one of the information,
In the second mode, it is generated based on at least one of a user combination and viewing environment information corresponding to at least one user selected through the terminal in a user group corresponding to the set-top box information received from the terminal,
The content recommendation information,
And at least one of content information and channel information matched with the viewing situation information among data extractable in the recommendation database of the broadcast server managed in response to the user combination,
Broadcast server.
삭제delete 삭제delete OTT 스트리밍 서비스를 제공하는 단말의 동작 방법에 있어서,
제1 모드에서,
카메라를 통해 촬영된 영상에서 사용자들을 인식하는 단계; 및
상기 인식된 사용자들 중 상기 촬영된 영상을 기반으로 하는 인증에 성공한 적어도 하나의 사용자에 대응하는 사용자 조합을 생성하는 단계;
제2 모드에서,
상기 단말을 통하여 셋톱박스의 정보를 입력받는 단계;
상기 셋톱박스의 정보를 방송 서버로 전송하는 단계;
상기 셋톱박스의 정보에 기초하여 상기 단말의 사용이 인증됨에 반응하여, 상기 방송 서버로부터 상기 셋톱박스의 정보에 대응하는 사용자 그룹의 사용자 목록을 상기 단말을 통하여 제공하는 단계; 및
상기 단말을 통하여 상기 사용자 목록 중 적어도 하나의 사용자를 선택하는 입력에 기초하여, 상기 사용자 조합을 결정하는 단계;
출력 중인 채널 정보, 날짜 정보 및 시간 정보 중 하나 이상을 조합하여 시청 환경 정보를 생성하는 단계;
상기 촬영된 영상, 상기 생성된 사용자 조합 및 상기 시청 환경 정보 중 적어도 하나에 기초하여 시청 상황 정보를 생성하는 단계;
상기 시청 상황 정보를 방송 서버로 전송하는 단계; 및
상기 방송 서버로부터 콘텐츠 추천 정보를 제공 받는 단계
를 포함하고,
상기 콘텐츠 추천 정보는,
미리 등록된 사용자 그룹에 속한 사용자들의 서로 다른 조합들에 대응하여 상기 방송 서버에 의하여 서로 다르게 관리되는 복수의 추천 데이터베이스들 중 상기 생성된 사용자 조합에 대응하여 관리되는 추천 데이터베이스에서 추출 가능한 데이터들 중 상기 시청 상황 정보에 매칭되는 콘텐츠 정보 및 채널 정보 중 적어도 하나를 포함하는,
단말의 동작 방법.
In the operation method of the terminal providing the OTT streaming service,
In the first mode,
Recognizing users in the image taken through the camera; And
Generating a user combination corresponding to at least one user who has successfully authenticated based on the photographed image among the recognized users;
In the second mode,
Receiving information of a set-top box through the terminal;
Transmitting information of the set-top box to a broadcast server;
In response to the use of the terminal being authenticated based on the information of the set top box, providing a user list of a user group corresponding to the set top box information from the broadcast server through the terminal; And
Determining the user combination based on an input for selecting at least one user in the user list through the terminal;
Generating viewing environment information by combining one or more of output channel information, date information, and time information;
Generating viewing situation information based on at least one of the captured image, the generated user combination, and the viewing environment information;
Transmitting the viewing situation information to a broadcast server; And
Receiving content recommendation information from the broadcast server
Including,
The content recommendation information,
Among the plurality of recommendation databases managed differently by the broadcast server in correspondence to different combinations of users belonging to a user group registered in advance, among the data extractable from the recommendation database managed corresponding to the generated user combination It includes at least one of content information and channel information that matches the viewing situation information,
How the terminal operates.
제21항에 있어서,
상기 사용자들 각각에 대응하여 프로파일을 획득하는 단계
를 더 포함하는,
단말의 동작 방법.
The method of claim 21,
Obtaining a profile corresponding to each of the users
Further comprising,
How the terminal operates.
제22항에 있어서,
상기 사용자들 각각에 대응하여 프로파일을 획득하는 단계는,
상기 촬영된 영상을 통해 상기 사용자들 각각의 얼굴을 출력하는 단계; 및
상기 사용자들 각각의 얼굴에 대응하는 성별 및 연령에 대한 정보를 포함하는 상기 프로파일의 입력을 수신하는 단계
를 포함하는,
단말의 동작 방법.
The method of claim 22,
Acquiring a profile corresponding to each of the users,
Outputting faces of each of the users through the captured image; And
Receiving an input of the profile including information on gender and age corresponding to each of the faces of the users
Containing,
How the terminal operates.
삭제delete 삭제delete 제21항에 있어서,
상기 시청 상황 정보는,
상기 콘텐츠 추천 정보의 생성을 위해 상기 방송 서버의 추천 데이터베이스에 업데이트 되는,
단말의 동작 방법.
The method of claim 21,
The viewing situation information,
To be updated in the recommendation database of the broadcast server to generate the content recommendation information,
How the terminal operates.
삭제delete 삭제delete 삭제delete 삭제delete OTT 스트리밍 서비스를 제공하는 방송 서버의 동작 방법에 있어서,
제1 모드에서,
카메라를 통해 촬영된 영상에 대응하는 시청 상황 정보를 단말로부터 수신하는 단계;
제2 모드에서,
상기 단말로부터 셋톱박스의 정보를 수신하는 단계;
상기 셋톱박스의 정보에 기초하여 상기 단말의 사용을 인증하는 단계;
상기 인증에 성공하는 경우, 상기 셋톱박스의 정보에 대응하는 사용자 그룹의 사용자 목록을 상기 단말로 전송하는 단계; 및
상기 단말을 통하여 상기 사용자 목록 중 적어도 하나의 사용자를 선택하는 입력에 대응하는 시청 상황 정보를 상기 단말로부터 수신하는 단계;
상기 시청 상황 정보에 대응하여 관련 채널 정보 및 관련 콘텐츠를 수집하는 단계; 및
상기 시청 상황 정보, 상기 관련 채널 정보 및 상기 관련 콘텐츠의 매칭을 통해 콘텐츠 추천 정보를 추천 데이터베이스에 저장하는 단계
를 포함하고,
상기 시청 상황 정보는,
상기 제1 모드에서, 상기 촬영된 영상, 상기 촬영된 영상에서 인식되는 사용자들 중 상기 촬영된 영상을 기반으로 하는 인증에 성공한 적어도 하나의 사용자에 대응하는 사용자 조합 및 시청 환경 정보 중 적어도 하나에 기초하여 생성되고,
상기 제2 모드에서, 상기 단말로부터 수신되는 상기 셋톱박스의 정보에 대응하는 사용자 그룹에서 상기 단말을 통하여 선택되는 적어도 하나의 사용자에 대응하는 사용자 조합 및 시청 환경 정보 중 적어도 하나에 기초하여 생성되며,
상기 콘텐츠 추천 정보는,
미리 등록된 사용자 그룹에 속한 사용자들의 서로 다른 조합들에 대응하여 상기 방송 서버에 의하여 서로 다르게 관리되는 복수의 추천 데이터베이스들 중 상기 사용자 조합에 대응하여 관리되는 추천 데이터베이스에서 추출 가능한 데이터들 중 상기 시청 상황 정보에 매칭되는 콘텐츠 정보 및 채널 정보 중 적어도 하나를 포함하는,
방송 서버의 동작 방법.
In the operation method of a broadcast server providing an OTT streaming service,
In the first mode,
Receiving viewing situation information corresponding to an image photographed through a camera from a terminal;
In the second mode,
Receiving information of a set top box from the terminal;
Authenticating the use of the terminal based on the information of the set-top box;
If the authentication is successful, transmitting a user list of a user group corresponding to the information of the set-top box to the terminal; And
Receiving viewing situation information corresponding to an input for selecting at least one user from the user list through the terminal from the terminal;
Collecting relevant channel information and related content in response to the viewing situation information; And
Storing content recommendation information in a recommendation database through matching of the viewing situation information, the relevant channel information, and the related content
Including,
The viewing situation information,
In the first mode, based on at least one of a user combination and viewing environment information corresponding to at least one user who has successfully authenticated based on the captured image among the captured images and users recognized from the captured image. Is created,
In the second mode, the user group corresponding to the set-top box information received from the terminal is generated based on at least one of a user combination and viewing environment information corresponding to at least one user selected through the terminal,
The content recommendation information,
The viewing situation among data extractable from a recommendation database managed in response to the user combination among a plurality of recommendation databases managed differently by the broadcast server in correspondence to different combinations of users belonging to a user group registered in advance Including at least one of content information and channel information that matches the information,
How the broadcast server works.
제31항에 있어서,
상기 시청 환경 정보는,
상기 사용자 조합에 속한 사용자들 각각의 프로파일, 출력 중인 채널 정보, 날짜 정보 및 시간 정보 중 하나 이상을 조합하여 생성되는,
방송 서버의 동작 방법.
The method of claim 31,
The viewing environment information,
It is generated by combining one or more of profiles, output channel information, date information and time information of each user belonging to the user combination,
How the broadcast server works.
삭제delete 삭제delete 삭제delete 삭제delete 제32항에 있어서,
상기 프로파일은,
상기 촬영된 영상을 통해 출력된 상기 사용자들 각각의 얼굴에 대응하는 성별 및 연령에 대한 정보를 포함하는,
방송 서버의 동작 방법.
The method of claim 32,
The profile,
Including information about the gender and age corresponding to each face of the user output through the captured image,
How the broadcast server works.
KR1020170166088A 2017-12-05 2017-12-05 Operating Method Of Terminal And Server To Recommend Contents KR102129160B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020170166088A KR102129160B1 (en) 2017-12-05 2017-12-05 Operating Method Of Terminal And Server To Recommend Contents

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020170166088A KR102129160B1 (en) 2017-12-05 2017-12-05 Operating Method Of Terminal And Server To Recommend Contents

Publications (2)

Publication Number Publication Date
KR20190066402A KR20190066402A (en) 2019-06-13
KR102129160B1 true KR102129160B1 (en) 2020-07-08

Family

ID=66847445

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020170166088A KR102129160B1 (en) 2017-12-05 2017-12-05 Operating Method Of Terminal And Server To Recommend Contents

Country Status (1)

Country Link
KR (1) KR102129160B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11954162B2 (en) 2020-09-30 2024-04-09 Samsung Electronics Co., Ltd. Recommending information to present to users without server-side collection of user data for those users

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022051129A1 (en) * 2020-09-03 2022-03-10 Arris Enterprises Llc Method and system for content switching and content control based on facial identification profiling
WO2022196842A1 (en) * 2021-03-17 2022-09-22 주식회사 여심서울 Method and system for providing video content by recognizing user biometric information

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101345187B1 (en) 2011-09-26 2013-12-30 애니포인트 미디어 그룹 Method for providing personalized advertizement and computer-readable medium having thereon program performing function embodying the same

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100069395A (en) * 2008-12-16 2010-06-24 주식회사 케이티 System and method for recommending individual iptv comtents based on face recognition
KR101495297B1 (en) * 2013-04-29 2015-02-27 에이스텔 주식회사 System, apparatus, method and computer readable recording medium for providing analyzing the log of a subscriber through the recognition of circumstantial based on the smart tv
KR102104355B1 (en) * 2013-08-30 2020-05-29 엘지전자 주식회사 Image display device and operating method thereof

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101345187B1 (en) 2011-09-26 2013-12-30 애니포인트 미디어 그룹 Method for providing personalized advertizement and computer-readable medium having thereon program performing function embodying the same

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11954162B2 (en) 2020-09-30 2024-04-09 Samsung Electronics Co., Ltd. Recommending information to present to users without server-side collection of user data for those users

Also Published As

Publication number Publication date
KR20190066402A (en) 2019-06-13

Similar Documents

Publication Publication Date Title
US11696102B2 (en) Systems and methods for auto-configuring a user equipment device with content consumption material
US11509855B2 (en) Optically readable codes in a content delivery system
US11659220B2 (en) System and method for surveying broadcasting ratings
US11218767B2 (en) Systems and methods for controlling access to media assets using two-factor authentication
US9674563B2 (en) Systems and methods for recommending content
US20130179698A1 (en) Systems and methods for options relating to power-on of a user equipment device
KR102129160B1 (en) Operating Method Of Terminal And Server To Recommend Contents
US10771848B1 (en) Actionable contents of interest
WO2017080216A1 (en) Method for recommending video through bluetooth technology, remote controller, and smart tv
WO2011118249A1 (en) Content recommendation server, content display terminal, and content recommendation system
US20170142487A1 (en) Methods and devices for recommending videos through bluetooth technology
US20170347154A1 (en) Video display apparatus and operating method thereof
US20160189269A1 (en) Systems and methods for on-line purchase of items displayed within video content
KR102385407B1 (en) Method and apparatus for generating broadcast direction information
KR20150084276A (en) Method for controlling internet protocol television and digital broadcast receiver thereto
JP6601969B2 (en) Broadcast receiving apparatus, broadcast receiving method and program
US9742825B2 (en) Systems and methods for configuring devices
KR101212448B1 (en) Virtual group Managing device for providing Electronic Program Guide for prefer broadcast channels to user
KR20100032540A (en) Method and system for providing broadcast contents to user's terminal
CN107071564A (en) The control method for playing back and its relevant apparatus of a kind of program
KR20120053268A (en) Method and apparatus for constructing object information of scene

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment
E90F Notification of reason for final refusal
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant