KR20180079885A

KR20180079885A - 전자 장치 및 이의 제어 방법

Info

Publication number: KR20180079885A
Application number: KR1020170000607A
Authority: KR
Inventors: 이희란; 김도성; 김성원; 배무공; 신승민; 윤현돈
Original assignee: 삼성전자주식회사
Priority date: 2017-01-03
Filing date: 2017-01-03
Publication date: 2018-07-11
Also published as: US20180189841A1; WO2018128298A1

Abstract

전자 장치가 개시된다. 본 전자 장치는 디스플레이 장치와 통신하는 통신부, 구매 이력 정보를 저장하는 저장부 및 구매 이력 정보에 기초하여 결정된 광고 정보가 디스플레이 장치에 전송되도록 통신부를 제어하는 프로세서를 포함하고, 프로세서는, 디스플레이 장치에서 표시되는 제1 영상에 대응되는 제1 특징 정보를 통신부를 통해 수신하고, 수신된 제1 특징 정보에 기초하여 제1 영상이 상품 결재와 관련된 것인지를 확인하고, 제1 영상이 상품 결재와 관련된 것이면 구매 이력 정보를 업데이트한다.

Description

전자 장치 및 이의 제어 방법 { ELECTRONIC APPARATUS AND CONTROLLING METHOD THEREOF }

본 개시는 전자 장치 및 이의 제어 방법에 관한 것으로, 보다 상세하게는 구매 이력 정보에 기초하여 광고 정보를 제공할 수 있는 전자 장치 및 이의 제어 방법에 대한 것이다.

사용자의 구매에 대한 요구가 점차 다양해지고 전자 기술 발전에 힘입어, 종래에 방송 시청만을 목적으로 하던 TV는 이용 방식이나 송출 방식에 따라 여러 목적으로 구분, 활용되었다. 특히, 방송과 통신(인터넷)이 접목됨으로써 새로운 산업 영역이 양산되고 있었다.

또한 서버, 컴퓨터, 휴대용 기기 등과 양방향 통신이 가능한 스마트 TV등과 같이 디스플레이 장치를 통해 인터넷 서핑, 물건 구매, 게임 등 다양할 활동이 가능하게 되었고, 이에 따라 TV를 통한 광고 산업의 발전도 가속화 되었다.

최근엔, 사용자의 기호를 파악하여 맞춤형 광고를 TV로 제공하는 서비스가 등장하였다. 적절한 맞춤형 광고의 제공을 위해선 사용자의 성향을 정확히 파악할 수 있는 충분하고 다양한 데이터가 필요하기 때문에, 그러한 데이터를 수집하기 위한 다양한 방식이 시도되고 있었다.

본 개시는 상술한 필요에 따라 안출된 것으로, 본 개시의 목적은 구매 이력 정보에 기초하여 광고 정보를 제공할 수 있는 전자 장치 및 이의 제어 방법을 제공하는 데 있다.

이상과 같은 목적을 달성하기 위한 본 개시의 일 실시 예에 따른 전자 장치는, 디스플레이 장치와 통신하는 통신부, 구매 이력 정보를 저장하는 저장부 및 상기 구매 이력 정보에 기초하여 결정된 광고 정보가 상기 디스플레이 장치에 전송되도록 상기 통신부를 제어하는 프로세서를 포함하고, 상기 프로세서는, 상기 디스플레이 장치에서 표시되는 제1 영상에 대응되는 제1 특징 정보를 상기 통신부를 통해 수신하고, 상기 수신된 제1 특징 정보에 기초하여 상기 제1 영상이 상품 결재와 관련된 것인지를 확인하고, 상기 제1 영상이 상품 결재와 관련된 것이면 상기 구매 이력 정보를 업데이트한다.

이 경우, 상기 제1 특징 정보는, 상기 제1 영상을 캡쳐하여 생성된 캡쳐 이미지, 상기 제1 영상에 대응하는 핑거 프린트에 대한 정보, 상기 제1 영상에 포함된 텍스트에 대한 정보 및 상기 제1 영상에 포함된 로고에 대한 정보 중 적어도 하나를 포함할 수 있다.

한편, 상기 프로세서는, 상기 제1 영상이 상품 결재와 관련된 것이고 상기 제1 특징 정보로부터 상품 정보가 획득되면, 상기 획득된 상품 정보에 기초하여 상기 구매 이력 정보를 업데이트할 수 있다.

한편, 상기 통신부는, 상기 제1 영상 이전에 표시된 적어도 하나의 제2 영상에 대응되는 적어도 하나의 제2 특징 정보를 수신하며, 상기 프로세서는, 상기 제1 영상이 상품 결재와 관련된 것이고 상기 제1 특징 정보로부터 상품 정보가 미획득되면, 상기 수신된 적어도 하나의 제2 특징 정보로부터 상품 정보를 획득하고, 상기 획득된 상품 정보에 기초하여 구매 이력 정보를 업데이트할 수 있다.

한편, 상기 저장부는 상기 디스플레이 장치에 대응되는 시청 이력 정보를 저장하며, 상기 프로세서는, 상기 수신된 제1 특징 정보에 기초하여 상기 시청 이력 정보를 업데이트하고, 상기 업데이트된 시청 이력 정보와 상기 업데이트된 구매 이력 정보에 기초하여 결정된 광고 정보를 상기 디스플레이 장치로 전송하도록 상기 통신부를 제어할 수 있다.

한편, 상기 구매 이력 정보는, 상품명, 상품 제조사, 상품의 카테고리, 상품 가격, 결재 수단 중 적어도 하나에 대한 정보를 포함할 수 있다.

한편, 상기 저장부는, 복수의 디스플레이 장치에 각각 대응하는 복수의 서로 다른 구매 이력 정보를 저장하며, 상기 프로세서는, 상기 복수의 서로 다른 구매 이력 정보에 기초하여 서로 다른 복수의 광고 정보를 상기 통신부를 통해 상기 복수의 디스플레이 장치 각각에 전송할 수 있다.

한편, 상기 구매 이력 정보는, 홈쇼핑 구매 이력 정보, 애플리케이션 구매 이력 정보, 게임 아이템 구매 이력 정보, VOD(Video On Demand) 구매 이력 정보, 유료 TV(pay television) 이력 정보 중 적어도 2 이상을 포함할 수 있다.

한편, 상기 프로세서는, 상기 구매 이력 정보에 포함된 홈쇼핑 구매 이력 정보, 애플리케이션 구매 이력 정보, 게임 아이템 구매 이력 정보, VOD 구매 이력 정보, 유료 TV 구매 이력 정보 중 적어도 2 이상의 정보에 기초하여 광고 정보를 결정하고, 결정된 광고 정보를 상기 디스플레이 장치로 전송하도록 상기 통신부를 제어할 수 있다.

한편, 본 개시의 일 실시 예에 따른 전자 장치의 제어 방법은, 디스플레이 장치에서 표시되는 제1 영상에 대응되는 제1 특징 정보를 수신하는 단계, 상기 수신된 제1 특징 정보에 기초하여 상기 제1 영상이 상품 결재와 관련된 것인지를 확인하고, 상기 제1 영상이 상품 결재와 관련된 것이면 기 저장된 구매 이력 정보를 업데이트하는 단계 및 상기 업데이트된 구매 이력 정보에 기초하여 결정된 광고 정보를 상기 디스플레이 장치에 전송하는 단계를 포함한다.

한편, 상기 업데이트하는 단계는, 상기 제1 영상이 상품 결재와 관련된 것이고 상기 제1 특징 정보로부터 상품 정보가 획득되면, 상기 획득된 상품 정보에 기초하여 상기 구매 이력 정보를 업데이트할 수 있다.

한편, 본 실시 예에 따른 전자 장치의 제어 방법은, 상기 제1 영상 이전에 표시된 적어도 하나의 제2 영상에 대응되는 적어도 하나의 제2 특징 정보를 수신하는 단계를 더 포함하며, 상기 업데이트하는 단계는, 상기 제1 영상이 상품 결재와 관련된 것이고 상기 제1 특징 정보로부터 상품 정보가 미획득되면, 상기 수신된 적어도 하나의 제2 특징 정보로부터 상품 정보를 획득하고, 상기 획득된 상품 정보에 기초하여 구매 이력 정보를 업데이트할 수 있다.

한편, 본 실시 예에 따른 전자 장치의 제어 방법은, 상기 수신된 제1 특징 정보에 기초하여 상기 디스플레이 장치에 대응되는 기 저장된 시청 이력 정보를 업데이트하는 단계를 더 포함하고, 상기 전송하는 단계는 상기 업데이트된 시청 이력 정보와 상기 업데이트된 구매 이력 정보에 기초하여 결정된 광고 정보를 상기 디스플레이 장치로 전송할 수 있다.

한편, 상기 전자 장치는 복수의 디스플레이 장치에 각각 대응하는 복수의 서로 다른 구매 이력 정보를 저장하며, 상기 전송하는 단계는, 상기 복수의 서로 다른 구매 이력 정보에 기초하여 서로 다른 복수의 광고 정보를 상기 복수의 디스플레이 장치 각각에 전송할 수 있다.

이 경우, 상기 전송하는 단계는, 홈쇼핑 구매 이력 정보, 애플리케이션 구매 이력 정보, 게임 아이템 구매 이력 정보, VOD 구매 이력 정보, 유료 TV 구매 이력 정보 중 적어도 2 이상의 정보에 기초하여 결정된 광고 정보를 상기 디스플레이 장치로 전송할 수 있다.

한편, 본 개시의 일 실시 예에 따른 전자 장치의 제어방법을 수행하기 위한 프로그램을 포함하는 컴퓨터 판독가능 기록 매체에 있어서, 상기 제어방법은, 디스플레이 장치에서 표시되는 제1 영상에 대응되는 제1 특징 정보를 수신하는 단계, 상기 수신된 제1 특징 정보에 기초하여 상기 제1 영상이 상품 결재와 관련된 것인지를 확인하고, 상기 제1 영상이 상품 결재와 관련된 것이면 기 저장된 구매 이력 정보를 업데이트하는 단계 및 상기 업데이트된 구매 이력 정보에 기초하여 결정된 광고 정보를 상기 디스플레이 장치에 전송하는 단계를 포함한다.

도 1은 본 개시의 일 실시 예에 따른 정보 제공 시스템을 설명하기 위한 도면,
도 2는 본 개시의 일 실시 예에 따른 전자 장치를 설명하기 위한 블럭도,
도 3 내지 도 5는 구매 이력 정보 업데이트에 관한 본 개시의 다양한 실시 예를 설명하기 위한 도면,
도 6은 영상에 대응하는 특징 정보 생성에 관한 본 개시의 일 실시 예를 설명하기 위한 도면,
도 7은 본 개시의 일 실시 예에 따른 전자 장치에서의 데이터 처리 흐름을 설명하기 위한 도면,
도 8은 본 개시의 일 실시 예에 따른 디스플레이 장치에서 제공되는 광고 정보를 설명하기 위한 도면,
도 9는 본 개시의 일 실시 예에 따른 전자 장치의 제어방법을 설명하기 위한 흐름도, 그리고
도 10은 본 개시의 일 실시 예에 따른 디스플레이 장치를 설명하기 위한 블럭도이다.

본 개시를 설명함에 있어서, 관련된 공지기능 혹은 구성에 대한 구체적인 설명이 본 개시의 요지를 불필요하게 흐릴 수 있다고 판단된 경우 그 상세한 설명은 생략한다. 그리고 후술 되는 용어들은 본 개시에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관계 등에 따라 달라질 수 있다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.

제1, 제2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 구성요소들은 용어들에 의해 한정되어서는 안 된다. 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.

본 개시에서 사용한 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 권리범위를 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "구성되다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.

실시 예에 있어서 ‘모듈’ 혹은 ‘부’는 적어도 하나의 기능이나 동작을 수행하며, 하드웨어 또는 소프트웨어로 구현되거나 하드웨어와 소프트웨어의 결합으로 구현될 수 있다. 또한, 복수의‘모듈’ 혹은 복수의‘부’는 특정한 하드웨어로 구현될 필요가 있는 ‘모듈’ 혹은 ‘부’를 제외하고는 적어도 하나의 모듈로 일체화되어 적어도 하나의 프로세서로 구현될 수 있다.

이하에서, 첨부된 도면을 이용하여 본 발명에 대하여 구체적으로 설명한다.

도 1은 본 개시의 일 실시 예에 따른 정보 제공 시스템을 설명하기 위한 도면이다.

도 1을 참고하면, 정보 제공 시스템(1000)은 전자 장치(100)와 디스플레이 장치(200)를 포함한다.

디스플레이 장치(200)는 컨텐츠에 대응하는 영상을 표시할 수 있는 장치이다. 예컨대, 디스플레이 장치(200)는 TV 또는, PC, 휴대폰, PDA 등과 같은 전자 장치일 수 있다.

컨텐츠란, 디스플레이 장치(200)에서 시청될 수 있는 미디어 객체를 의미하는 것으로 예를 들어, 컨텐츠를 제공하는 소스의 종류에 따라, 라이브 방송 컨텐츠, DVR 컨텐츠, VoD/OTT Non-linear 컨텐츠, UGC 컨텐츠 등으로 구분될 수 있다.

디스플레이 장치(200)는 출력 중인 컨텐츠로부터 특징정보를 추출할 수 있다. 특징 정보는 예컨대 컨텐츠에 대응되는 영상에 포함된 텍스트, 영상에 포함된 로고, 상표, 영상에 대응되는 비디오 핑거 프린트, 컨텐츠의 오디오에서 추출되는 오디오 핑거 프린터 등일 수 있다. 또한, 특징 정보는 컨텐츠에 대응되는 영상을 캡쳐하여 생성된 캡쳐 이미지일 수 있다.

핑거프린트는 영상 신호 또는 오디오 신호로부터 추출된 특징 정보로서, 텍스트를 기반으로 한 메타 데이터와는 달리, 신호 자체 고유의 특성을 반영한다. 예컨대 오디오 신호로부터 추출된 오디오 핑거프린트는 오디오 신호의 주파수, 진폭 등의 특징을 나타낸 정보이고, 영상 신호로부터 추출된 비디오 핑거프린트는 영상 신호의 모션 벡터, 색상 등의 특징을 나타낸 정보이다. 이와 같은 핑거프린트는 자동 컨텐츠 식별(Automatic Contents Recognition, ACR) 기술에서 이용된다.

디스플레이 장치(200)는 전자 장치(100)와 통신이 가능하며, 컨텐츠로부터 추출된 특징 정보를 전자 장치(100)에 전송하고, 전자 장치(200)로부터 광고 정보를 수신할 수 있다. 여기서 광고는 맞춤형 광고로서, 디스플레이 장치(200)의 사용자의 기호가 반영된 것일 수 있다. 광고 정보는 예컨대, 상품, VOD, 게임 등의 구매를 유도하기 위한 것이다.

그리고 디스플레이 장치(200)는 수신된 광고 정보를 제공할 수 있다. 예컨대, 디스플레이 장치(200)는 수신된 광고 정보에 대응하는 그래픽 유저 인터페이스를 표시할 수 있다.

전자 장치(100)는 디스플레이 장치(200)의 사용자의 구매 이력 정보를 기초로 디스플레이 장치(200)에 광고 정보를 전송할 수 있다.

구체적으로 전자 장치(100)는 디스플레이 장치(200)의 사용자의 구매 이력 정보를 저장하고 이에 기초하여 디스플레이 장치(200)에 광고 정보를 전송할 수 있는데, 여기서 구매 이력 정보란, 디스플레이 장치(200)의 사용자의 구매 활동이 반영된 것으로서, 이러한 정보는, 예컨대, 사용자가 웹 사이트를 통해 상품을 구매한 이력, 홈 쇼핑을 통해 상품을 구매한 이력, 오프 라인 매장에서 상품을 구매한 이력 등 다양한 구매 활동이 반영된 것이 수 있다. 전자 장치(100)는 이러한 정보 관리하는 타 전자 장치에 요청하여 구매 이력 정보를 수집할 수 있으며, 또는, 결재가 이루어진 전자 장치로부터 구매 이력 정보를 수집할 수도 있다. 예컨대, 디스플레이 장치(200)를 통해 이루어진 구매인 경우에 전자 장치(100)는 디스플레이 장치(200)로부터 각종 구매 관련 정보(예컨대, 사용자가 디스플레이 장치(200)에 입력한 정보, 디스플레이 장치(200)에서 표시되는 영상에 대한 특징 정보 등)를 제공받아 구매 이력 정보를 수집할 수 있다.

구매 이력 정보는 예컨대, 구매한 상품의 상품명, 상품 제조사, 상품의 카테고리, 상품 가격, 상품 판매자, 상품 판매 중개자, 그 상품을 결재하는데 사용된 결재 수단, 결재 시기 등 중 적어도 하나의 정보를 포함한다. 한편, 구매 이력 정보에는 돈을 지불하여 상품을 구매한 경우에 대한 정보만 포함되는 것은 아니고, 무료 상품을 획득한 경우에 대한 정보도 포함될 수 있다.

전자 장치(100)는 디스플레이 장치(200)에서 표시되고 있는 영상이 상품 결재와 관련된 것인지 상기 영상에 대한 특징 정보에 기초하여 확인할 수 있다. 여기서 상품이란 거래 대상이 되는 어떠한 것이라도 포함되는 의미이다. 전자 장치(100)는 디스플레이 장치(200)에서 표시되고 있는 영상이 상품 결재와 관련된 것이면, 디스플레이 장치(200)에 대응하는 구매 이력 정보를 업데이트할 수 있다.

이와 같은 방식으로 전자 장치(100)는 디스플레이 장치(200) 사용자의 기호에 기초하여 맞춤형 광고를 디스플레이 장치(200)로 제공할 수 있다. 즉, 전자 장치(100)는 무작위로 광고 정보를 제공하는 것이 아니라, 해당 광고 정보에 관심일 있을 것으로 추정되는 디스플레이 장치의 사용자를 타겟팅하여 제공할 수 있다.

한편, 도 1에선 전자 장치(100)가 하나인 것으로 도시하였으나, 기능에 따라 복수 개의 전자 장치가 존재할 수 있다.

또한, 도 1에선 전자 장치(100)가 한 대의 디스플레이 장치와 통신하는 것으로 도시하였으나, 복수의 디스플레이 장치와 통신할 수 있다. 이 경우, 전자 장치(100)는 복수의 디스플레이 장치에 각각 대응하는 복수의 서로 다른 구매 이력 정보를 저장하며, 상기 복수의 서로 다른 구매 이력 정보에 기초하여 서로 다른 복수의 광고 정보를 복수의 디스플레이 장치 각각에 전송할 수 있다.

한편, 디스플레이 장치(200)가 특징 정보를 직접 전자 장치(100)로 전송하고, 전자 장치(100)가 광고 정보를 직접 디스플레이 장치(200)로 전송하는 것으로 설명하였으나, 중간의 다른 매체를 거쳐 특징 정보가 전자 장치(100)로 전송되거나, 중간의 다른 매체를 거쳐 광고 정보가 디스플레이 장치(200)로 전송되는 것도 가능하다.

이하에선 본 개시에 따른 디스플레이 장치(200)와 전자 장치(100)에 대해 좀 더 자세히 설명하도록 한다.

도 2는 본 개시의 일 실시 예에 따른 전자 장치(100)의 구성을 설명하기 위한 블럭도이다. 전자 장치(100)는 예컨대 광고 제공을 위한 서버로서 구현될 수 있다.

도 2를 참고하면, 전자 장치(100)는 통신부(110), 저장부(120) 및 프로세서(130)를 포함한다.

통신부(110)는 다양한 외부 장치와 통신을 수행하기 위한 구성으로, 근거리 통신망(LAN: Local Area Network) 및 인터넷망을 통해 외부 기기에 접속되는 형태뿐만 아니라, 무선 통신(예를 들어, Z-wave, 4LoWPAN, RFID, LTE D2D, BLE, GPRS, Weightless, Edge Zigbee, ANT+, NFC, IrDA, DECT, WLAN, 블루투스, 와이파이, Wi-Fi Direct, GSM, UMTS, LTE, WiBRO 등의 무선 통신) 방식에 의해서 외부 기기에 접속될 수 있다. 통신부(110)는 와이파이칩, 블루투스 칩, 무선 통신 칩 등 다양한 통신칩을 포함할 수 있다.

통신부(110)는 디스플레이 장치(200)로부터 특징 정보를 비롯한 다양한 정보를 수신할 수 있으며, 디스플레이 장치(200)로 광고 정보를 비롯한 다양한 정보를 전송할 수 있다.

저장부(120)는 전자 장치(100)의 동작에 필요한 각종 프로그램 및 데이터를 저장할 수 있다.

저장부(120)는 비휘발성 메모리, 휘발성 메모리, 플래시메모리(flash-memory), 하드디스크 드라이브(HDD) 또는 솔리드 스테이트 드라이브(SSD) 등으로 구현될 수 있다. 저장부(120)는 프로세서(130)에 의해 액세스 되며, 프로세서(130)에 의한 데이터의 독취/기록/수정/삭제/갱신 등이 수행될 수 있다. 한편, 저장부(120)는 전자 장치(100) 내의 저장 매체뿐만 아니라, 외부 저장 매체, 예를 들어, USB 또는 네트워크를 통한 웹 서버(Web server) 등으로 구현될 수 있다. 저장부(120)에는 O/S나 각종 애플리케이션과 같은 프로그램과, 사용자 설정 데이터, 애플리케이션 수행 과정에서 생성된 데이터, 멀티미디어 컨텐츠 데이터 등과 같은 다양한 데이터가 저장될 수 있다.

저장부(120)는 디스플레이 장치(200)의 사용자의 구매 이력 정보를 저장할 수 있다. 저장부(120)에는 디스플레이 장치(200)의 사용자를 포함한 복수의 사용자 각각에 대한 복수의 구매 이력 정보가 저장될 수 있고, 전자 장치(100)는 디스플레이 장치(200)뿐만 아니라 타 디스플레이 장치로 해당 구매 이력 정보에 기초하여 광고 정보를 제공할 수 있다. 이 경우 저장부(120)에는 사용자별로 구매 이력 정보가 구분되어 저장될 수 있고, 디스플레이 장치별로 구매 이력 정보가 구분되어 저장될 수 있다.

프로세서(130)는 전자 장치(100)의 전반적인 동작을 제어하기 위한 구성이다. 프로세서(130)는 CPU, 램(RAM), 롬(ROM), 시스템 버스를 포함할 수 있다. 이상에서는 프로세서(130)가 하나의 CPU만을 포함하는 것으로 설명하였지만, 구현시에는 복수의 CPU(또는 DSP, MPU 등)로 구현될 수 있다.

프로세서(130)는 저장부(120)에 저장된 특정 사용자의 구매 이력 정보에 대응되는 광고 정보가 상기 특정 사용자의 디스플레이 장치(200)에 전송되도록 통신부(110)를 제어할 수 있다.

그리고 프로세서(130)는 통신부(110)를 통해 디스플레이 장치(200)로부터 디스플레이 장치(200)에서 표시되는 영상에 대응되는 특징 정보를 수신하고, 상기 수신된 특징 정보에 기초하여 디스플레이 장치(200)에서 표시되는 영상이 상품 결재와 관련된 것인지를 확인할 수 있다. 그리고 프로세서(130)는 디스플레이 장치(200)에서 표시되는 영상이 상품 결재와 관련된 것으로 확인되면, 저장부(110)에 저장된 디스플레이 장치(200)의 사용자의 구매 이력 정보를 업데이트할 수 있다.

상품 결재와 관련된 영상이란, 디스플레이 장치(200)를 통해 사용자가 상품을 구매하는 의사를 나타내는 조작을 입력한 경우(예컨대, '주문' 버튼을 선택한 경우)에 표시되는 영상을 의미한다. 상품 결재와 관련된 영상은 예컨대 결재 과정에서 표시되는 영상(ex. 배송지, 구매 상품의 개수 등의 입력을 위한 UI가 포함된 영상, 결재 수단을 선택하기 위한 UI가 포함된 영상 등), 결재 완료시 표시되는 영상 등일 수 있다.

구매 이력 정보를 업데이트하는 것이란 기존 구매 이력 정보에 새로운 구매 관련 정보를 추가하거나, 기존 구매 이력 정보 중 일부 또는 전부를 새로운 구매 관련 정보로 대체하는 것을 의미할 수 있다. 또한, 디스플레이 장치(200)에 대응하는 구매 이력 정보를 업데이트하는 것에는 디스플레이 장치(200)에 대응하는 구매 이력 정보가 없는 상황에서 새롭게 구매 이력 정보를 생성하여 저장하는 것도 포함할 수 있다.

도 3은 본 개시의 일 실시 예에 따른 전자 장치(100)의 구매 이력 정보 업데이트를 설명하기 위한 도면이다.

디스플레이 장치(200)에서는 표시되고 있는 영상에 대한 특징 정보를 기 설정된 주기로 또는 특정 이벤트 발생시 전자 장치(100)로 전송할 수 있다.

도 3에 도시된 것처럼 디스플레이 장치(200)를 통해 상품 구매가 완료되어, 구매 완료를 알리는 창이 포함된 영상(30) 표시된 상태이고, 디스플레이 장치(200)는 현재 표시된 영상(30)에 대한 특징 정보를 전자 장치(100)로 전송한다.

여기서 특징 정보는, 디스플레이 장치(200)에서 표시된 영상을 식별할 수 있는 정보이다. 예컨대, 특징 정보는 디스플레이 장치(200)에서 표시되는 영상을 캡쳐하여 생성된 캡쳐 이미지, 상기 영상에 대응하는 핑거 프린트에 대한 정보, 상기 영상에 포함된 텍스트에 대한 정보 및 상기 영상에 포함된 로고에 대한 정보, 상기 영상의 메타데이터, 상기 영상에 지정된 ID 코드, 상기 영상에 포함된 UI에 대한 정보 등 중 적어도 하나를 포함할 수 있다.

프로세서(130)는 디스플레이 장치(200)로부터 수신된 특징 정보에 기초하여 디스플레이 장치(200)에서 표시되는 영상(30)이 상품 결재와 관련된 것인지 확인할 수 있다.

예컨대, 수신된 특징 정보가 영상(30)에 포함된 텍스트에 대한 정보를 포함하고 있는 경우, 프로세서(130)는 키워드 인식을 통해 영상(30)이 결재에 관련된 것인지 확인할 수 있다. 구체적으로, 프로세서(130)는 "$", "구매", "완료" "지금" "다운로드" 등과 같은 키워드를 인식하여 영상(30)이 결재에 관련된 것으로 확인할 수 있다.

또 다른 예로, 수신된 특징 정보가 영상(30)에 포함된 UI에 대한 정보이고, 그 정보가 결재 완료 UI임을 나타내는 경우, 프로세서(130)는 특징 정보에 기초하여 현재 디스플레이 장치(200)에서 표시되는 영상(30)이 결재에 관련된 것으로 확인할 수 있다.

또 다른 예로, 수신된 특징 정보가 영상(30)에 포함된 로고 또는 상표에 대한 정보 및 영상(30)에 포함된 텍스트에 대한 정보를 포함하고 있는 경우, 프로세서(130)는 상표 "Apps"와 텍스트 "구매"를 통해 현재 디스플레이 장치(200)에서 표시되는 영상(30)이 애플리케이션 결재에 관련된 것으로 확인할 수 있다.

예컨대, 수신된 특징 정보가 영상(30)을 캡쳐하여 생성된 캡쳐 이미지인 경우, 프로세서(130)는 캡쳐 이미지를 딥 러닝(deep learning) 기술, 예컨대 합성곱 신경망(CNN; Convolutional Neural Network) 또는 순환 신경망(RNN; Recurrent Neural Network) 등의 기술로 식별하여 영상(30)이 결재에 관련된 것으로 확인할 수 있다.

상술한 예들 이외에도, 다양한 방식으로 프로세서(130)는 영상(30)이 상품 결재와 관련된 것인지 확인할 수 있다.

그리고 프로세서(130)는 영상(30)에 대한 특징 정보로부터 상품 정보를 획득하고, 획득된 상품 정보에 기초하여 상기 디스플레이 장치(200)의 사용자의 구매 이력 정보를 업데이트할 수 있다.

예컨대, 수신된 특징 정보가 영상(30)에 포함된 텍스트에 대한 정보를 포함하고 있는 경우, 프로세서(130)는 키워드 인식을 통해 상품 정보를 획득할 수 있다. 구체적으로, 프로세서(130)는 "Star 2"라는 키워드를 인식하여 영상(30)에서의 구매 대상 상품이 "Star 2"라는 게임 애플리케이션임을 확인할 수 있다.

또 다른 예로, 수신된 특징 정보가 영상(30)에 대응하는 비디오 핑거프린트에 대한 정보를 포함하는 경우, 프로세서(130)는 기 저장된 핑거프린트와 수신된 핑거프린트 간의 비교를 통해 상품 정보를 획득할 수 있다. 구체적으로, 프로세서(130)는 기 저장된 핑거프린트와 수신된 핑거프린트 간의 비교를 통해 영상(30)에 Star 2라는 게임 애플리케이션에 대응하는 썸네일 이미지(31)가 포함되어 있음을 확인함으로써 구매 대상 상품이 "Star 2"라는 게임 애플리케이션임을 확인할 수 있다.

또 다른 예로, 수신된 특징 정보가 영상(30)을 캡쳐하여 생성된 캡쳐 이미지인 경우, 프로세서(130)는 캡쳐 이미지를 딥 러닝(deep learning) 기술로 캡쳐된 이미지를 분석하여 구매 대상 상품이 "Star 2"라는 게임 애플리케이션임을 확인할 수 있다.

상술한 예들 이외에도, 다양한 방식으로 프로세서(130)는 디스플레이 장치(200)로부터 수신된 특징 정보로부터 상품 정보를 획득할 수 있다.

그리고 프로세서(130)는 획득된 상품 정보에 기초하여 디스플레이 장치(200)의 사용자의 구매 이력 정보를 업데이트할 수 있다. 예컨대, 프로세서(130)는 "Star2"라는 게임 애플리케이션에 대한 정보를 디스플레이 장치(200)의 사용자의 구매 이력 정보에 반영할 수 있다.

한편, 도 3에선 결재가 완료되었음을 나타낸 영상이 표시된 경우에 전자 장치(100)가 구매 이력 정보를 업데이트하는 것으로 설명하였으나, 반드시 결재가 완료될 필요는 없고, 결재를 위한 과정의 영상(예컨대, 결재 수단을 선택하기 위한 UI를 포함한 영상, 배송지를 입력하기 위한 UI를 포함한 영상)이 표시된 경우라도 전자 장치(100)는 구매 이력 정보를 업데이트할 수 있다. 이는, 디스플레이 장치(200)의 사용자가 최종적으로는 상품을 구매하지 않았더라도, 결재 수단을 선택하기 위한 UI를 포함한 영상 또는 배송지를 입력하기 위한 UI를 포함한 영상 등이 디스플레이 장치(200)에서 표시되었다는 것은 어느 정도는 사용자가 그 상품에 관심이 있다는 것을 뜻하기 때문이다. 따라서, 디스플레이 장치(200)의 사용자의 구매 이력 정보는 디스플레이 장치(200)의 사용자가 구매를 최종적으로 완료한 경우뿐만 아니라, 구매를 시도한 경우까지도 반영될 수 있다.

한편, 도 3에선 하나의 영상을 통해 그 영상이 상품 결재와 관련된 것인지, 구매 대상 상품은 어떤 것인지 확인할 수 있는 경우에 대해 설명하였으나, 하나의 영상만을 통해 이들을 모두 확인할 수 없는 경우엔 프로세서(130)는 복수의 영상에서 각각 수신되는 특징 정보에 기초하여 이들을 확인할 수 있다. 이에 대해선 이하 도 4를 참고하여 설명하도록 한다.

도 4는 본 개시의 또 다른 실시 예에 따른 전자 장치(100)의 구매 이력 정보 업데이트를 설명하기 위한 도면이다.

전자 장치(100)는 디스플레이 장치(200)로부터 주기적으로 특징 정보를 수신함으로써 실시간으로 디스플레이 장치(200)에서 표시되고 있는 영상을 파악할 수 있다. 도 4를 참고하면, 디스플레이 장치(200)는 쇼핑 영상(40)에 대한 제1 특징 정보를 전자 장치(100)로 전송하고, 주문 버튼(41)이 선택되었을 때 표시되는 결재 수단 선택을 위한 영상(45)에 대한 제2 특징 정보를 전자 장치(100)로 전송할 수 있다.

프로세서(130)는 제2 특징 정보에 기초하여 결재 수단 선택을 위한 영상(45)이 결재와 관련된 영상임을 확인한 경우에 있어서, 제2 특징 정보로부터 상품 정보가 획득되지 않으면, 결재 수단 선택을 위한 영상(45) 이전에 표시된 적어도 하나의 영상에 대응하는 적어도 하나의 특징 정보로부터 상품 정보를 획득할 수 있다. 즉, 도 4의 경우엔 프로세서(130)는 쇼핑 영상(40)에 대한 제1 특징 정보로부터 상품 정보를 획득할 수 있다.

예컨대, 제1 특징 정보는 "전기 밥솥", "ABC 전자", "$60" 등과 같은 텍스트 정보를 포함하고 있고, 프로세서(130)는 키워드 인식 기술 등을 통해 제1 특징 정보로부터 상품 정보를 획득할 수 있다. 또 다른 예로, 제1 특징 정보는 쇼핑 영상(40)에 대응하는 핑거프린트에 대한 정보를 포함하고 있고, 프로세서(130)는 수신된 핑거 프린트와 기 저장된 핑거 프린트를 비교함으로써 쇼핑 영상(40)이 SS Mall의 홈쇼핑 채널에서 방송되고 있는 ABC 전자의 전기 밥솥 홈쇼핑 영상임을 판단할 수 있다. 또한 프로세서(130)는 딥 러닝(deep learning) 기술을 이용하여 쇼핑 영상(40)에 포함된 구매 대상 상품에 대한 정보를 획득할 수 있다.

그리고 프로세서(130)는 제1 특징 정보를 통해 획득된 상품 정보에 기초하여 디스플레이 장치(200)을 통하여 사용자의 구매 이력 정보를 업데이트할 수 있다.

한편, 이상에서는 디스플레이 장치(200)에서 표시되는 영상이 상품 결재에 관련된 것인지 확인을 위해 영상 자체의 정보만이 이용되는 것으로 설명하였으나, 또 다른 실시 예에 따르면 디스플레이 장치(200)로 입력되는 사용자 명령도 이용될 수 있다. 이에 대해선 이하 도 5를 참고하여 설명하도록 한다.

도 5는 본 개시의 또 다른 실시 예에 따른 전자 장치(100)의 구매 이력 정보 업데이트를 설명하기 위한 도면이다.

도 5를 참고하면, 디스플레이 장치(200)는 쇼핑 영상(50)을 표시하고 있다.

쇼핑 영상(50)이 디스플레이 장치(200)에서 표시된 상태에서 리모컨의 제1 컬러 버튼(31)이 선택되면 결재 수단 선택을 위한 영상(55)이 표시되고, 제2 컬러 버튼(32)이 선택되면 상품에 대한 상세 정보를 포함한 영상이 표시된다.

디스플레이 장치(200)는 쇼핑 영상(50)에 대한 제1 특징 정보를 전자 장치(100)로 전송한다.

그리고 프로세서(130)는 수신된 제1 특징 정보에 대응하는 컨텐츠 정보를 디스플레이 장치(200)로 전송한다. 여기서 컨텐츠 정보는, 디스플레이 장치(200)에서 현재 표시 중인 영상을 디스플레이 장치(200) 측에서 식별할 수 있게 하는 정보이다.

컨텐츠 정보에 기초하여 현재 표시중인 영상이 쇼핑 영상(50)임을 식별한 디스플레이 장치(200)는 쇼핑 영상(50)이 표시된 상태에서 리모컨(300)으로부터 수신되는 리모컨 신호가 어떤 영상을 표시하게 하는 신호인지를 판단할 수 있다.

따라서, 디스플레이 장치(200)에서 쇼핑 영상(50)이 표시된 상태에서 리모컨(300)으로부터 제1 컬러 버튼(31)에 대응하는 리모컨 신호가 수신되면, 디스플레이 장치(200)는 결재 수단 선택을 위한 영상(55)을 표시하고, 결재 수단 선택을 위한 영상(55)이 표시되었음을 알리는 정보를 포함한 제2 특징 정보를 전자 장치(100)로 전송한다.

프로세서(130)는 수신된 제2 특징 정보에 기초하여 현재 디스플레이 장치(200)에서 표시되고 있는 영상이 상품 결재와 관련된 영상인 것으로 바로 확인할 수 있다. 다시 말해, 상술한 딥 러닝(deep learning) 기술, 키워드 인식, 핑거프린트 비교 등과 같은 동작이 수행되지 않아도 프로세서(130)는 수신된 제2 특징 정보에 기초하여 현재 디스플레이 장치(200)에서 표시되고 있는 영상이 상품 결재와 관련된 영상인 것으로 바로 확인할 수 있다.

그리고 프로세서(130)는 제2 특징 정보로부터 상품 정보가 획득되지 않으면, 과거에 수신한 제1 특징 정보로부터 상품 정보를 획득할 수 있고 획득된 상품 정보에 기초하여 디스플레이 장치(200)에 대응하는 구매 이력 정보를 업데이트할 수 있다. 본 과정에 대해선 도 4를 통해 설명하였으므로 반복 설명은 생략한다.

한편, 상술한 실시 예에선 리모컨(300)을 통해 주문 명령이 입력되었음을 판단하는 동작이 디스플레이 장치(200)에서 수행되는 것으로 설명하였으나, 이러한　동작은 전자 장치(100) 측에서 수행되는 것도 가능하다. 이 경우, 디스플레이 장치(200)가 리모컨(300)으로부터 수신한 리모컨 신호에 대한 정보를 전자 장치(100)로 전송하는 과정이 수행될 수 있다.

상술한 실시 예에 따르면, 디스플레이 장치(200)로 입력되는 사용자 명령을 이용함으로써 좀 더 용이하게 디스플레이 장치(200)에서 표시되는 영상이 상품 결재에 관련된 영상인지를 판단할 수 있게 된다. 한편, 상술한 실시 예에선 사용자 명령이 리모컨을 통해 입력되는 것으로 설명하였으나, 이에 한정되는 것은 아니고, 사용자 음성을 통한 명령, 사용자 모션을 통한 명령 등 다양한 경우에 있어서도 본 실시 예가 적용될 수 있다.

도 6은 디스플레이 장치(200)에서 표시되는 영상에 대응하는 특징 정보 생성에 관한 본 개시의 일 실시 예를 설명하기 위한 도면이다.

본 개시의 일 실시 예에 따르면, 디스플레이 장치(200)는 OCR(optical character reader)을 사용하여 영상으로부터 텍스트를 추출하고, 추출된 텍스트를 특징 정보에 포함시켜 전자 장치(100)로 전송할 수 있다. 구체적으로 디스플레이 장치(200)는 영상 내에서 OCR을 수행할 영역을 결정하고, 결정된 영역 내에서 OCR을 수행하여 텍스트를 추출할 수 있다.

디스플레이 장치(200)에는 OCR 수행을 위한 다양한 템플릿이 저장되어 있을 수 있고, 현재 표시하고 있는 영상에 맞는 템플릿이 선택될 수 있다. 도 6은 템플릿의 일 예를 설명하기 위한 것으로서, 도 3 내지 도 5에서 도시된 쇼핑 영상에 적용될 수 있는 템플릿이다.

도 6을 참고하면, 템플릿(600)은 복수의 영역으로 구획되며, 구체적으로, 수직 여백 영역(61), 상단 여백 영역(62), 매체 브랜드 표시 영역(63), 좌측 상단 여백 영역(64), 상품 명칭 표시 영역(65), 상품 브랜드 표시 영역(66), 상품 이미지 표시 영역(67), 상품 요약 표시 영역(68), 가격 정보 표시 영역(69), 버튼 표시 영역(70), 수평 여백 영역(71)으로 구획된다.

디스플레이 장치(200)는 이러한 템플릿을 이용하여, 예컨대, 상품 명칭 표시 영역(65)에 OCR을 수행함으로써 텍스트를 추출할 수 있고, 추출된 텍스트를 특징 정보에 포함시켜 전자 장치(100)로 전송할 수 있다. 전자 장치(100)는 수신한 특징 정보에 기초하여 상품 정보를 획득할 수 있다.

또 다른 실시 예에 따르면, 디스플레이 장치(200)는 디스플레이 장치(200)에서 표시되는 영상 전 영역 대신 일부 영역만을 캡쳐하여 생성된 캡쳐 이미지를 특징 정보로서 전자 장치(100)로 전송할 수 있다. 예컨대, 디스플레이 장치(200)는 도 6에 도시된 템플릿을 이용하여 캡쳐 영역을 결정할 수 있고, 예컨대, 상품 명칭 표시 영역(65)을 캡쳐하여 생성된 캡쳐 이미지를 특징정보로서 전자 장치(100)로 전송할 수 있다. 전자 장치(100)는 수신한 캡쳐 이미지에 기초하여 상품 정보를 획득할 수 있다.

프로세서(130)는 획득한 상품 정보에 기초하여 디스플레이 장치(200)의 사용자의 구매 이력 정보를 업데이트하고, 업데이트된 구매 이력 정보에 대응하는 광고 정보를 디스플레이 장치(200)로 전송하도록 통신부(110)를 제어할 수 있다.

구매 이력 정보는 홈쇼핑 구매 이력 정보, 애플리케이션 구매 이력 정보, 게임 아이템 구매 이력 정보, VOD(Video On Demand) 구매 이력 정보, 유료 TV(pay television) 이력 정보 중 적어도 2 이상을 포함할 수 있고, 프로세서(130)는 구매 이력 정보에 포함된 홈쇼핑 구매 이력 정보, 애플리케이션 구매 이력 정보, 게임 아이템 구매 이력 정보, VOD(Video On Demand) 구매 이력 정보, 유료 TV(pay television) 이력 정보 중 적어도 2 이상에 기초하여 결정된 광고 정보를 디스플레이 장치(200)로 전송하도록 통신부(110)를 제어할 수 있다.

한편, 프로세서(130)는 구매 이력 정보뿐만 아니라 시청 이력 정보도 함께 고려하여 광고 정보를 결정할 수 있다. 시청 이력 정보는, 디스플레이 장치(200)로부터 수신된 영상에 대응하는 특징 정보에 기초하여 생성될 수 있다.

일 예로 프로세서(130)는 디스플레이 장치(200)로부터 전송된 특징 정보에 포함된 캡쳐 이미지, 채널 번호, 방송사 로고, 컨텐츠명, 핑거프린트 등 중 적어도 하나에 기초하여 디스플레이 장치(200)에서 시청되고 있는 영상을 인식할 수 있다.

그리고 프로세서(130)는 인식 결과를 바탕으로 시청 이력 정보를 생성 또는 기 저장된 시청 이력 정보를 업데이트할 수 있다.

시청 이력 정보와 함께 구매 이력 정보에 기초하여 결정된 광고 정보는 사용자의 기호를 좀 더 다면적으로 반영할 수 있게 된다.

도 7은 본 개시의 일 실시 예에 따른 전자 장치(100)에서의 데이터 처리 흐름을 도시한 도면이다.

도 7을 참고하면, 전자 장치(100)는 디스플레이 장치(200)에서 표시되는 영상에 포함된 내용을 인식하여 저장하는 화면 인식부(710), 화면 인식부(710)에서 인식한 결과를 해석하여 데이터를 저장하는 데이터 저장부(720) 및 데이터 베이스에 저장된 데이터를 분석하여 광고 정보를 제공하는 분석 모듈(740)을 포함한다.

구체적으로 화면 인식부(710)는 컨텐츠 인식 모듈(711) 및 화면 UI 인식 모듈(712)을 포함한다. 컨텐츠 인식 모듈(711)에선 캡쳐 이미지, 핑거 프린트, OCR을 통해 추출된 텍스트 등에 기초하여 디스플레이 장치(200)에서 현재 표시되고 있는 컨텐츠를 인식한다. 그리고 컨텐츠 인식 모듈(711)은 컨텐츠의 제목, 채널 번호, 컨텐츠 식별 ID 등을 알아내어 시청 이력 저장 모듈(721)에 전송한다.

그리고 화면 UI 인식 모듈(712)은 특징 정보에 기초하여 디스플레이 장치(200)에서 표시되고 있는 UI를 인식할 수 있다. 화면 UI 인식 모듈(721)은 UI를 인식하여 상품명, 상품 제조사, 상품 가격, 결재 수단, 상품 브랜드 등을 알아내어 구매 이력 저장 모듈(722)에 전송한다.

데이터 저장부(720)는 시청 이력 저장 모듈(721)과 구매 이력 저장 모듈(722)을 포함한다. 시청 이력 저장 모듈(721)은 시청 이력 데이터베이스(731)에 시청 이력을 저장한다. 이 경우, 시청 이력 저장 모듈(721)은 컨텐츠의 메타 데이터를 수집하여 농축(enriching)을 수행한다. 메타데이터의 예시 내용은 아래의 표 1과 같다.

항목	값
채널번호-major	11
채널번호-minor	1
채널이름	The Sportman Channel
채널번호	308
채널타입	ATSC
상영시간	30
종료시간	2016-08-06 18:00
에피소드번호	11
에피소드이름
컨텐츠장르	Outdoors
프로그램ID	ba000000000019228668
디지털여부	Analog
재방송여부	FALSE
종료시간	2017-03-06T18:00:00Z
시작시간	2017-03-06T17:30:00Z
시즌번호	1
등급	15+
프로그램이름	Dead Puppy Walking
채널장르	Sports
등장인물	Andrew Rincoln, John Puntal

구매 이력 저장 모듈(722)은 구매 이력을 데이터 베이스에 저장한다. 이 경우, 구매 이력 저장 모듈(722)은 상품 카테고리에 따라 구매 이력을 분류하여 저장할 수 있다. 구체적으로, 구매 이력 데이터 베이스는 홈쇼핑 구매 이력 데이터 베이스(732), 게임(앱, 아이템) 구매 이력 데이터 베이스(733), VOD(드라마, 영화 등) 구매 이력 데이터 베이스(734), 유료 TV(paid TV 또는 pay TV) 구매 이력 데이터 베이스(735)를 포함할 수 있다.

그리고 분석 모듈(740)은 시청이력 데이터베이스(731)와 구매 이력 데이터 베이스(732, 733, 734, 735)에 저장된 데이터를 통합적으로 분석하여, 디스플레이 장치(200)의 사용자 선호에 맞는 맞춤형 광고를 결정하고, 결정된 광고 정보를 디스플레이 장치(200)로 전송할 수 있다.

구체적으로 분석 모듈(740)은 수집된 데이터들 간의 연관성을 분석하여 광고 정보를 결정할 수 있다. 이때 분석 모듈(740)은 AI(Artificial Intelligence), ML(Machine Learning), DM(Data Mining) 등의 기법을 사용할 수 있다.

예컨대, 분석 모듈(740)은 디스플레이 장치(200)의 사용자가 여자 신발 구매 이력이 있는 경우, 그에 따라 추정된 연령대 값으로 프로파일링하고, 해당 연령 및 성별이 선호하는 제품/컨텐츠 연관 구매를 유도하는 광고 정보를 디스플레이 장치(200)로 전송할 수 있다. 이러한 광고 정보는 예컨대 구매한 신발과는 다른 종류의 신발에 대한 광고 정보로서, 그 신발을 구매하면 xx 드라마(프로파일링을 통해 추정된 연령대인 20대 여성이 좋아하는 드라마)의 VOD 시청권을 무료 증정해준다는 내용을 포함할 수 있다.

또 다른 예로, 분석 모듈(740)이 디스플레이 장치(200)의 사용자가 게임 아이템을 자주 구매한 이력이 있는 것으로 분석한 경우, 해당 게임 주인공이 나오는 컨텐츠 구매를 유도하는 광고 정보가 제공될 수 있다. 예컨대, 디스플레이 장치(200)의 사용자가 라스트 판타지 게임의 아이템을 구매한 경우, 전자 장치(100)는 도 8에 도시한 것과 같은 광고 UI(80)가 표시되도록 디스플레이 장치(200)에 광고 정보를 전송할 수 있다.

또 다른 예로, 분석 모듈(740)이 디스플레이 장치(200)의 사용자가 특정 연예인이 출연한 방송만을 골라 시청한 이력이 있는 것으로 분석한 경우, 해당 연예인이 선전하는 스마트폰이 홈쇼핑 방송 중일 때 디스플레이 장치(200)에서 홈쇼핑 방송 추천 알림이 표시되도록 디스플레이 장치(200)로 광고 정보를 전송할 수 있다.

도 9는 본 개시의 일 실시 예에 따른 전자 장치의 제어방법을 도시한 흐름도이다. 도 9에 도시된 흐름도는 도 1 내지 도 8을 참고하여 설명한 전자 장치(100)에서 처리되는 동작들로 구성될 수 있다. 따라서, 이하에서 생략된 내용이라 하더라도 도 1 내지 도 8을 참조하여 기술된 내용은 도 9에 도시된 흐름도에도 적용될 수 있다.

도 9를 참고하면 먼저, 전자 장치는 디스플레이 장치에서 표시되는 제1 영상에 대응되는 특징 정보를 수신한다(S910).

여기서 특징 정보는, 상기 영상을 캡쳐하여 생성된 캡쳐 이미지, 상기 영상에 대응하는 핑거 프린트에 대한 정보, 상기 영상에 포함된 텍스트에 대한 정보 및 상기 영상에 포함된 로고에 대한 정보 중 적어도 하나를 포함할 수 있다.

그리고 전자 장치는 상기 수신된 특징 정보에 기초하여 디스플레이 장치에서 표시되고 있는 영상이 상품 결재와 관련된 것인지를 확인하고, 상기 영상이 상품 결재와 관련된 것이면 기 저장된 구매 이력 정보를 업데이트한다(S920).

여기서 전자 장치에 저장된 구매 이력 정보는, 디스플레이 장치의 사용자의 구매 이력을 반영하고 있는 정보로서, 예컨대, 디스플레이 장치를 통해 이루어진 구매에 대한 이력 정보, 디스플레이 장치와는 다른 상기 사용자의 타 단말 장치(예컨대, PC, 스마트폰 등)를 통해 이루어진 구매에 대한 이력 정보를 포함할 수 있다. 전자 장치는 이와 같은 정보를 디스플레이 장치 또는 사용자의 타 단말을 통한 상품 구매 서비스를 제공하는 서비스 제공자로부터 제공받을 수 있으며, 또는 상기 장치들로부터 직접 제공받을 수도 있다. 또 다른 예로, 전자 장치에 저장된 구매 이력 정보는 사용자의 오프라인에서의 구매 활동에 대한 정보를 포함할 수 있으며, 이와 같은 정보는 신용 카드 회사 등으로부터 제공받은 것일 수 있다.

예컨대, 전자 장치는 수신된 특징 정보에 포함된 방송사 로고가 홈쇼핑 방송사 로고이고, 수신된 특징 정보에 "결재 수단 선택", "구매 완료" 등의 텍스트가 포함되어 있으면, 디스플레이 장치에서 현재 표시되고 있는 영상이 상품 결재와 관련된 것으로 판단할 수 있다.

그리고 전자 장치는 수신된 특징 정보로부터 상품 정보가 획득되면, 상기 획득된 상품 정보에 기초하여 상기 구매 이력 정보를 업데이트할 수 있다. 또는, 전자 장치는 수신된 특징 정보로부터 상품 정보가 획득되지 않으면, 과거에 수신한 특징 정보, 즉 현재 표시 중인 상품 결재와 관련된 영상 이전에 표시된 영상에 대응하는 특징 정보로부터 상품 정보를 획득할 수 있다. 이는, 대부분 상품 결재 관련 영상이 표시되기 전에 표시된 영상에선 구매 대상 상품에 대한 정보가 포함되어 있기 때문이다.

그리고 전자 장치는 획득된 상품 정보에 기초하여 기 저장된 구매 이력 정보를 업데이트할 수 있다.

그리고 전자 장치는 업데이트된 구매 이력 정보에 기초하여 결정된 광고 정보를 디스플레이 장치로 전송한다(S930).

한편, 전자 장치는 디스플레이 장치로부터 수신된 특징 정보에 기초하여 디스플레이 장치에 대응되는 기 저장된 시청 이력 정보를 업데이트할 수 있다. 그리고 전자 장치는 상기 업데이트된 시청 이력 정보와 상기 업데이트된 구매 이력 정보에 기초하여 결정된 광고 정보를 디스플레이 장치로 전송할 수 있다.

도 10은 본 개시의 일 실시 예에 따른 디스플레이 장치(200)의 구성을 설명하기 위한 도면이다.

디스플레이 장치(200)는 예를 들어 아날로그 TV, 디지털 TV, 3D-TV, 스마트 TV, LED TV, OLED TV, 플라즈마 TV, 모니터, 고정 곡률(curvature)인 화면을 가지는 커브드(curved) TV, 고정 곡률인 화면을 가지는 플렉시블(flexible) TV, 고정 곡률인 화면을 가지는 벤디드(bended) TV, 및/또는 수신되는 사용자 입력에 의해 현재 화면의 곡률을 변경 가능한 곡률 가변형 TV 등으로 구현될 수 있으나, 이에 한정되지 않는다.

디스플레이 장치(200)는 디스플레이부(210), 통신부(220), 프로세서(230), 저장부(240), 튜너(250), 마이크(260), 카메라(275), 입/출력부(280), 스피커(290), 리모컨 신호 수신부(295)를 포함한다. 디스플레이 장치(200)는 디스플레이 장치(200)의 내부 상태, 또는 외부 상태를 검출하는 센서(예를 들어, 조도 센서, 온도 센서 등, 도시되지 아니함)를 포함할 수 있다.

디스플레이부(210)는 영상을 표시하기 위한 구성으로서, 예컨대, LCD(Liquid Crystal Display)로 구현될 수 있으며, 경우에 따라 CRT(cathode-ray tube), PDP(plasma display panel), OLED(organic light emitting diodes), TOLED(transparent OLED) 등으로 구현될 수 있다. 또한, 디스플레이부(210)는 사용자의 터치 조작을 감지할 수 있는 터치스크린 형태로 구현될 수도 있다.

디스플레이부(210)는 전자 장치(100)로부터 수신한 광고 정보를 표시할 수 있다.

통신부(220)는 다양한 유형의 통신방식에 따라 다양한 유형의 외부 기기와 통신을 수행하는 구성이다. 통신부(220)는 와이파이칩(221), 블루투스 칩(222), NFC칩(223), 무선 통신 칩(224) 등과 같은 다양한 통신 칩을 포함한다. 와이파이칩(221), 블루투스 칩(222), NFC칩(223)은 각각 WiFi 방식, 블루투스 방식, NFC 방식으로 통신을 수행한다. 무선 통신 칩(224)은 IEEE, 지그비, 3G(3rd Generation), 3GPP(3rd Generation Partnership Project), LTE(Long Term Evoloution) 등과 같은 다양한 통신 규격에 따라 통신을 수행하는 칩을 의미한다.

통신부(220)는 전자 장치(100)와 통신할 수 있다. 구체적으로, 통신부(220)를 통해 디스플레이부(210)에서 표시되는 영상에 대응하는 특징 정보가 전자 장치(100)로 전송될 수 있으며, 통신부(220)를 통해 전자 장치(100)로부터 광고 정보를 수신할 수 있다.

프로세서(230)는 디스플레이 장치(200)의 전반적인 동작 및 디스플레이 장치(200)의 내부 구성요소들 사이의 신호 흐름을 제어하고, 데이터를 처리하는 기능을 수행한다.

프로세서(230)는 RAM(231), ROM(232), CPU(233), GPU(234) 및 버스(235)를 포함한다.　 RAM(231), ROM(232), CPU(233), GPU(234) 등은 버스(235)를 통해 서로 연결될 수 있다. 프로세서(230)는 SoC(System On Chip)로 구현될 수 있다.

CPU(233)는 저장부(240)에 액세스하여, 저장부(240)에 저장된 O/S를 이용하여 부팅을 수행한다. 그리고 저장부(240)에 저장된 각종 프로그램, 컨텐츠, 데이터 등을 이용하여 다양한 동작을 수행한다.

ROM(232)에는 시스템 부팅을 위한 명령어 세트 등이 저장된다. 턴 온 명령이 입력되어 전원이 공급되면, CPU(233)는 ROM(232)에 저장된 명령어에 따라 저장부(240)에 저장된 O/S를 RAM(231)에 복사하고, O/S를 실행시켜 시스템을 부팅시킨다. 부팅이 완료되면, CPU(233)는 저장부(240)에 저장된 각종 애플리케이션 프로그램을 RAM(231)에 복사하고, RAM(231)에 복사된 애플리케이션 프로그램을 실행시켜 각종 동작을 수행한다.

특히, 프로세서(230)는 디스플레이부(210)를 통해 표시되는 영상에 대응하는 특징 정보를 생성할 수 있다.

구체적으로, 프로세서(230)는 튜너(250) 또는 입출력부(280)에서 받은 멀티미디어 컨텐츠 신호에서 비디오 신호를 캡쳐하여 생성된 캡쳐 이미지를 특징 정보로서 전자 장치(110)로 전송할 수 있다.

또한, 프로세서(230)는 튜너(250) 또는 입출력부(280)에서 받은 멀티미디어 컨텐츠 신호에서 오디오 신호 또는 비디오 신호를 캡쳐하여 핑거프린트를 추출할 수 있다. 추출된 핑거 프린트는 영상에 대응되는 특징 정보로서 전자 장치(100)로 전송될 수 있다.

또한, 프로세서(230)는 OCR을 수행하여 디스플레이부(210)에 표시되는 영상으로부터 다양한 정보를 추출할 수 있고, 추출된 정보는 특징 정보로서 전자 장치(100)로 전송될 수 있다.

구체적으로, 프로세서(230)는 OCR을 수행하여 숫자나 문자 등을 인식하여, 상품 구매 관련 영상에서 상품명, 상품 가격, 상품 제조사, 상품 브랜드, 방송사명, 채널 번호, 채널 콜사인(callsign), 채널명, 프로그램명에 대한 정보 등을 추출할 수 있다. 이 경우, 프로세서(230)는 저장부(240)에 저장된 OCR을 위한 템플릿에 기초하여 OCR을 수행할 영역을 결정하고, 결정된 영역에 대해서 OCR을 수행할 수 있다.

또한 프로세서(230)는 영상에서 로고를 추출하고, 추출된 로고를 특징 정보로서 전자 장치(100)로 전송할 수 있다. 구체적으로 프로세서(230)는 저장부(240)에 저장된 로고 인식을 위한 템플릿에 기초하여 영상에서 로고 인식을 수행할 영역을 결정할 수 있다. 그리고 프로세서(230)는 결정된 영역에 포함된 이미지를 저장부(240)에 기 저장된 로고 이미지와 비교하는 작업을 수행하여, 영상에 포함된 로고를 검출할 수 있다. 그리고 프로세서(230)는 검출된 로고에 대한 정보를 영상에 대응하는 특징 정보로서 전자 장치(100)에 전송할 수 있다.

프로세서(230)는 전자 장치(100)로부터 수신한 광고 정보를 표시하도록 디스플레이부(210)를 제어할 수 있다.

저장부(240)는 비휘발성 메모리, 휘발성 메모리, 플래시메모리(flash-memory), 하드디스크 드라이브(HDD) 또는 솔리드 스테이트 드라이브(SSD) 등으로 구현될 수 있다. 저장부(240)는 프로세서(230)에 의해 액세스 되며, 프로세서(230)에 의한 데이터의 독취/기록/수정/삭제/갱신 등이 수행될 수 있다. 한편, 저장부(240)는 전자 장치(200) 내의 저장 매체뿐만 아니라, 외부 저장 매체, 예를 들어, USB 또는 네트워크를 통한 웹 전자 장치(Web server) 등으로 구현될 수 있다. 저장부(240)에는 O/S나 각종 애플리케이션과 같은 프로그램과, 사용자 설정 데이터, 애플리케이션 수행 과정에서 생성된 데이터, 멀티미디어 컨텐츠 데이터 등과 같은 다양한 데이터가 저장될 수 있다.

특히, 저장부(240)에는 캡쳐 이미지 생성, OCR 수행 또는 로고 인식 등을 위한 템플릿이 저장되어 있을 수 있고, 로고 인식시 비교 대상이 될 다양한 로고 이미지가 저장되어 있을 수 있다.

튜너(250)는 유선 또는 무선으로 수신되는 방송 신호를 증폭(amplification), 혼합(mixing), 공진(resonance) 등을 통하여 많은 전파 성분 중에서 디스플레이 장치(200)에서 수신하고자 하는 채널의 주파수만을 튜닝(tuning)시켜 선택할 수 있다. 방송 신호는 비디오(video), 오디오(audio) 및 부가 데이터(예를 들어, EPG(Electronic Program Guide)를 포함할 수 있다.

마이크(260)는 음향을 수신할 수 있는 구성이다. 마이크(220)를 통해 수신될 수 있는 음향은 가청 주파수 대역 또는 비가청 주파수 대역의 음향일 수 있다. 디스플레이 장치(200)가 음성 인식이 가능한 장치로 구현된 경우, 마이크(260)를 통해 사용자의 음성을 입력받을 수 있고, 프로세서(230)는 입력된 음성에 대응하는 동작을 수행할 수 있다. 이 경우, 프로세서(230)는 음성 인식을 자체적으로 수행하거나, 입력된 음성을 음성 인식 전자 장치로 전송하여 음성 인식 결과를 수신할 수 있다.

예컨대, 프로세서(230)는 도 4와 같은 쇼핑 화면(40)이 디스플레이부(210)에 표시된 상태에서 "주문"이라는 사용자 음성이 마이크(260)를 통해 입력되면, 결재 수단 선택을 위한 영상(45)을 표시하도록 디스플레이부(210)를 제어할 수 있다.

카메라(275)는 비디오를 촬영할 수 있고, 촬영된 비디오는 사용자 모션 인식에 사용될 수 있다. 디스플레이 장치(200)와 일체형으로 구현되거나 또는 분리될 수 있다. 분리된 카메라는 통신부(220) 또는 입/출력부(180)를 통해 디스플레이 장치(100')와 전기적으로 연결될 수 있다.

예컨대, 프로세서(230)는 도 4와 같은 쇼핑 화면(40)이 디스플레이부(210)에 표시된 상태에서 주문 버튼을 선택하기 위한 사용자 모션이 카메라(275)를 통해 입력되면, 결재 수단 선택을 위한 영상(45)을 표시하도록 디스플레이부(210)를 제어할 수 있다.

입/출력부(280)는 외부 장치와 연결되기 위한 구성이다. 입/출력부(280)는 HDMI 입력 포트(High-Definition Multimedia Interface port, 281), 컴포넌트 입력 잭(282), PC 입력 포트(283), 및 USB 입력 잭(284) 중 적어도 하나를 포함할 수 있다.

리모컨 신호 수신부(295)는 리모컨(300)에서 출력되어 전송되는 IR 제어 신호를 광창을 통해 수신하는 구성이다. 예컨대, 도 4와 같은 쇼핑 화면(40)이 디스플레이부(210)에 표시된 상태에서 리모컨(300)에서 쇼핑 화면(40) 상에 표시된 주문 버튼을 선택하기 위한 사용자 조작에 따라 IR 제어 신호가 리모컨 신호 수신부(295)를 통해 수신되면, 프로세서(230)는 결재 수단 선택을 위한 영상(45)을 표시하도록 디스플레이부(210)를 제어할 수 있다.

한편, 리모컨 신호 수신부(295)는 입/출력부를 통해 연결된 셋톱박스와 같은 기기에 입력되는 리모컨 신호를 수신할 수도 있다. 이를 IR 스니핑(IR sniffing)이라 한다.

한편, 이상에선 전자 장치(100)에서 영상 분석이 이루어져 구매 이력 정보가 생성(또는 업데이트)되거나 시청 이력 정보가 생성(또는 업데이트)되는 것으로 설명하였으나, 전자 장치(100)의 기능은 디스플레이 장치(200)에서 이루어질 수도 있다. 이 경우, 디스플레이 장치(200)는 자체적으로 구매 이력 정보를 생성하여 외부 전자 장치로 제공할 수 있다. 그리고 디스플레이 장치(200)는 외부 전자 장치로부터 상기 구매 이력 정보에 대응하는 광고 정보를 제공받을 수 있다.

상술한 다양한 실시 예에 따르면, 유료 TV, VOD 컨텐츠 구매, 게임 애플리케이션의 아이템 구매, 홈쇼핑 채널에서의 물품 구매 등 사용자의 소비 패턴(사용자가 어떤 것에 소비를 하는지, 어떤 결재 방법을 선호하는지, 유사한 품목을 재구매 여부 등), 즉 구매 이력 정보를 생성할 수 있고, 이를 재구매를 위한 광고나 추천에 활용할 수있다. 특히, 영상 인식 기술을 이용하여 특정 기기에서의 구매 이력이 아닌, 화면에 표시되는 모든 구매 행위를 모니터링하여 분석함으로써 종합적인 구매 이력을 확인할 수 있으며, 다각적인 광고/추천 서비스에 적용함으로써 다양한 수익 모델을 구성할 수 있게 된다.

한편, 이상에서 설명된 다양한 실시 예들은 소프트웨어(software), 하드웨어(hardware) 또는 이들의 조합된 것을 이용하여 컴퓨터(computer) 또는 이와 유사한 장치로 읽을 수 있는 기록 매체 내에서 구현될 수 있다. 하드웨어적인 구현에 의하면, 본 개시에서 설명되는 실시 예들은 ASICs(Application Specific Integrated Circuits), DSPs(digital signal processors), DSPDs(digital signal processing devices), PLDs(programmable logic devices), FPGAs(field programmable gate arrays), 프로세서(processors), 제어기(controllers), 마이크로 컨트롤러(micro-controllers), 마이크로 프로세서(microprocessors), 기타 기능 수행을 위한 전기적인 유닛(unit) 중 적어도 하나를 이용하여 구현될 수 있다. 소프트웨어적인 구현에 의하면, 본 명세서에서 설명되는 절차 및 기능과 같은 실시 예들은 별도의 소프트웨어 모듈들로 구현될 수 있다. 상기 소프트웨어 모듈들 각각은 본 명세서에서 설명되는 하나 이상의 기능 및 작동을 수행할 수 있다.

한편, 본 명세서에서 설명되는 절차 및 기능을 구현하기 위한 프로그램이 비일시적 판독 가능 매체(non-transitory readable medium) 에 저장될 수 있다. 예컨대, 상술한 본 개시의 다양한 실시 예들에 따른 전자 장치의 제어방법은 비일시적 판독 가능 매체에 저장될 수 있다. 이러한 비일시적 판독 가능 매체는 다양한 장치에 탑재되어 사용될 수 있다.

비일시적 판독 가능 매체란 레지스터, 캐쉬, 메모리 등과 같이 짧은 순간 동안 데이터를 저장하는 매체가 아니라 반영구적으로 데이터를 저장하며, 기기에 의해 판독(reading)이 가능한 매체를 의미한다. 구체적으로는, 상술한 다양한 방법을 수행하기 위한 프로그램들은 CD, DVD, 하드 디스크, 블루레이 디스크, USB, 메모리카드, ROM 등과 같은 비일시적 판독 가능 매체에 저장되어 제공될 수 있다.

또한, 이상에서는 본 개시의 바람직한 실시 예에 대하여 도시하고 설명하였지만, 본 개시는 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에서 청구하는 본 개시의 요지를 벗어남이 없이 당해 개시가 속하는 기술분야에서 통상의 지식을 가진자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 개시의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.

1000: 정보제공시스템
100: 전자 장치
200: 디스플레이장치

Claims

디스플레이 장치와 통신하는 통신부;
구매 이력 정보를 저장하는 저장부; 및
상기 구매 이력 정보에 기초하여 결정된 광고 정보가 상기 디스플레이 장치에 전송되도록 상기 통신부를 제어하는 프로세서;를 포함하고,
상기 프로세서는,
상기 디스플레이 장치에서 표시되는 제1 영상에 대응되는 제1 특징 정보를 상기 통신부를 통해 수신하고, 상기 수신된 제1 특징 정보에 기초하여 상기 제1 영상이 상품 결재와 관련된 것인지를 확인하고, 상기 제1 영상이 상품 결재와 관련된 것이면 상기 구매 이력 정보를 업데이트하는 전자 장치.
제1항에 있어서,
상기 제1 특징 정보는,
상기 제1 영상을 캡쳐하여 생성된 캡쳐 이미지, 상기 제1 영상에 대응하는 핑거 프린트에 대한 정보, 상기 제1 영상에 포함된 텍스트에 대한 정보 및 상기 제1 영상에 포함된 로고에 대한 정보 중 적어도 하나를 포함하는 전자 장치.
제1항에 있어서,
상기 프로세서는,
상기 제1 영상이 상품 결재와 관련된 것이고 상기 제1 특징 정보로부터 상품 정보가 획득되면, 상기 획득된 상품 정보에 기초하여 상기 구매 이력 정보를 업데이트하는 전자 장치.
제1항에 있어서,
상기 통신부는,
상기 제1 영상 이전에 표시된 적어도 하나의 제2 영상에 대응되는 적어도 하나의 제2 특징 정보를 수신하며,
상기 프로세서는,
상기 제1 영상이 상품 결재와 관련된 것이고 상기 제1 특징 정보로부터 상품 정보가 미획득되면, 상기 수신된 적어도 하나의 제2 특징 정보로부터 상품 정보를 획득하고, 상기 획득된 상품 정보에 기초하여 구매 이력 정보를 업데이트하는 전자 장치.
제1항에 있어서,
상기 저장부는 상기 디스플레이 장치에 대응되는 시청 이력 정보를 저장하며,
상기 프로세서는,
상기 수신된 제1 특징 정보에 기초하여 상기 시청 이력 정보를 업데이트하고, 상기 업데이트된 시청 이력 정보와 상기 업데이트된 구매 이력 정보에 기초하여 결정된 광고 정보를 상기 디스플레이 장치로 전송하도록 상기 통신부를 제어하는 전자 장치.
제1항에 있어서,
상기 구매 이력 정보는,
상품명, 상품 제조사, 상품의 카테고리, 상품 가격, 결재 수단 중 적어도 하나에 대한 정보를 포함하는 전자 장치.
제1항에 있어서,
상기 저장부는,
복수의 디스플레이 장치에 각각 대응하는 복수의 서로 다른 구매 이력 정보를 저장하며,
상기 프로세서는,
상기 복수의 서로 다른 구매 이력 정보에 기초하여 서로 다른 복수의 광고 정보를 상기 통신부를 통해 상기 복수의 디스플레이 장치 각각에 전송하는 전자 장치.
제1항에 있어서,
상기 구매 이력 정보는,
홈쇼핑 구매 이력 정보, 애플리케이션 구매 이력 정보, 게임 아이템 구매 이력 정보, VOD(Video On Demand) 구매 이력 정보, 유료 TV(pay television) 이력 정보 중 적어도 2 이상을 포함하는 전자 장치.
제8항에 있어서,
상기 프로세서는,
상기 구매 이력 정보에 포함된 홈쇼핑 구매 이력 정보, 애플리케이션 구매 이력 정보, 게임 아이템 구매 이력 정보, VOD 구매 이력 정보, 유료 TV 구매 이력 정보 중 적어도 2 이상의 정보에 기초하여 광고 정보를 결정하고, 결정된 광고 정보를 상기 디스플레이 장치로 전송하도록 상기 통신부를 제어하는 전자 장치.
디스플레이 장치에서 표시되는 제1 영상에 대응되는 제1 특징 정보를 수신하는 단계;
상기 수신된 제1 특징 정보에 기초하여 상기 제1 영상이 상품 결재와 관련된 것인지를 확인하고, 상기 제1 영상이 상품 결재와 관련된 것이면 기 저장된 구매 이력 정보를 업데이트하는 단계; 및
상기 업데이트된 구매 이력 정보에 기초하여 결정된 광고 정보를 상기 디스플레이 장치에 전송하는 단계;를 포함하는 전자 장치의 제어 방법.
제10항에 있어서,
상기 제1 특징 정보는,
상기 제1 영상을 캡쳐하여 생성된 캡쳐 이미지, 상기 제1 영상에 대응하는 핑거 프린트에 대한 정보, 상기 제1 영상에 포함된 텍스트에 대한 정보 및 상기 제1 영상에 포함된 로고에 대한 정보 중 적어도 하나를 포함하는 전자 장치의 제어 방법.
제10항에 있어서,
상기 업데이트하는 단계는,
상기 제1 영상이 상품 결재와 관련된 것이고 상기 제1 특징 정보로부터 상품 정보가 획득되면, 상기 획득된 상품 정보에 기초하여 상기 구매 이력 정보를 업데이트하는 전자 장치의 제어 방법.
제10항에 있어서,
상기 제1 영상 이전에 표시된 적어도 하나의 제2 영상에 대응되는 적어도 하나의 제2 특징 정보를 수신하는 단계;를 더 포함하며,
상기 업데이트하는 단계는,
상기 제1 영상이 상품 결재와 관련된 것이고 상기 제1 특징 정보로부터 상품 정보가 미획득되면, 상기 수신된 적어도 하나의 제2 특징 정보로부터 상품 정보를 획득하고, 상기 획득된 상품 정보에 기초하여 구매 이력 정보를 업데이트하는 전자 장치의 제어 방법.
제10항에 있어서,
상기 수신된 제1 특징 정보에 기초하여 상기 디스플레이 장치에 대응되는 기 저장된 시청 이력 정보를 업데이트하는 단계;를 더 포함하고,
상기 전송하는 단계는
상기 업데이트된 시청 이력 정보와 상기 업데이트된 구매 이력 정보에 기초하여 결정된 광고 정보를 상기 디스플레이 장치로 전송하는 전자 장치의 제어 방법.
제10항에 있어서,
상기 구매 이력 정보는,
상품명, 상품 제조사, 상품의 카테고리, 상품 가격, 결재 수단 중 적어도 하나에 대한 정보를 포함하는 전자 장치의 제어 방법.
제10항에 있어서,
상기 전자 장치는,
복수의 디스플레이 장치에 각각 대응하는 복수의 서로 다른 구매 이력 정보를 저장하며,
상기 전송하는 단계는,
상기 복수의 서로 다른 구매 이력 정보에 기초하여 서로 다른 복수의 광고 정보를 상기 복수의 디스플레이 장치 각각에 전송하는 전자 장치의 제어 방법.
제10항에 있어서,
상기 구매 이력 정보는,
홈쇼핑 구매 이력 정보, 애플리케이션 구매 이력 정보, 게임 아이템 구매 이력 정보, VOD(Video On Demand) 구매 이력 정보, 유료 TV(pay television) 이력 정보 중 적어도 2 이상을 포함하는 전자 장치의 제어 방법.
제17항에 있어서,
상기 전송하는 단계는,
홈쇼핑 구매 이력 정보, 애플리케이션 구매 이력 정보, 게임 아이템 구매 이력 정보, VOD 구매 이력 정보, 유료 TV 구매 이력 정보 중 적어도 2 이상의 정보에 기초하여 결정된 광고 정보를 상기 디스플레이 장치로 전송하는 전자 장치의 제어 방법.
전자 장치의 제어방법을 수행하기 위한 프로그램을 포함하는 컴퓨터 판독가능 기록 매체에 있어서,
상기 제어방법은,
디스플레이 장치에서 표시되는 제1 영상에 대응되는 제1 특징 정보를 수신하는 단계;
상기 수신된 제1 특징 정보에 기초하여 상기 제1 영상이 상품 결재와 관련된 것인지를 확인하고, 상기 제1 영상이 상품 결재와 관련된 것이면 기 저장된 구매 이력 정보를 업데이트하는 단계; 및
상기 업데이트된 구매 이력 정보에 기초하여 결정된 광고 정보를 상기 디스플레이 장치에 전송하는 단계;를 포함하는 기록 매체.