KR101919014B1

KR101919014B1 - 전자 장치 및 그 동작방법

Info

Publication number: KR101919014B1
Application number: KR1020170030543A
Authority: KR
Inventors: 정다희; 김세현
Original assignee: 삼성전자주식회사
Priority date: 2016-11-09
Filing date: 2017-03-10
Publication date: 2018-11-15
Also published as: KR20180052064A

Abstract

전자 장치 및 그 동작 방법이 개시된다. 일 예에 따른 전자 장치는, 통신 인터페이스; 디스플레이; 하나 이상의 인스트럭션을 저장하는 메모리; 및 상기 메모리에 저장된 상기 하나 이상의 인스트럭션을 실행하는 프로세서를 포함하고, 상기 프로세서는, 상기 하나 이상의 인스트럭션을 실행함으로써, 상기 디스플레이에 표시되는 컨텐츠의 인식을 위한 정보를 컨텐츠 자동인식 서버에 전송하고, 상기 컨텐츠 자동 인식 서버로 상기 컨텐츠의 인식을 위한 정보를 전송한 것에 대응하여, 대체 컨텐츠가 표시될 대체 슬롯의 길이 및 상기 대체 슬롯에서 표시될 대체 컨텐츠의 주소 정보를 상기 컨텐츠 자동인식 서버로부터 수신하고, 상기 대체 슬롯의 길이와 상기 대체 컨텐츠의 주소 정보를 이용하여 획득한 상기 대체 컨텐츠의 길이를 비교하고, 상기 대체 컨텐츠의 길이가 상기 대체 슬롯의 길이보다 짧으면, 상기 대체 컨텐츠가 상기 대체 슬롯의 길이에 대응하는 시간 동안 표시될 수 있도록 상기 대체 컨텐츠에 포함된 하나 이상의 프레임의 표시 시간을 증가시키고, 상기 대체 컨텐츠의 길이가 상기 대체 슬롯의 길이보다 길면, 상기 대체 컨텐츠에 포함된 하나 이상의 프레임을 제거시킨다.

Description

전자 장치 및 그 동작방법{Electronic apparatus, and operating method for the same}

다양한 실시예들은 전자 장치 및 그 동작 방법에 관한 것으로, 보다 구체적으로는, 컨텐츠와 컨텐츠 사이의 대체 슬롯에 대체 컨텐츠를 표시하는 전자 장치 및 그 동작 방법에 관한 것이다.

스마트 또는 인터넷에 연결된 텔레비전은 인터넷 네트워크와 같은 데이터 네트워크로부터 데이터를 수신할 수 있으므로 시청자들은 디지털 방송 컨텐츠 뿐만 아니라 멀티미디어 컨텐츠를 수신할 수 있다. 이와 같이 스마트 텔레비전이나 인터넷에 연결된 텔레비전과 다양한 스마트 기기의 사용으로 인해 컨텐츠 제공자들은 보다 풍부한 컨텐츠, 광고, 인터랙티브 컨텐츠를 제공할 수 있게 되었다.

현저히 개선된 데이터 프로세싱 성능을 가진 스마트 텔레비전들은 컨텍스트에 기반한 컨텐츠를 제공함으로써 사용자 경험을 증대시키고 풍부하게 할 수 있다. 이와 같이 컨텍스트에 기반하여 컨텐츠를 제공하기 위해서, 스마트 텔레비전 또는 스마트 텔레비전에 연결된 셋탑박스는 텔레비전 스크린에 어떤 컨텐츠가 표시되고 있는지를 실시간으로 인식할 필요가 있다.

따라서 TV에서 표시되는 컨텐츠를 인식할 수 있는 기술인 컨텐츠 자동 인식 (Automatic Content Recognition)이 이용되고 있으며, 컨텐츠 자동 인식 기술의 주요 두가지 기술은, 디지털 워터마킹(digital watermarking)과 컨텐츠 핑거프린팅(digital fingerprinting)이다. 디지털 워터마킹은, 방송 컨텐츠에 워터마크 데이터를 매립하는 전처리를 수행하여 방송 신호를 보내고 TV는 이와 같이 매립된 워터마크를 검출하여 방송 컨텐츠를 식별하는 방법이다. 컨텐츠 핑거프린팅은, 컨텐츠로부터 핑커프린트를 추출하고 이를 데이터베이스와 매칭시킴으로써 TV 에 표시되는 컨텐츠를 식별하기 위해 오디오 또는 비디오 컨텐츠 핑거프린팅을 이용한다. 컨텐츠 핑거프린팅 방식에서, TV는 TV 디스플레이서 표시되는 컨텐츠로부터 핑거프린트를 계속해서 추출하고 추출된 핑거프린트를 핑거프린트 데이터베이스를 운영하는 핑거프린트 서버로 보낸다. 핑거프린트 서버는 수신된 TV에서 수신된 핑거프린트를 핑거프린트 데이터베이스에 저장된 핑거프린트와 매칭시킴으로써 TV에서 표시되는 컨텐츠를 식별할 수 있다. 또한 핑거프린트 서버는 식별된 컨텐츠에 대한 정보를 TV로 제공하는 동작을 수행할 수 있다.

또한 커스터마이즈드 스트리밍 서비스(customized streaming service)의 증가와 함께 커스터마이즈 애드 서비스(customized ad service) 또한 증가하고 있는 추세에서, 서버쪽에서 각 클라이언트 별 커스터마이징 서비스를 제공하는 방법중 하나로 본편 영상 사이에 광고가 표시되는 시간 구간을 애드 슬롯(AD slot) 또는 대체 슬롯(Replacement slot)으로 결정하고, 이 애드 슬롯(AD slot) 또는 대체 슬롯(Replacement slot)에 사용자에게 맞는 광고를 삽입하는 방식이 있다. 이는 각각의 독립적인 컨텐츠를 제공하기만 하면 되어 컨텐츠를 제공하는 쪽에서 특별한 기술을 요하지 않을 뿐더러 본 편 영상과 광고를 미리 인코딩하는 방식에 비해 훨씬 더 효율적인 방법으로 서비스 제공 업체에서 사용될 수 있다. 이 애드 슬롯(AD slot) 또는 대체 슬롯(Replacement slot)에 서버에서 제공하는 광고 컨텐츠를 재생하는 경우 애드 슬롯(AD slot) 또는 대체 슬롯(Replacement slot)과 광고 컨텐츠간 길이가 일치해야 본편 영상과 광고 컨텐츠 재생 전환시 연결이 매끄럽고 위화감이 없다.

다양한 실시예들은, 컨텐츠 자동 인식을 이용하여 대체 슬롯에 대체 컨텐츠 재생시 싱크를 맞추기 위한 전자 장치 및 그 동작 방법을 제공하는 것을 목적으로 한다.

일 실시예에 따른 전자 장치는, 통신 인터페이스; 디스플레이; 하나 이상의 인스트럭션을 저장하는 메모리; 및 상기 메모리에 저장된 상기 하나 이상의 인스트럭션을 실행하는 프로세서를 포함하고, 상기 프로세서는, 상기 하나 이상의 인스트럭션을 실행함으로써, 상기 디스플레이에 표시되는 컨텐츠의 인식을 위한 정보를 컨텐츠 자동인식 서버에 전송하고, 상기 컨텐츠 자동 인식 서버로 상기 컨텐츠의 인식을 위한 정보를 전송한 것에 대응하여, 대체 컨텐츠가 표시될 대체 슬롯의 길이 및 상기 대체 슬롯에서 표시될 대체 컨텐츠의 주소 정보를 상기 컨텐츠 자동인식 서버로부터 수신하고, 상기 대체 슬롯의 길이와 상기 대체 컨텐츠의 주소 정보를 이용하여 획득한 상기 대체 컨텐츠의 길이를 비교하고, 상기 대체 컨텐츠의 길이가 상기 대체 슬롯의 길이보다 짧으면, 상기 대체 컨텐츠가 상기 대체 슬롯의 길이에 대응하는 시간 동안 표시될 수 있도록 상기 대체 컨텐츠에 포함된 하나 이상의 프레임의 표시 시간을 증가시키고, 상기 대체 컨텐츠의 길이가 상기 대체 슬롯의 길이보다 길면, 상기 대체 컨텐츠에 포함된 하나 이상의 프레임을 제거시킨다.

일 실시예에 따라 상기 프로세서는, 상기 하나 이상의 인스트럭션을 실행함으로써, 상기 대체 컨텐츠의 길이가 상기 대체 슬롯의 길이보다 긴 경우, 상기 대체 컨텐츠의 길이와 상기 대체 슬롯의 길이의 차이에 대응하는 수 만큼의 상기 하나 이상의 프레임을 제거시킬 수 있다.

일 실시예에 따라 상기 프로세서는, 상기 하나 이상의 인스트럭션을 실행함으로써, 상기 제거되는 하나 이상의 프레임을 선택할 때, I 프레임, B 프레임, P 프레임중 B 프레임과 P 프레임을 우선적으로 선택할 수 있다.

일 실시예에 따라 상기 프로세서는, 상기 하나 이상의 인스트럭션을 실행함으로써, 상기 대체 컨텐츠의 길이가 상기 대체 슬롯의 길이보다 긴 경우, 상기 대체 컨텐츠의 길이와 상기 대체 슬롯의 길이의 차이에 대응하는 수 만큼의 상기 하나 이상의 프레임을 일정한 간격으로 결정하고, 상기 일정한 간격에 있는 프레임에 이웃한 미리 정해진 수의 프레임들을 분석하고, 상기 분석 결과 상기 제거되는 하나 이상의 프레임을 선택할 때, I 프레임, B 프레임, P 프레임중 B 프레임과 P 프레임을 우선적으로 선택할 수 있다.

일 실시예에 따라 상기 컨텐츠에 관한 정보는, 상기 컨텐츠로부터 추출된 핑거프린트를 포함할 수 있다.

일 실시예에 따라 상기 대체 슬롯은 상기 컨텐츠와 상기 컨텐츠를 후속하는 후속 컨텐츠 사이의 구간을 포함할 수 있다.

일 실시예에 따라 상기 프로세서는, 상기 하나 이상의 인스트럭션을 실행함으로써, 상기 컨텐츠 자동 인식 서버로부터, 상기 대체 컨텐츠의 표시 시점에 관한 정보를 더 수신하고, 상기 수신한 대체 컨텐츠의 표시 시점에 관한 정보에 기초하여 상기 대체 컨텐츠의 표시를 시작할 수 있다.

일 실시예에 따라 상기 프로세서는, 상기 하나 이상의 인스트럭션을 실행함으로써, 상기 대체 컨텐츠의 주소 정보를 이용하여 상기 대체 컨텐츠를 다운로드하는 중, 상기 컨텐츠 자동인식 서버로부터 상기 대체 컨텐츠의 표시에 관한 정보를 수신하면 상기 다운로드된 대체 컨텐츠의 표시를 시작할 수 있다.

일 실시예에 따라 전자 장치의 동작 방법은, 상기 디스플레이에 표시되는 컨텐츠의 인식을 위한 정보를 컨텐츠 자동인식 서버에 전송하는 동작, 상기 컨텐츠 자동 인식 서버로 상기 컨텐츠의 인식을 위한 정보를 전송한 것에 대응하여, 대체 컨텐츠가 표시될 대체 슬롯의 길이 및 상기 대체 슬롯에서 표시될 대체 컨텐츠의 주소 정보를 상기 컨텐츠 자동인식 서버로부터 수신하는 동작, 상기 대체 슬롯의 길이와 상기 대체 컨텐츠의 주소 정보를 이용하여 획득한 상기 대체 컨텐츠의 길이를 비교하는 동작, 상기 대체 컨텐츠의 길이가 상기 대체 슬롯의 길이보다 짧으면, 상기 대체 컨텐츠가 상기 대체 슬롯의 길이에 대응하는 시간 동안 표시될 수 있도록 상기 대체 컨텐츠에 포함된 하나 이상의 프레임의 표시 시간을 증가시키는 동작, 및 상기 대체 컨텐츠의 길이가 상기 대체 슬롯의 길이보다 길면, 상기 대체 컨텐츠에 포함된 하나 이상의 프레임을 제거시키는 동작을 포함한다.

일 실시예에 따라 전자 장치의 동작 방법을 컴퓨터에서 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체가 개시된다.

일 실시예에 따라 전자 장치는, 통신 인터페이스; 디스플레이; 하나 이상의 인스트럭션을 저장하는 메모리; 및 상기 메모리에 저장된 상기 하나 이상의 인스트럭션을 실행하는 프로세서를 포함하고, 상기 프로세서는, 상기 하나 이상의 인스트럭션을 실행함으로써, 제1컨텐츠를 제2컨텐츠로 전환하여 재생시, 상기 제1컨텐츠의 마지막 일부 구간에 포함된 프레임들에 대한 프레임 레이트를 줄임으로써, 상기 제1컨텐츠의 마지막 일부 구간에 포함된 프레임들을 상기 제2컨텐츠의 시작 시점 까지 표시한다.

실시예들에 따른 전자 장치 및 그 동작 방법에 의하면, 컨텐츠 자동 인식에 따라 결정된 대체 컨텐츠를 대체 슬롯에서 표시할 때 대체 컨텐츠의 재생을 매끄럽게 할 수 있다.

도 1은 다양한 실시예들이 적용하는 네트워크 시스템의 개략도이다.
도 2는 일 실시예에 따른 전자 장치 100의 개략적인 블록도이다.
도 3은 도 2에 도시된 비디오 처리부 150의 세부적인 구성을 나타낸다.
도 4는 일 실시예에 따라 전자 장치 100에서의 동작을 나타내는 흐름도이다.
도 5는 일 실시예에 따라 대체 컨텐츠의 길이가 대체 슬롯의 길이보다 짧을 때 대체 컨텐츠의 길이를 대체 슬롯의 길이에 맞추기 위한 방법을 설명하기 위한 참고도이다.
도 6은 일 실시예에 따라 대체 컨텐츠의 길이가 대체 슬롯의 길이보다 길 때 대체 컨텐츠의 길이를 대체 슬롯의 길이에 맞추기 위한 방법을 설명하기 위한 참고도이다.
도 7은 일 실시예에 따라 대체 컨텐츠의 길이가 대체 슬롯의 길이보다 길 때 대체 컨텐츠에서 제거할 프레임을 선택하는 방법을 설명하기 위한 참고도이다.
도 8은 일 실시예에 따라 제1컨텐츠에서 제2컨텐츠로의 전환 동작을 수행하는 과정의 일 예를 나타낸다.
도 9는 도 8에 도시된 컨텐츠 전환 동작을 구체적을 설명하기 위한 참고도이다.
도 10은 일 실시예에 따라 컨텐츠 전환 동작시 딜레이를 감소시키는 다른 예를 나타낸다.

본 명세서에서 사용되는 용어에 대해 간략히 설명하고, 본 발명에 대해 구체적으로 설명하기로 한다.

본 발명에서 사용되는 용어는 본 발명에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어들을 선택하였으나, 이는 당 분야에 종사하는 기술자의 의도 또는 판례, 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 발명의 설명 부분에서 상세히 그 의미를 기재할 것이다. 따라서 본 발명에서 사용되는 용어는 단순한 용어의 명칭이 아닌, 그 용어가 가지는 의미와 본 발명의 전반에 걸친 내용을 토대로 정의되어야 한다.

명세서 전체에서 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있음을 의미한다. 또한, 명세서에 기재된 "...부", "모듈" 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미하며, 이는 하드웨어 또는 소프트웨어로 구현되거나 하드웨어와 소프트웨어의 결합으로 구현될 수 있다.

아래에서는 첨부한 도면을 참고하여 실시예들에 대하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형식으로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.

본 명세서의 실시예에서 "사용자"라는 용어는 제어 장치를 이용하여 영상 표시 장치의 기능 또는 동작을 제어하는 사람을 의미하며, 시청자, 관리자 또는 설치 기사를 포함할 수 있다.

도 1은 다양한 실시예들이 적용하는 네트워크 시스템의 개략도이다.

도 1을 참조하면, 시스템은 전자 장치100, 방송 컨텐츠 서버 200, ACR 서버 250, 컨텐츠 서버 300, 네트워크 350를 포함할 수 있다.

방송 서버 200는 방송 컨텐츠 DB 210에 저장된 방송 컨텐츠를 네트워크 350를 통해서 전자 장치 100로 제공할 수 있다.

컨텐츠 서버 300는 컨텐츠 DB 310에 저장된 컨텐츠를 네트워크 350를 통해서 전자 장치 100으로 제공할 수 있다.

방송 서버 200이나 컨텐츠 서버 300와 같은 네트워크 제공자는 ACR 기반 디바이스와 같은 전자 장치 100로 배포될 TV 프로그램이나 멀티미디어 컨텐츠와 같은 컨텐츠를 생성하거나, 획득하거나, 패키지하도록 동작될 수 있는 적절한 로직, 회로, 인터페이스, 및/또는 코드를 포함할 수 있다. 또한 네트워크 제공자는 컨텐츠 자동 인식 동작을 지원하기 위해 컨텐츠를 ACR 서버 250에 제공할 수 있다.

전자 장치 100는 방송 서버 200으로부터 방송 컨텐츠를 수신하고, 수신된 방송 컨텐츠를 표시하거나 또는 컨텐츠 서버 300으로부터 컨텐츠를 수신하고, 수신된 컨텐츠를 표시할 수 있다.

전자 장치 100는 컨텐츠를 수신하여 시청자에게 제공하도록 동작될 수 있는 적절한 로직, 회로, 인터페이스 및/또는 코드를 포함할 수 있다. 전자 장치 100는 ACR 모듈 130을 포함할 수 있다. ACR 모듈 130은 전자 장치를 위해 컨텐츠 자동 인식 기능을 제공하도록 동작될 수 있는 적절한 로직, 회로, 인터페이스, 및/또는 코드를 포함할 수 있다.

전자 장치 100는 스크린에 표시되는 컨텐츠를 주어진 레이트로 샘플링하여 핑거프린트를 추출하고 추출된 핑거프린트를 일정한 레이트로 ACR 서버로 전송할 수 있다. 예를 들어, 전자 장치 100의 ACR 모듈 130은 스크린에 표시되는 컨텐츠를 1초에 10회 샘플링하여 핑거프린트를 추출하고 추출된 핑거프린트를 1초에 10개의 핑거프린트를 ACR 서버 250로 전송할 수 있다.

전자 장치 100는 셋탑 박스에 연결될 수 있다. 셋탑 박스는 ACR 기반 디바이스와 같은 전자 장치 100를 컨텐츠 제공자와 같은 외부 소스에 연결하고, 외부 소스로부터 수신된 신호를 전자 장치 100의 화면에 표시될 수 있는 컨텐츠로 변환하도록 동작될 수 있는 적절한 로직, 회로, 인터페이스, 및/또는 코드를 포함할 수 있다.

전자 장치 100는, ACR 모듈 130이 탑재된 디스플레이 장치, 이 디스플레이 장치에 연결된 셋탑, 이 디스플레이 장치에 페어링된 페어링 장치를 포함할 수 있다.

ACR 서버 250는 전자 장치 100에서의 컨텐츠 자동 인식 동작을 지원하도록 동작될 수 있는 적절한 로직, 회로, 인터페이스, 및/또는 코드를 포함할 수 있다. ACR 서버 250는 전자 장치 100으로 컨텐츠 자동 인식 어플리케이션 및/또는 서비스들을 제공할 수 있다. ACR 서버 250는 하나 이상의 컨텐츠 자동 인식 기술을 제공할 수 있고 또한 전자 장치 100와 동기화를 제공할 수 있다. ACR 서버 250는 컨텐츠 자동 인식을 위해 복수의 서로 다른 핑거프린팅 기술을 지원할 수 있다.

ACR 서버 250는 핑거프린트 DB 260을 구비하고 있으며, 전자 장치 100로부터 핑거프린트를 수신한 경우, 수신된 핑거프린트를 핑거프린트 DB 260에 기초하여 분석을 함으로써, 전자 100에서 표시되고 있는 컨텐츠와 후속 컨텐츠 사이의 대체 슬롯에 관한 정보를 획득하고, 대체 슬롯에 관한 정보를 전자 장치 100으로 전송할 수 있다.

ACR 서버 250는 전자 장치 100로부터 수신된 핑거프린트와 핑거프린트 DB 260에 저장된 핑거프린트를 매칭시켜 전자 장치 100에서 표시되는 컨텐츠에 대응하는 정보를 결정할 수 있다. 컨텐츠에 대응하는 정보는, 현재 전자 장치 100에서 표시되는 컨텐츠와 이 컨텐츠에 후속하여 표시될 후속 컨텐츠 사이의 대체 슬롯에 관한 정보를 포함할 수 있다. 대체 슬롯에 관한 정보는, 대체 컨텐츠의 표시 시점을 나타내는 대체 슬롯의 시작 지점, 대체 슬롯의 길이, 대체 슬롯에서 표시될 대체 컨텐츠의 주소 정보의 하나 이상을 포함할 수 있다. ACR 서버 250는 이와 같이 결정된 대체 슬롯에 관한 정보를 동시에 또는 순차적으로 전자 장치 100로 전송할 수 있다.

핑거프린트 데이터베이스 260는 핑커프린트를 제공하는 서버로부터 획득된 핑거프린트를 저장하고, 획득된 핑거프린트와 컨텐츠 식별 정보/미디어 시간 사이의 연관성을 유지하도록 동작될 수 있는 적절한 로직, 회로, 인터페이스, 및/또는 코드를 포함할 수 있다.

통신 네트워크 350는 다양한 유선 또는 무선 기술을 통해 복수의 엔티티간에 통신을 제공하도록 동작될 수 있는 적절한 로직, 회로, 인터페이스, 및/또는 코드를 포함할 수 있다. 유선 또는 무선 기술은, T1/E1, DSL, 케이블 모뎀, FTTx, PLC 및/또는 WiMax를 포함할 수 있다. 통신 네트워크는 인터넷 또는 멀티미디어 네트워크를 포함할 수 있다.

한편, 일 실시예에 따른 전자 장치100는 TV일 수 있으나, 이는 일 실시예에 불과하며, 디스플레이를 포함하는 전자 장치로 구현될 수 있다. 예를 들어, 전자 장치100는 휴대폰, 태블릿 PC, 디지털 카메라, 캠코더, 노트북 컴퓨터(laptop computer), 태블릿 PC, 데스크탑, 전자책 단말기, 디지털 방송용 단말기, PDA(Personal Digital Assistants), PMP(Portable Multimedia Player), 네비게이션, MP3 플레이어, 착용형 기기(wearable device) 등과 같은 다양한 전자 장치로 구현될 수 있다.

전자 장치100는 제어 장치에 의해 제어될 수 있으며, 제어 장치는 리모컨 또는 휴대폰과 같이 전자 장치100를 제어하기 위한 다양한 형태의 장치로 구현될 수 있다. 또한, 제어 장치는 적외선(infrared) 또는 블루투스(bluetooth)를 포함하는 근거리 통신을 이용하여 전자 장치 100를 제어할 수 있다.

도 2는 일 실시예에 따른 전자 장치 100의 개략적인 블록도이다.

도 2를 참조하면, 전자 장치 100는 방송 컨텐츠 수신기 110, 통신 인터페이스 120, ACR 모듈 130, 디스플레이 140, 비디오 처리부 150, 오디오 출력부 160, 오디오 처리부 170, 제어부 180을 포함할 수 있다.

방송 컨텐츠 수신기 110은 방송 서버 200로부터 방송 컨텐츠를 수신할 수 있다.

방송 컨텐츠 수신기 110은 예를 들어 튜너를 포함할 수 있다. 튜너는 유선 또는 무선으로 수신되는 방송 신호를 증폭(amplification), 혼합(mixing), 공진(resonance)등을 통하여 신호 처리를 하고, 수신된 많은 방송 신호의 전파 성분 중에서 전자 장치 100에서 수신하고자 하는 채널의 주파수만을 튜닝(tuning)시켜 선택할 수 있다. 방송 신호는 오디오(audio), 비디오(video) 및 부가 정보(예를 들어, EPG(Electronic Program Guide))를 포함한다. 튜너는 지상파 방송, 케이블 방송, 위성 방송, 인터넷 방송 등과 같이 다양한 소스로부터 방송 신호를 수신할 수 있다. 튜너는 아날로그 방송 또는 디지털 방송 등과 같은 소스로부터 방송 신호를 수신할 수 도 있다.

통신 인터페이스 120은 컨텐츠 서버 300로부터 멀티미디어 컨텐츠를 수신할 수 있다. 또한 통신 인터페이스 120은 ACR 서버 250과의 통신을 수행할 수 있다.

일 실시예에 따라 통신 인터페이스 120은 ACR 모듈 130의 제어에 따라 디스플레이 140에 표시되는 컨텐츠를 인식하는데 이용되는 컨텐츠 인식 정보, 예를 들어, 이 컨텐츠에 대응하는 핑거프린트를 주기적으로 ACR 서버 250로 전송할 수 있다.

일 실시예에 따라 통신 인터페이스 120은 대체 슬롯에 관한 정보를 주기적으로 ACR 서버 250로부터 수신하고 이를 ACR 모듈 130으로 제공할 수 있다. 대체 슬롯에 관한 정보는 대체 컨텐츠의 표시 시점을 나타내는 대체 슬롯의 시작 지점, 대체 슬롯의 길이, 대체 슬롯에서 표시될 대체 컨텐츠의 주소 정보를 포함할 수 있다.

ACR 모듈 130은, 전자 장치 100를 위해 컨텐츠 자동 인식 기능을 제공하도록 동작될 수 있는 적절한 로직, 회로, 인터페이스, 및/또는 코드를 포함할 수 있다. ACR 모듈 130은 전자 장치 100의 컨텐츠 자동 인식 동작을 지원하기 위해 통신 네트워크를 통해서 ACR 서버 250와 통신할 수 있다.

ACR 모듈 130은 디스플레이 140에 표시되는 컨텐츠의 인식을 위해 ACR 서버 250로 핑거프린트를 주기적으로 제공할 수 있다. ACR 모듈 130은 ACR 서버 250으로부터 ACR 관련 정보나 컨텐츠를 수신할 수 있다. ACR 모듈 130은 전자 장치의 내부 또는 외부에서 일어나는 이벤트를 모니터링하는 동기화 이벤트 매니저를 실행하도록 동작할 수 있다. 동기화 이벤트 매니저는 모니터링이 수행되는 기간 동안 계속해서 실행될 수 있도록 백그라운드 프로세스로 실행될 수 있다. 외부 이벤트 중의 하나는 컨텐츠 자동 인식 매칭에 대응하는 이벤트를 포함할 수 있다. 내부 이벤트 중의 하나는 전자 장치에 의해 수행되는 컨텐츠 자동 인식에 대응하는, 프로세스, 어플리케이션 및/또는 기능을 포함할 수 있다. 이벤트 트리거를 검출한 것에 응답해서, 동기화 이벤트 매니저는 적절한 어플리케이션을 요청하거나 수신할 수 있다. 동기화 이벤트 매니저는 하드웨어, 소프트웨어, 펌웨어 등으로 구현될 수 있다.

ACR 모듈 130은 ACR 서버 250를 이용하여 전자 장치와 연관된 시청자 정보, 시청자 인터랙션을 확인할 수 있고 이 확인된 시청자 정보나 시청자 인터랙션에 기초하여 ACR 서버 250가 대체 슬롯에 표시될 광고를 다변화하여 제공하게 할 수 있다. 대체 슬롯은 디스플레이에 표시되는 컨텐츠와 이 컨텐츠에 후속하는 후속 컨텐츠 사이의 시간 구간을 나타내는 것으로, 대체 컨텐츠가 표시될 수 있는 구간을 말하며, 다음 애드 팟 (AD pot) 또는 컨텐츠의 표시 중의 커머셜 브레이크를 포함할 수 있다. 대체 슬롯에 표시될 수 있는 대체 컨텐츠에는 제한이 없으며, 어떠한 종류의 컨텐츠라도 포함할 수 있다. 대체 컨텐츠의 일 예로는 광고 컨텐츠가 될 수 있다.

일 실시예에 따라 ACR 모듈 130은 디스플레이 140에 표시되는 컨텐츠를 모니터링하여 표시되는 컨텐츠로부터 일정한 주기로 핑거프린트를 획득하고 획득된 핑거프린트를 ACR 서버 250로 전송할 수 있다.

일 실시예에 따라 ACR 모듈 130은 ACR 서버 250로부터 대체 슬롯에 관한 정보를 수신할 수 있다. 대체 슬롯에 관한 정보는 대체 컨텐츠의 표시 시점을 나타내는 대체 슬롯의 시작 지점, 대체 슬롯의 길이, 대체 슬롯에 표시될 대체 컨텐츠의 주소 정보를 포함할 수 있다.

일 실시예에 따라 ACR 모듈 130은 대체 슬롯의 시작 지점이 되기 전에 대체 컨텐츠를 수신할 수 있도록 대체 컨텐츠의 주소 정보를 이용하여 대체 컨텐츠를 액세스할 수 있다. 대체 컨텐츠의 주소 정보는 예를 들어 대체 컨텐츠의 URL 정보를 포함할 수 있다.

일 실시예에 따라 ACR 모듈 130은, ACR 서버 250로부터, 대체 컨텐츠의 표시 시점에 관한 정보를 수신하고, 수신한 대체 컨텐츠의 표시 시점에 관한 정보에 기초하여 상기 대체 컨텐츠의 표시를 시작할 수 있다.

일 실시예에 따라 ACR 모듈 130은, 대체 컨텐츠의 주소 정보를 이용하여 대체 컨텐츠를 다운로드하는 중, ACR 서버 250로부터, 대체 컨텐츠의 표시에 관한 정보를 수신하면 다운로드된 대체 컨텐츠의 표시를 시작할 수 있다.

일 실시예에 따라 ACR 모듈 130은 대체 컨텐츠를 대체 슬롯의 길이에 적합하게 처리하도록 비디오 처리부 150를 제어할 수 있다. 예를 들어, ACR 모듈 130은 수신한 대체 컨텐츠의 길이와 대체 슬롯의 길이를 비교하여, 대체 컨텐츠의 길이가 대체 슬롯의 길이보다 짧으면 대체 컨텐츠의 하나 이상의 프레임의 표시를 더 증가하도록 하고, 대체 컨텐츠의 길이가 대체 슬롯의 길이보다 길면 대체 컨텐츠의 하나 이상의 프레임을 제어하도록, 비디오 처리부 150를 제어할 수 있다.

디스플레이 140는 비디오 처리부 150에서 처리된 영상 신호, 데이터 신호, OSD 신호, 제어 신호 등을 변환하여 구동 신호를 생성한다. 디스플레이140는 PDP, LCD, OLED, 플렉시블 디스플레이(flexible display)등으로 구현될 수 있으며, 또한, 3차원 디스플레이(3D display)로 구현될 수 있다. 또한, 디스플레이140는, 터치 스크린으로 구성되어 출력 장치 이외에 입력 장치로 사용되는 것도 가능하다.

비디오 처리부 150는 디스플레이 140에 의해 표시될 영상을 신호 처리하며, 비디오 데이터에 대한 디코딩, 스케일링, 노이즈 필터링, 프레임 레이트 변환, 해상도 변환 등과 같은 다양한 이미지 처리를 수행할 수 있다.

일 실시예에 따라 비디오 처리부 150는 ACR 모듈 130의 제어에 따라 디스플레이 140에 표시되는 컨텐츠의 다음 대체 슬롯에 표시될 대체 컨텐츠의 비디오의 길이가 대체 슬롯의 길이 보다 짧으면 대체 컨텐츠에 포함된 하나 이상의 비디오 프레임의 표시를 더 유지시킬 수 있고, 대체 컨텐츠의 비디오의 길이가 대체 슬롯의 길이보다 길면 대체 컨텐츠에 포함된 하나 이상의 비디오 프레임을 제거할 수 있다. 비디오 처리부 150의 동작은 도 3을 참조하여 상세히 설명한다.

오디오 출력부 160는 오디오 처리부 170에서 처리된 오디오 신호를 출력할 수 있다.

오디오 출력부 160는 스피커, 헤드폰 출력 단자 또는 S/PDIF(Sony/Philips Digital Interface) 출력 단자 중 적어도 하나 또는 그 조합을 포함할 수 있다.

오디오 처리부 170는 오디오 출력부 160에서 출력될 오디오 신호를 처리할 수 있다.

오디오 처리부170는 오디오 데이터에 대한 처리를 수행한다. 오디오 처리부170에서는 오디오 데이터에 대한 디코딩이나 증폭, 노이즈 필터링 등과 같은 다양한 처리가 수행될 수 있다. 한편, 오디오 처리부170는 복수의 컨텐츠에 대응되는 오디오를 처리하기 위해 복수의 오디오 처리 모듈을 구비할 수 있다.

일 실시예에 따라 오디오 처리부 170은는 ACR 모듈 130의 제어에 따라 다음 대체 슬롯에 표시될 대체 컨텐츠의 오디오의 길이가 대체 슬롯의 길이 보다 짧으면 대체 컨텐츠에 포함된 하나 이상의 오디오 프레임의 표시를 더 유지시킬 수 있고, 대체 컨텐츠의 오디오의 길이가 대체 슬롯의 길이보다 길면 대체 컨텐츠에 포함된 하나 이상의 오디오 프레임을 제거할 수 있다.

제어부 180는 전자 장치 100의 전반적인 동작 및 전자 장치 100의 내부 구성 요소들 사이의 신호 흐름을 제어하고, 데이터를 처리하는 기능을 수행한다. 제어부 180는 사용자의 입력이 있거나 기 설정되어 저장된 조건을 만족하는 경우, 메모리 190에 저장된 OS(Operation System) 및 다양한 애플리케이션을 실행할 수 있다.

제어부 180는 전자 장치 100의 외부에서부터 입력되는 신호 또는 데이터를 저장하거나, 전자 장치 100에서 수행되는 다양한 작업에 대응되는 저장 영역으로 사용되는 램, 전자 장치 100의 제어를 위한 제어 프로그램이 저장된 롬 및 프로세서를 포함할 수 있다.

위 설명에서 ACR 관련 동작을 ACR 모듈 130이 수행하는 것으로 설명되었지만, ACR 모듈 130의 일부 또는 전부의 동작이나 기능은 제어부 180에 의해 수행될 수도 있다.

메모리 190는 오퍼레이팅 시스템, 제어부 180에서 처리되는 데이터, 제어부 180에서 실행되는 하나 이상의 인스트럭션을 포함할 수 있다.

특히 일 실시예에 따른 메모리 190는 ACR 모듈 130에 의해 수행되는 하나 이상의 인스트럭션을 포함할 수 있다.

일 실시예에서 "메모리"라는 용어는 저장소, 제어부의 롬, 램 또는 전자 장치 100에 장착되는 메모리 카드(예를 들어, micro SD 카드, USB 메모리, 도시되지 아니함)를 포함한다. 또한, 메모리 190는 비휘발성 메모리, 휘발성 메모리, 하드 디스크 드라이브(HDD) 또는 솔리드 스테이트 드라이브(SSD)를 포함할 수 있다.

전자 장치 100는 도 2에 도시된 구성 외에도 전자 장치 100의 외부에서부터 비디오, 오디오 및 부가 정보 등을 수신하는 입/출력부, 사용자의 영상, 사용자의 인터랙션을 감지하는 감지부를 더 포함할 수 있다.

또한, 전자 장치 100는 그 용어에 한정되지 않고, 프로세서와 메모리를 포함하여 애플리케이션을 실행하는 장치이면, 랩탑, 스마트 폰, 태블릿, 웨어러블 장치, PDA 등 어떤 전자 장치라도 가능하다.

한편, 도 2에 도시된 전자 장치 100의 블록도는 일 실시예를 위한 블록도이다. 블록도의 각 구성요소는 실제 구현되는 전자 장치 100의 사양에 따라 통합, 추가, 또는 생략될 수 있다. 즉, 필요에 따라 2 이상의 구성요소가 하나의 구성요소로 합쳐지거나, 혹은 하나의 구성요소가 2 이상의 구성요소로 세분되어 구성될 수 있다. 또한, 각 블록에서 수행하는 기능은 실시예들을 설명하기 위한 것이며, 그 구체적인 동작이나 장치는 본 발명의 권리범위를 제한하지 아니한다.

도 3은 도 2에 도시된 비디오 처리부 150의 세부적인 구성을 나타낸다.

도 3을 참조하면, 비디오 처리부 150은 제1 디코더 151, 제2 디코더 152, 데이터 매니저 153, 스케일러 154를 포함할 수 있다.

제1 디코더 151은 방송 컨텐츠 수신기 110로부터 수신한 방송 컨텐츠 데이터를 디코드하고 디코드된 데이터를 데이터 매니저 153으로 전송할 수 있다.

제2 디코더 152는 통신 인터페이스 120로부터 수신한 멀티미디어 컨텐츠 데이터를 디코드하고 디코드된 데이터를 데이터 매니저 153으로 전송할 수 있다.

데이터 매니저 153은 제1 디코더 151 및 제2 디코더 152 중 적어도 하나로부터 디코드된 데이터를 프레임 단위로 수신하고, 수신된 프레임들의 랜더링을 위해 스케일러 154로 전송할 수 있다.

일 실시예에 따라 데이터 매니저 153은 ACR 모듈 130의 제어에 따라, 제2 디코더 152로부터 수신되는 대체 컨텐츠의 길이가 대체 슬롯의 길이보다 짧으면 <대체 컨텐츠의 길이와 대체 슬롯의 차>에 해당하는 시간만큼 대체 컨텐츠에 포함된 프레임들중 하나 이상의 프레임의 표시 시간을 증가시킬 수 있다. 예를 들어, 데이터 매니저 153은 <대체 컨텐츠의 길이와 대체 슬롯의 차>에 해당하는 시간만큼 대체 컨텐츠에 포함된 프레임들중 마지막 프레임의 표시 시간을 증가시킬 수 있다.

일 실시예에 따라 데이터 매니저 153은 ACR 모듈 130의 제어에 따라, 제2디코더 152로부터 수신되는 대체 컨텐츠의 길이가 대체 슬롯의 길이보다 길면 <대체 컨텐츠의 길이와 대체 슬롯의 차>에 해당하는 시간 만큼 대체 컨텐츠에 포함된 프레임들중 하나 이상의 프레임을 제거할 수 있다. 예를 들어, 데이터 매니저 153은 <대체 컨텐츠의 길이와 대체 슬롯의 차>에 해당하는 시간만큼 대체 컨텐츠에 포함된 프레임들을 일정한 주기에 따라 제거할 수 있다.

대체 컨텐츠의 길이와 대체 슬롯의 길이의 비교에 따라 프레임을 제어하는 방법은 도 5 내지 도 7을 참조하여 자세히 설명한다.

일 실시예에 따라 데이터 매니저 153은 ACR 모듈 130의 제어에 따라, 제1컨텐츠를 제2컨텐츠로 전환하여 재생시, 상기 제1컨텐츠의 마지막 일부 구간에 포함된 프레임들에 대한 프레임 레이트를 줄임으로써, 상기 제1컨텐츠의 마지막 일부 구간에 포함된 프레임들을 상기 제2컨텐츠의 시작 시점 까지 표시할 수 있다.

도 4는 일 실시예에 따라 전자 장치 100에서의 동작을 나타내는 흐름도이다.

도 4를 참조하면, 동작 410에서, 전자 장치 100는 디스플레이에 표시되는 컨텐츠의 인식에 이용되는 정보를 컨텐츠 자동 인식 서버에 전송할 수 있다.

예를 들어 전자 장치 100의 ACR 모듈 130은 디스플레이 140에 표시되는 컨텐츠를 이용하여 획득한 핑거프린트를 주기적으로 ACR 서버 250으로 전송할 수 있다.

동작 420에서, 전자 장치 100는 대체 슬롯의 길이, 대체 슬롯에서 재생될 대체 컨텐츠의 주소 정보를 컨텐츠 자동 인식 서버로부터 수신할 수 있다.

전자 장치 100는 대체 슬롯에 관한 정보로서, 대체 슬롯의 시작 지점을 더 수신할 수 있다.

전자 장치 100의 ACR 모듈 130은 대체 슬롯의 시작 지점, 대체 슬롯의 길이, 대체 슬롯에서 재생될 대체 컨텐츠의 주소 정보를 ACR 서버 130로부터 주기적으로 수신할 수 있다.

동작 430에서, 전자 장치 100는 대체 컨텐츠의 주소 정보를 이용하여 획득한 대체 컨텐츠의 길이와 대체 슬롯의 길이를 비교할 수 있다.

예를 들어, 전자 장치 100의 ACR 모듈 130은 대체 슬롯의 시작 지점을 모니터링하다가 대체 슬롯의 시작 지점 또는 표시 시점이 가까워지면 컨텐츠 서버 300에 접속하여 대체 컨텐츠의 주소 정보를 이용하여 대체 컨텐츠를 수신할 수 있다.

또한 ACR 모듈 130은 대체 컨텐츠의 표시 시점에 관한 정보에 기반하여 대체 컨텐프의 표시를 시작할 수 있다.

또한 ACR 모듈 130은 대체 컨텐츠의 주소 정보를 이용하여 대체 컨텐츠를 다운로드 하는 중 ACR 서버 250로부터 대체 컨텐츠의 표시 시점에 관한 정보를 수신하면 다운로드된 대체 컨텐츠의 표시를 시작할 수 있다.

ACR 모듈 130은 대체 슬롯의 길이와 수신된 대체 컨텐츠의 길이를 비교할 수 있다. 대체 컨텐츠의 길이 정보는 수신한 대체 컨텐츠를 파싱함으로써 대체 컨텐츠로부터 획득될 수 있다.

동작 440에서, 전자 장치 100가 대체 컨텐츠의 길이가 대체 슬롯의 길이보다 짧다고 판단하면, 동작 450으로 진행할 수 있다.

동작 450에서, 전자 장치 100는 대체 컨텐츠가 대체 슬롯의 길이에 대응하는 시간 동안 표시될 수 있도록 대체 컨텐츠에 포함된 하나 이상의 프레임의 표시 시간을 증가시킬 수 있다.

예를 들어, 전자 장치 100의 ACR 모듈 130은 대체 컨텐츠에 포함된 하나 이상의 프레임의 표시 시간을 증가시키도록 비디오 처리부 150를 제어할 수 있다.

동작 440에서, 전자 장치 100가 대체 컨텐츠의 길이가 대체 슬롯의 길이보다 길다고 판단하면, 동작 460으로 진행할 수 있다.

동작 460에서, 전자 장치 100는 대체 컨텐츠에 포함된 하나 이상의 프레임을 제거할 수 있다.

예를 들어, 전자 장치 100의 ACR 모듈 130은 대체 컨텐츠에 포함된 하나 이상의 프레임을 제거하도록 비디오 처리부 150를 제어할 수 있다.

동작 440에서, 전자 장치 100가 대체 컨텐츠의 길이와 대체 슬롯의 길이가 동일하다고 판단하면, 동작 470으로 진행하여, 대체 컨텐츠의 프레임을 제거하거나 프레임의 표시시간을 증가시키는 조정없이 대체 슬롯에서 표시할 수 있다.

도 5는 일 실시예에 따라 대체 컨텐츠의 길이가 대체 슬롯의 길이보다 짧을 때 대체 컨텐츠의 길이를 대체 슬롯의 길이에 맞추기 위한 방법을 설명하기 위한 참고도이다.

도 5를 참조하면, 제1컨텐츠 510과 제2컨텐츠 530 사이에 대체 슬롯 520이 배열된다. 예를 들어 제1컨텐츠 510과 제2컨텐츠 530은 하나의 프로그램을 구성하는 컨텐츠의 일부이고, 대체 슬롯 520은 하나의 프로그램의 방송 동안 중간중간에 들어가는 광고를 위한 구간일 수 있다. 예를 들어 제1 컨텐츠 510과 제2컨텐츠 530는 서로 다른 프로그램이고 대체 슬롯 520은 하나의 프로그램과 다음 프로그램의 브레이크 동안 들어가는 광고를 위한 구간일 수 있다. 대체 슬롯 520에는 하나 이상의 대체 컨텐츠 540가 표시될 수 있다.

대체 슬롯 520의 길이 보다 대체 컨텐츠 540의 길이가 더 짧은 경우 전자 장치 100의 디스플레이에서 대체 컨텐츠 540이 표시되고 나서 다음 제2 컨텐츠 530이 표시되기 까지 시간이 남을 수 있다. 예를 들어, 대체 슬롯 520의 길이를 A, 대체 컨텐츠의 길이를 B, 대체 컨텐츠의 길이와 대체 슬롯의 길이의 차 C는 |B-A| 라고 하면, 전자 장치 100의 디스플레이에서는, 대체 컨텐츠 540이 표시되고 나서, C에 해당하는 시간 동안 아무것도 표시되지 않을 수 있다. 이와 같이 대체 컨텐츠의 길이가 짧아서 디스플레이에 아무것도 표시되지 않는 것을 방지하기 위해서는 C에 해당하는 시간동안 대체 컨텐츠 540의 일부 프레임의 표시를 유지시켜서 디스플레이에 컨텐츠가 표시되게 할 수 있다.

예를 들어 프레임 레이트를 F 라고 하면, C 시간 동안 표시되어야 하는 프레임 수는 C*F 가 될 수 있다. 예를 들어, 전자 장치 100는 대체 컨텐츠 540의 적어도 하나의 프레임을 C 시간 동안 표시되어야 하는 프레임들로 결정할 수 있다. 예를 들어, 전자 장치 100는 대체 컨텐츠 540의 마지막 프레임 541을 C 시간 동안 표시되어야 하는 프레임들로 결정할 수 있다. 도 3의 데이터 매니저 153은 대체 컨텐츠 540의 마지막 프레임 541을 C 시간 동안 연속적으로 스케일러 154로 전송함으로써 C 시간동안 마지막 프레임 541이 표시되게 할 수 있다. 그러나 대체 컨텐츠 540의 마지막 프레임을 이용한다는 것은 일 예에 불과하며, 전자 장치 100는 대체 컨텐츠 540의 하나 이상의 프레임을 C 시간 동안 이용할 수 있음은 물론이다.

도 6은 일 실시예에 따라 대체 컨텐츠의 길이가 대체 슬롯의 길이보다 길 때 대체 컨텐츠의 길이를 대체 슬롯의 길이에 맞추기 위한 방법을 설명하기 위한 참고도이다.

도 6을 참조하면, 제1컨텐츠 610과 제2 컨텐츠 630 사이에 대체 슬롯 620이 배열된다. 도 5에서와 달리 도 6의 예에서는 대체 컨텐츠 640의 길이가 대체 슬롯 620의 길이보다 길다. 이 경우에는 도 6의 예와 달리 대체 슬롯 620에서 대체 컨텐츠 640을 표시할 때, 대체 컨텐츠 640를 끝까지 다 표시하기 전에 대체 슬롯 620이 끝나버린다. 따라서 대체 컨텐츠 640에서 C 시간 만큼에 해당하는 분량이 표시되지 못할 수 있다. 예를 들어 60초짜리 광고로 된 대체 컨텐츠 640가 50초 정도만 대체 슬롯 620에서 표시되다가 그냥 대체 컨텐츠 640의 표시는 중단되고 제2 컨텐츠 630의 표시가 시작될 수 있다. 이와 같이 되는 경우 시청자에게는 대체 슬롯 620에서 표시되는 광고가 중간에 중단되고 다음 컨텐츠 630를 보게 되어, 시청자는 매우 이상하고 매끄럽지 않은 경험을 느낄 수 밖에 없다.

따라서 전자 장치 100는 대체 슬롯 620의 길이보다 긴 대체 컨텐츠 640의 프레임들을 적절히 조정하여 대체 슬롯 620의 길이에 적합하게 대체 컨텐츠 640의 프레임들을 적절히 선별할 필요가 있다. 예를 들어 도 6에 도시된 예에서 대체 슬롯 620의 길이에 맞게 조정하기 위해 제거할 대체 컨텐츠 640의 프레임 수는 C*F 이고, 프레임 제거 주기는 B/C가 될 수 있다. 프레임 제거 주기는 몇 프레임마다 하나의 프레임을 제거해야 하는지를 나타낼 수 있다. 긴 영상을 짧게 만들고자 하는 경우, 어느 한 구간을 통째로 제거한다면 컨텐츠의 주요 내용을 잃어버릴 가능성이 많으므로, 전체 영상에서 일정한 주기에 따라 고르게 프레임을 제거하는 방법이 바람직할 수 있다.

도 7은 일 실시예에 따라 대체 컨텐츠의 길이가 대체 슬롯의 길이보다 길 때 대체 컨텐츠에서 제거할 프레임을 선택하는 방법을 설명하기 위한 참고도이다.

도 7에서는 도 6에서 프레임 제거 주기에 따라 하나 이상의 프레임을 제거할 때 보다 효과적으로 제거할 프레임을 선택하기 위하 방법을 설명한다.

예를 들어, 대체 슬롯의 길이가 190 sec, 대체 컨텐츠의 길이가 200sec 이면 대체 컨텐츠의 길이와 대체 슬롯의 길이의 차는 10sec 이다. 이는 즉, 대체 컨텐츠의 길이를 대체 슬롯의 길이에 맞추기 위해 10sec 분량 만큼의 프레임을 대체 컨텐츠에서 제거해야 함을 나타낼 수 있다. 프레임 레이트를 30frames/sec 이라고 하면, 대체 컨텐츠에서 제거해야 할 프레임들의 수는 10*30 frames 가 됨을 알 수 있다. 그리고 프레임 제거 주기는 200/10=20 으로 계산된다. 즉, 전자 장치 100는 대체 컨텐츠의 길이 200sec를 대체 슬롯의 길이 190sec 로 맞추기 위해 200sec 의 대체 컨텐츠에서 제거할 프레임들의 수는 10*30 프레임이고, 대체 컨텐츠의 전 구간에서 주기적으로 고르게 제거하기 위해서는 프레임 제거 주기를 20으로 해서, 즉, 20 프레임마다 한 프레임씩 제거할 수 있다.

또한 프레임 제거 주기에 따라 프레임을 제거하는 경우에도 보다 중요한 정보를 담고 있는 프레임은 제거하지 않도록 하고 보다 덜 중요한 정보를 담고 있는 프레임을 제거할 수 있다. 예를 들어 일정한 간격으로 프레임을 제거하는 경우 제거되는 프레임이 장면이 전환되는 시점의 프레임이면 영상이 매끄럽게 재생되지 않는 이슈가 있어서, 최대한 프레임 간 영상의 차이가 적은 프레임을 제거할 필요가 있다. 이를 위해 전자 장치 100는 프레임 제거 주기에 따라 결정된 프레임을 기초로 미리 정해진 범위 G를 결정하고, 이 미리 정해진 범위 내에의 프레임들중 하나를 제거할 프레임으로 결정할 수 있다. 그리고 이때 전자 장치 100는 미리 정해진 범위 내의 프레임들중에서 보다 덜 중요한 정보를 가진 프레임, 즉 독립적인 장면이 아닌, 전 /후 프레임을 참조해야 하는 프레임을 제거할 프레임으로 선택할 수 있다.

GOP 는 그룹 오브 픽쳐(Group Of Picture)의 약자로 MPEG - 1/2 인코딩의 기본옵션으로 키프레임에서 다음 키프레임까지의 프레임 모음을 의미한다. GOP의 프레임 타입은 I,B,P 등이 있는데, 비디오 코덱에서는 I, B, P 3 개 모드중 하나를 이용하여 각각의 프레임이 인코딩된다. I 프레임은 인트라 프레임 (Intra Frame)의 약자로 키프레임을 의미한다. 가장 좋은 화질을 가지고 있는 프레임으로 다른 프레임을 참조하지 않고 독립적으로 인코딩된다. P 프레임은 예측 프레임(Predicted Frame)의 약자로 이전에 나온 키프레임의 정보를 참조해서 구성된 프레임으로 화질과 용량은 중간정도 이다. B 프레임은 양방향 프레임(Bidirectional Frame)의 약자로 전, 후의 I/P 프레임의 정보를 참조하여 구성된 프레임으로 화질과 용량은 모두 제일 작다.

이와 같이 대체 컨텐츠를 구성하는 프레임들은 서로 다른 특징을 가지는 프레임들로 구성된다. 따라서, 전자 장치 100는 프레임 제거 주기에 따라 결정된 프레임을 기초로 결정된 미리 정해진 범위 G에 포함된 프레임들중, 보다 덜 중요한 정보를 가지는 프레임, 즉, 다른 프레임을 참조하여야 하는 B 프레임이나 P 프레임을 제거할 프레임으로 선택할 수 있다.

예를 들어 도 7을 참조하면, 전자 장치 100는 프레임 제거 주기에 따라 결정된 프레임 710을 기초로 결정된 미리 정해진 범위 G에서 하나의 프레임을 제거하고, 20 프레임 후에 나타나는, 다음 결정된 프레임 720을 기초로 결정된 미리 정해진 범위 G에서 하나의 프레임을 제거할 수 있다. 그리고 미리 정해진 범위 G에 포함된 프레임들 즉, I. B, P 프레임들중 보다 덜 중요한 정보를 가지고 있는 B 프레임 또는 P 프레임을 제거할 프레임으로 결정할 수 있다.

도 5 내지 7을 참조하여 대체 컨텐츠의 비디오 프레임들에 대하여 설명되었지만, 이는 오디오 프레임들에 대해서도 동일하게 적용할 수 있다.

한편, 독립적인 본편 영상과 광고 컨텐츠의 연속 재생시에, 이전의 본편 영상을 종료하고 나서 다음 광고 영상을 재생하는 과정에서 재생 준비, 데이터 처리 시간으로 인해 공백이 발생하게 될 수 있다. 따라서 이러한 공백 시간 동안 화면 끊김이 발생하여 사용자에게 자연스러운 재생 서비스를 제공하지 못할 수 있다. 즉, 이전 컨텐츠에서 해제한 자원을 다음 컨텐츠에서 연결하여 재생하는 형태에서는 자원의 해제/연결하는 시간 동안 화면에 아무것도 보여지지 않는 블랙 스크린 구간이 존재하여 영상의 끊김이 확연히 드러나게 함으로써 사용자에게 나쁜 경험을 제공할 수 있다. 따라서 컨텐츠의 재생 전환시 영상이 끊기는 구간을 최소화하여 좀더 매끄러운 사용자 경험을 제공할 필요가 있다.

예를 들어, 도 3을 참조하면, 비디오 처리부 150가 방송 컨텐츠 수신기 110으로부터 수신한 방송 컨텐츠를 제1디코더 151가 디코딩하여 데이터 매니저 153을 통해서 스케일러 154에서 스케일링함으로써 방송 컨텐츠를 표시할 수 있다. 이 때 방송 컨텐츠로부터, 통신 인터페이스 120을 통한 광고 컨텐츠의 전환 이벤트가 발생한 경우, 물리적으로 하드웨어 스위칭 시간 및 소프트웨어 프로세싱 시간의 소요로 인해서, 제1디코더 151로부터의 방송 컨텐츠의 표시가 종료되는 시점과, 제2디코더 152로부터의 광고 컨텐츠의 표시가 시작되는 시점이 정확히 맞지 않고, 딜레이가 발생할 수 있다. 이러한 딜레이의 최소화를 위해, 광고 컨텐츠의 프로세싱 준비 동안, 데이터 매니저 153에 쌓여있는 방송 컨텐츠의 프레임 레이트 조정을 통해서 데이터 랜더링의 속도를 조정할 수 있다.

도 8은 일 실시예에 따라 제1컨텐츠에서 제2컨텐츠로의 전환 동작을 수행하는 과정의 일 예를 나타낸다.

도 8을 참조하면, 동작 810에서, 전자 장치 100는 제1컨텐츠 재생 중 제2컨텐츠 전환 이벤트를 수신할 수 있다.

동작 820에서, 전자 장치 100는 제1컨텐츠의 마지막 일부 구간에 포함된 프레임들에 대한 프레임 레이트를 결정할 수 있다. 즉, 전자 장치 100는 컨텐츠 전환을 매끄럽게 하기 위해 제1컨텐츠의 마지막 일부 구간에 대해서, 제1컨텐츠의 원래 프레임 레이트와는 다른 조정된 프레임 레이트를 결정할 수 있다.

동작 830에서, 전자 장치 100는 결정된 프레임 레이트로, 제1컨텐츠의 마지막 일부 구간에 포함된 프레임들을 제 2컨텐츠의 시작 지점까지 표시할 수 있다.

도 9는 도 8에 도시된 컨텐츠 전환 동작을 구체적을 설명하기 위한 참고도이다.

도 9를 참조하면, 900A는 실시예에 따른 컨텐츠 전환 동작이 없는 경우의 딜레이를 나타낸다. 즉, 도 9를 참조하면, 제1컨텐츠 910의 예상 종료 시점과 제2컨텐츠 930의 시작 시점 사이에 딜레이 920이 존재할 수 있다.

900B는 일 실시예에 따라 컨텐츠 전환 동작에 따른 컨텐츠의 재생을 나타낸다. 900A에서는 제1컨텐츠가 제1컨텐츠의 원래 프레임 레이트인 제1프레임 레이트로 재생되는 반면, 900B에서는 딜레이 구간 920과 제1컨텐츠의 마지막 일부 구간 940에 해당하는 시간 동안 제1컨텐츠의 프레임 레이트가 제2 프레임 레이트로 조정될 수 있다.

900B를 참조하면, 전자 장치 100는 제1컨텐츠의 마지막 일부 구간 940을 결정할 수 있다.

그리고 전자 장치 100는 제1컨텐츠의 마지막 일부 구간 940에 포함된 프레임들을, 제1컨텐츠의 마지막 일부 구간 940에 대응하는 시간과 딜레이 920에 대응하는 시간 동안, 제2프레임 레이트로 재생할 수 있다. 예를 들어, 제1컨텐츠의 마지막 일부 구간 940 에 포함된 프레임들의 수가 E라고 하면, 전자 장치 100는 시간 A + B 동안 재생되는 제1컨텐츠의 제2프레임 레이트 D를 다음과 같이 결정할 수 있다.

제1프레임 레이트 = C

제2프레임 레이트 = D

프레임 레이트 조정전 구간 A 동안 재생되어야 할 프레임의 수 E= A*C

A+B 동안의 제2프레임 레이트 D= E/(A+B)= (A*C)/(A+B)

결국, A= (B*D)/(C-D)

여기서 B, 즉, 제1컨텐츠의 예상 종료 시점부터 하드웨어 스위칭이 일어나기 까지의 시간은, 소프트웨어 프로세싱 시 발생하는 시간으로서 항상 일정하지는 않지만 예측가능한 시간이다. 일 예에 따라 B는 고정된 값일 수 있다. 일 예에 따라 B는 학습을 통해서 얻을 수 있다. 일예에 따라 B는 전자 장치의 양산 시점에 얻을 수 있다.

제1컨텐츠의 원래 프레임 레이트 즉, 제1프레임 레이트는 컨텐츠 정보 파싱을 통해서 얻을 수 있다. 제2프레임 레이트는 제1프레임 레이트 보다 낮은 임의의 값으로 설정할 수 있다.

전자 장치 100는 제1컨텐츠의 마지막 일부 구간 A에 해당하는 프레임들의 속도를 느리게 해서 좀더 긴 시간 (A+B) 동안 표시되게 함으로써 제1컨텐츠와 제2컨텐츠의 전환동작으로 인한 딜레이를 감소시킬 수 있다.

도 10은 일 실시예에 따라 컨텐츠 전환 동작시 딜레이를 감소시키는 다른 예를 나타낸다.

전자 장치 100는 제1컨텐츠 910과 제2컨텐츠 930의 전환에서 나타나는 딜레이 920에 대응하는 시간을 미리 알 수 있는 경우, 딜레이 920에 대응하는 시간 만큼을 고려하여 미리 제2컨텐츠 930의 재생 준비를 명령할 수 있다. 도 10을 참조하면, 1000A는 제1컨텐츠 910의 종료 시점에 스위칭 이벤트가 발생하여 딜레이 920가 발생한 경우를 나타내고, 1000B는 제1컨텐츠 910의 종료 시점 이전에 미리 스위칭 이벤트를 발생시켜 제2컨텐츠 930의 준비를 미리 앞당김으로써 딜레이 920를 제거할 수 있음을 나타낸다.

실시예들에 따른 전자 장치의 동작방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다.

이상에서 실시예들에 대하여 상세하게 설명하였지만 본 발명의 권리범위는 이에 한정되는 것은 아니고 다음의 청구범위에서 정의하고 있는 본 발명의 기본 개념을 이용한 당업자의 여러 변형 및 개량 형태 또한 본 발명의 권리범위에 속한다.

Claims

전자 장치에 있어서,
통신 인터페이스;
디스플레이;
하나 이상의 인스트럭션을 저장하는 메모리; 및
상기 메모리에 저장된 상기 하나 이상의 인스트럭션을 실행하는 프로세서를 포함하고, 상기 프로세서는, 상기 하나 이상의 인스트럭션을 실행함으로써,
상기 디스플레이에 표시되는 컨텐츠의 인식을 위한 정보를 컨텐츠 자동인식 서버에 전송하고,
상기 컨텐츠 자동 인식 서버로 상기 컨텐츠의 인식을 위한 정보를 전송한 것에 대응하여, 대체 컨텐츠가 표시될 대체 슬롯의 길이 및 상기 대체 슬롯에서 표시될 대체 컨텐츠의 주소 정보를 상기 컨텐츠 자동인식 서버로부터 수신하고,
상기 대체 슬롯에서 표시될 대체 컨텐츠의 주소 정보를 이용하여 상기 대체 컨텐츠를 획득하기 위해 컨텐츠 서버에 액세스하고,
상기 컨텐츠 서버로부터 획득한 상기 대체 컨텐츠를 파싱하여 상기 대체 컨텐츠의 길이에 관한 정보를 획득하고,
상기 자동인식 서버로부터 수신한 상기 대체 슬롯의 길이와 상기 컨텐츠 서버로부터 획득한 상기 대체 컨텐츠를 파싱함으로써 획득한 상기 대체 컨텐츠의 길이를 비교하고,
상기 대체 컨텐츠의 길이가 상기 대체 슬롯의 길이보다 짧으면, 상기 대체 컨텐츠가 상기 대체 슬롯의 길이에 대응하는 시간 동안 표시될 수 있도록 상기 대체 컨텐츠에 포함된 하나 이상의 프레임의 표시 시간을 증가시키고,
상기 대체 컨텐츠의 길이가 상기 대체 슬롯의 길이보다 길면, 상기 대체 컨텐츠에 포함된 하나 이상의 프레임을 제거시키는, 전자 장치.
제1항에 있어서,
상기 프로세서는, 상기 하나 이상의 인스트럭션을 실행함으로써,
상기 대체 컨텐츠의 길이가 상기 대체 슬롯의 길이보다 긴 경우, 상기 대체 컨텐츠의 길이와 상기 대체 슬롯의 길이의 차이에 대응하는 수 만큼의 상기 하나 이상의 프레임을 제거시키는, 전자 장치.
제2항에 있어서,
상기 프로세서는, 상기 하나 이상의 인스트럭션을 실행함으로써,
상기 제거되는 하나 이상의 프레임을 선택할 때, I 프레임, B 프레임, P 프레임중 B 프레임과 P 프레임을 우선적으로 선택하는, 전자 장치.
제3항에 있어서,
상기 프로세서는, 상기 하나 이상의 인스트럭션을 실행함으로써,
상기 대체 컨텐츠의 길이가 상기 대체 슬롯의 길이보다 긴 경우, 상기 대체 컨텐츠의 길이와 상기 대체 슬롯의 길이의 차이에 대응하는 수 만큼의 상기 하나 이상의 프레임을 일정한 간격으로 결정하고,
상기 일정한 간격에 있는 프레임에 이웃한 미리 정해진 수의 프레임들을 분석하고,
상기 분석 결과 상기 제거되는 하나 이상의 프레임을 선택할 때, I 프레임, B 프레임, P 프레임중 B 프레임과 P 프레임을 우선적으로 선택하는, 전자 장치.
제1항에 있어서,
상기 컨텐츠에 관한 정보는, 상기 컨텐츠로부터 추출된 핑거프린트를 포함하는, 전자 장치.
제1항에 있어서,
상기 대체 슬롯은 상기 컨텐츠와 상기 컨텐츠를 후속하는 후속 컨텐츠 사이의 구간을 포함하는, 전자 장치.
제1항에 있어서,
상기 프로세서는, 상기 하나 이상의 인스트럭션을 실행함으로써,
상기 컨텐츠 자동 인식 서버로부터, 상기 대체 컨텐츠의 표시 시점에 관한 정보를 더 수신하고, 상기 수신한 대체 컨텐츠의 표시 시점에 관한 정보에 기초하여 상기 대체 컨텐츠의 표시를 시작하는, 전자 장치.
제1항에 있어서,
상기 프로세서는, 상기 하나 이상의 인스트럭션을 실행함으로써,
상기 대체 컨텐츠의 주소 정보를 이용하여 상기 대체 컨텐츠를 다운로드하는 중, 상기 컨텐츠 자동인식 서버로부터 상기 대체 컨텐츠의 표시에 관한 정보를 수신하면 상기 다운로드된 대체 컨텐츠의 표시를 시작하는, 전자 장치.
전자 장치의 동작 방법에 있어서,
디스플레이에 표시되는 컨텐츠의 인식을 위한 정보를 컨텐츠 자동인식 서버에 전송하는 동작,
상기 컨텐츠 자동 인식 서버로 상기 컨텐츠의 인식을 위한 정보를 전송한 것에 대응하여, 대체 컨텐츠가 표시될 대체 슬롯의 길이 및 상기 대체 슬롯에서 표시될 대체 컨텐츠의 주소 정보를 상기 컨텐츠 자동인식 서버로부터 수신하는 동작,
상기 대체 슬롯에서 표시될 대체 컨텐츠의 주소 정보를 이용하여 상기 대체 컨텐츠를 획득하기 위해 컨텐츠 서버에 액세스하는 동작,
상기 컨텐츠 서버로부터 획득한 상기 대체 컨텐츠를 파싱하여 상기 대체 컨텐츠의 길이에 관한 정보를 획득하는 동작,
상기 자동인식 서버로부터 수신한 상기 대체 슬롯의 길이와 상기 컨텐츠 서버로부터 획득한 상기 대체 컨텐츠를 파싱함으로써 획득한 상기 대체 컨텐츠의 길이를 비교하는 동작,
상기 대체 컨텐츠의 길이가 상기 대체 슬롯의 길이보다 짧으면, 상기 대체 컨텐츠가 상기 대체 슬롯의 길이에 대응하는 시간 동안 표시될 수 있도록 상기 대체 컨텐츠에 포함된 하나 이상의 프레임의 표시 시간을 증가시키는 동작, 및
상기 대체 컨텐츠의 길이가 상기 대체 슬롯의 길이보다 길면, 상기 대체 컨텐츠에 포함된 하나 이상의 프레임을 제거시키는 동작을 포함하는, 전자 장치의 동작 방법.
제9항에 있어서,
상기 대체 컨텐츠의 길이가 상기 대체 슬롯의 길이보다 긴 경우, 상기 대체 컨텐츠의 길이와 상기 대체 슬롯의 길이의 차이에 대응하는 수 만큼의 상기 하나 이상의 프레임을 제거시키는 동작을 더 포함하는, 전자 장치의 동작 방법.
제10항에 있어서,
상기 제거되는 하나 이상의 프레임을 선택할 때, I 프레임, B 프레임, P 프레임중 B 프레임과 P 프레임을 우선적으로 선택하는 동작을 더 포함하는, 전자 장치의 동작 방법.
제11항에 있어서,
상기 대체 컨텐츠의 길이가 상기 대체 슬롯의 길이보다 긴 경우, 상기 대체 컨텐츠의 길이와 상기 대체 슬롯의 길이의 차이에 대응하는 수 만큼의 상기 하나 이상의 프레임을 일정한 간격으로 결정하는 동작,
상기 일정한 간격에 있는 프레임에 이웃한 미리 정해진 수의 프레임들을 분석하는 동작,
상기 분석 결과 상기 제거되는 하나 이상의 프레임을 선택할 때, I 프레임, B 프레임, P 프레임중 B 프레임과 P 프레임을 우선적으로 선택하는 동작을 더 포함하는, 전자 장치의 동작 방법.
제9항에 있어서,
상기 컨텐츠에 관한 정보는, 상기 컨텐츠로부터 추출된 핑거프린트를 포함하는, 전자 장치의 동작 방법.
제9항에 있어서,
상기 대체 슬롯은 상기 컨텐츠와 상기 컨텐츠를 후속하는 후속 컨텐츠 사이의 구간을 포함하는, 전자 장치의 동작 방법.
제9항에 있어서,
상기 컨텐츠 자동 인식 서버로부터, 상기 대체 컨텐츠의 표시 시점에 관한 정보를 더 수신하고, 상기 수신한 대체 컨텐츠의 표시 시점에 관한 정보에 기초하여 상기 대체 컨텐츠의 표시를 시작하는 동작을 더 포함하는, 전자 장치의 동작 방법.
제9항에 있어서,
상기 대체 컨텐츠의 주소 정보를 이용하여 상기 대체 컨텐츠를 다운로드하는 중, 상기 컨텐츠 자동인식 서버로부터 상기 대체 컨텐츠의 표시에 관한 정보를 수신하면 상기 다운로드된 대체 컨텐츠의 표시를 시작하는 동작을 더 포함하는, 전자 장치의 동작 방법.
제9항 내지 제16항 중 어느 한 항에 기재된 전자 장치의 동작 방법을 컴퓨터에서 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체.
전자 장치에 있어서,
통신 인터페이스;
디스플레이;
하나 이상의 인스트럭션을 저장하는 메모리; 및
상기 메모리에 저장된 상기 하나 이상의 인스트럭션을 실행하는 프로세서를 포함하고, 상기 프로세서는, 상기 하나 이상의 인스트럭션을 실행함으로써,
제1컨텐츠를 제2컨텐츠로 전환하여 재생시, 상기 제1컨텐츠의 마지막 일부 구간에 포함된 프레임들에 대한 프레임 레이트를 줄임으로써, 상기 제1컨텐츠의 마지막 일부 구간에 포함된 프레임들을 상기 제2컨텐츠의 시작 시점 까지 표시하며,
상기 제1컨텐츠의 마지막 일부 구간에 포함된 프레임들에 대한 프레임 레이트는,
상기 제1컨텐츠의 마지막 일부 구간의 시작 시점으로부터 상기 제2컨텐츠의 시작 시점 까지의 시간 구간 동안 표시되는, 상기 제1컨텐츠의 마지막 일부 구간에 포함된 프레임들의 수에 의해 결정되는, 전자 장치.
삭제