KR20170111003A - 디스플레이 장치 및 그의 동작 방법 - Google Patents

Abstract

디스플레이 장치의 동작 방법이 개시된다. 본 발명의 실시 예에 따른 디스플레이 장치의 동작 방법은, 특정 오브젝트를 포함하는 제1 컨텐츠의 제1 영상을 상기 디스플레이 장치의 화면에 디스플레이 하는 단계, 상기 화면에 디스플레이 되는 영상을 확대하기 위한 입력을 수신하는 단계, 상기 제1 영상으로부터 시간적으로 이후의 영상인 상기 제1 컨텐츠의 제2 영상이 확대됨에 따라 상기 제1 컨텐츠의 제2 영상에 포함된 상기 특정 오브젝트의 일부 또는 전부가 상기 화면을 벗어나면, 상기 제2 영상으로부터 상기 특정 오브젝트를 포함하는 영상을 획득하는 단계, 및, 상기 제2 영상을 확대한 영상 및 상기 제2 영상으로부터 획득한 특정 오브젝트를 포함하는 영상을 디스플레이 하는 단계를 포함한다.

Description

디스플레이 장치 및 그의 동작 방법{DISPLAY DEVICE AND OPERATING METHOD THEREOF}

본 발명은 디스플레이 장치 및 그의 동작 방법에 관한 것이다. 구체적으로 본 발명은, 컨텐츠의 영상에 포함된 특정 오브젝트를, 컨텐츠의 영상과는 별도로 디스플레이 할 수 있는 디스플레이 장치 및 그의 동작 방법에 관한 것이다.

최근 들어, 유선 또는 무선 통신망을 이용한 디지털 TV 서비스가 보편화되고 있다. 디지털 TV 서비스는 기존의 아날로그 방송 서비스에서는 제공할 수 없었던 다양한 서비스를 제공할 수 있다.

예를 들어, 디지털 TV 서비스의 한 종류인 IPTV(Internet Protocol Television) 서비스의 경우 사용자로 하여금 시청 프로그램의 종류, 시청 시간 등을 능동적으로 선택할 수 있도록 하는 양방향성을 제공한다. IPTV 서비스는 이러한 양방향성을 기반으로 하여 다양한 부가 서비스, 예컨대 인터넷 검색, 홈쇼핑, 온라인 게임 등을 제공할 수도 있다.

한편, 최근에는 전체 영상 중 특정 부분이나 특정 오브젝트를 별도로 표시할 필요성이 늘어나고 있다. 예를 들어, 사용자가 야구 경기의 영상을 확대하여 보는 경우, 사용자는 영상이 확대됨으로써 잘려진 영역에 표시된 경기 스코어를 보고 싶을 수 있다. 다른 예로써, 사용자는 다른 채널의 드라마를 보면서, 야구 경기의 영상에 포함된 경기 스코어만을 확인하고 싶을 수 있다. 또 다른 예로써, 축구 경기를 시청하는 사용자는 특정 선수를 집중하여 보기 위하여, 특정 선수만이 표시되는 영상을 별도로 시청하기를 원할 수 있다.

다만 종래의 TV는 사용자의 이러한 요구를 충족시킬 수 없는 문제점이 있었다.

본 발명은 상술한 문제점을 해결하기 위한 것으로, 본 발명의 목적은 컨텐츠의 영상에 포함된 특정 오브젝트를, 컨텐츠의 영상과는 별도로 디스플레이 할 수 있는 디스플레이 장치 및 그의 동작 방법에 관한 것이다.

본 발명의 실시 예에 따른 디스플레이 장치의 동작 방법은, 특정 오브젝트를 포함하는 제1 컨텐츠의 제1 영상을 상기 디스플레이 장치의 화면에 디스플레이 하는 단계, 상기 화면에 디스플레이 되는 영상을 확대하기 위한 입력을 수신하는 단계, 상기 제1 영상으로부터 시간적으로 이후의 영상인 상기 제1 컨텐츠의 제2 영상이 확대됨에 따라 상기 제1 컨텐츠의 제2 영상에 포함된 상기 특정 오브젝트의 일부 또는 전부가 상기 화면을 벗어나면, 상기 제2 영상으로부터 상기 특정 오브젝트를 포함하는 영상을 획득하는 단계, 및, 상기 제2 영상을 확대한 영상 및 상기 제2 영상으로부터 획득한 특정 오브젝트를 포함하는 영상을 디스플레이 하는 단계를 포함할 수 있다.

한편, 본 발명의 실시 예에 따른 디스플레이 장치는, 영상을 디스플레이 하는 디스플레이부, 사용자로부터 입력을 수신하는 입력부, 및, 특정 오브젝트를 포함하는 제1 컨텐츠의 제1 영상을 상기 디스플레이 장치의 화면에 디스플레이 하도록 상기 디스플레이부를 제어하고, 상기 화면에 디스플레이 되는 영상을 확대하기 위한 입력을 상기 입력부를 통하여 수신하고, 상기 제1 영상으로부터 시간적으로 이후의 영상인 상기 제1 컨텐츠의 제2 영상이 확대됨에 따라 상기 제1 컨텐츠의 제2 영상에 포함된 상기 특정 오브젝트의 일부 또는 전부가 상기 화면을 벗어나면, 상기 제2 영상으로부터 상기 특정 오브젝트를 포함하는 영상을 획득하고, 상기 제2 영상을 확대한 영상 및 상기 제2 영상으로부터 획득한 특정 오브젝트를 포함하는 영상을 디스플레이 하도록 상기 디스플레이부를 제어하는 제어부를 포함할 수 있다.

도 1은 본 발명의 일 실시 예에 따른 디스플레이 장치의 구성을 블록도로 도시한 것이다.
도 2은 본 발명의 일 실시 예에 따른 원격제어장치의 블록도이다.
도 3은 본 발명의 일 실시 예에 따른 원격제어장치의 실제 구성 예를 보여준다.
도 4는 본 발명의 실시 예에 따라 원격 제어 장치를 활용하는 예를 보여준다.
도 5는 본 발명의 실시 예에 따른 디스플레이 장치의 동작 방법을 설명하기 위한 도면이다.
도 6a는 본 발명의 실시 예에 따른, 하나 이상의 오브젝트를 포함하는 제1 컨텐츠의 제1 영상을 디스플레이 하는 방법을 설명하기 위한 도면이다.
도 6b는 본 발명의 실시 예에 따른, 영상의 확대에 의하여 특정 오브젝트가 디스플레이 되지 않는 경우, 특정 오브젝트를 포함하는 영상을 획득하여 디스플레이 하는 방법을 설명하기 위한 도면이다.
도 6c는 본 발명의 실시 예에 따른, 영상의 축소에 의하여 특정 오브젝트가 디스플레이 되는 경우, 특정 오브젝트를 포함하는 영상의 디스플레이를 중단하는 방법을 설명하기 위한 도면이다.
도 7 내지 도 8은, 제1 컨텐츠의 제1 영상에 포함된 특정 오브젝트를 선택하는 입력을 수신하는 방법을 설명하기 위한 도면이다.
도 9는 본 발명의 실시 예에 따른, 제2 영상으로부터 특정 오브젝트를 포함하는 영상을 획득하여 디스플레이 하는 방법을 설명하기 위한 도면이다.
도 10a 내지 도 10b는, 본 발명의 실시 예에 따른 제2 영상으로부터 획득된 특정 오브젝트를 포함하는 영상(920)이 디스플레이 되는 위치를 지정하는 방법을 설명하기 위한 도면이다.
도 11a 내지 도 11c는 본 발명의 실시 예에 따른 제2 영상으로부터 획득된 특정 오브젝트를 포함하는 영상의 위치 또는 크기를 변경하는 방법을 설명하기 위한 도면이다.
도 12a 내지 도 13b는 본 발명의 실시 예에 따른, 특정 오브젝트를 포함하는 영상의 디스플레이 방법을 설명하기 위한 도면이다.
도 14 내지 도 16a는 본 발명의 실시 예에 따른, 영상의 확대에 의하여 특정 오브젝트가 디스플레이 되지 않는 경우, 특정 오브젝트를 포함하는 영상을 획득하여 디스플레이 하는 방법을 설명하기 위한 도면이다.
도 16b 내지 도 16c는 본 발명의 실시 예에 따른, 영상의 이동에 의하여 특정 오브젝트가 디스플레이 되거나 디스플레이 되지 않는 경우의 디스플레이 장치의 동작 방법을 설명하기 위한 도면이다.
도 17은 본 발명의 실시 예에 따른, 특정 오브젝트를 포함하는 영상의 디스플레이 위치를 설명하기 위한 도면이다.
도 18 내지 도 19는, 본 발명의 실시 예에 따른 제1 컨텐츠의 영상으로부터 획득한 특정 오브젝트를 포함하는 영상을 제2 컨텐츠의 영상과 함께 디스플레이 하는 방법을 설명하기 위한 도면이다.
도 20 내지 도 21은, 본 발명의 실시 예에 따른 특정 오브젝트가 변경되면 이전 구간의 제1 컨텐츠의 영상을 디스플레이 하는 방법을 설명하기 위한 도면이다.
도 22 내지 도 24b은, 본 발명의 실시 예에 따른 보정된 크기의 특정 오브젝트를 포함하는 영상을 디스플레이 하는 방법을 설명하기 위한 도면이다.
도 25 내지 도 26은, 본 발명의 실시 예에 따른 특정 오브젝트가 사라지거나 다시 나타난 경우, 특정 오브젝트를 포함하는 영상을 디스플레이 하는 방법을 설명하기 위한 도면이다.

이하, 본 발명과 관련된 실시 예에 대하여 도면을 참조하여 보다 상세하게 설명한다. 이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 명세서 작성의 용이함만이 고려되어 부여되거나 혼용되는 것으로서, 그 자체로 서로 구별되는 의미 또는 역할을 갖는 것은 아니다.

본 발명의 실시예에 따른 디스플레이 장치는, 예를 들어 방송 수신 기능에 컴퓨터 지원 기능을 추가한 지능형 디스플레이 장치로서, 방송 수신 기능에 충실하면서도 인터넷 기능 등이 추가되어, 수기 방식의 입력 장치, 터치 스크린 또는 공간 리모콘 등 보다 사용에 편리한 인터페이스를 갖출 수 있다. 그리고, 유선 또는 무선 인터넷 기능의 지원으로 인터넷 및 컴퓨터에 접속되어, 이메일, 웹브라우징, 뱅킹 또는 게임 등의 기능도 수행가능하다. 이러한 다양한 기능을 위해 표준화된 범용 OS가 사용될 수 있다.

따라서, 본 발명에서 기술되는 디스플레이 장치는, 예를 들어 범용의 OS 커널 상에, 다양한 애플리케이션이 자유롭게 추가되거나 삭제 가능하므로, 사용자 친화적인 다양한 기능이 수행될 수 있다. 상기 디스플레이 장치는, 보다 구체적으로 예를 들면, 네트워크 TV, HBBTV, 스마트 TV, LED TV, OLED TV 등이 될 수 있으며, 경우에 따라 스마트폰에도 적용 가능하다.

도 1은 본 발명의 일 실시예에 따른 디스플레이 장치의 구성을 블록도로 도시한 것이다.

도 1을 참조하면, 디스플레이 장치(100)는 방송 수신부(130), 외부장치 인터페이스부(135), 저장부(140), 사용자입력 인터페이스부(150), 제어부(170), 디스플레이부(180), 오디오 출력부(185), 전원공급부(190) 및 통신부(195)를 포함할 수 있다.

방송 수신부(130)는 튜너(131), 복조부(132) 및 네트워크 인터페이스부(133)를 포함할 수 있다.

튜너(131)는 채널 선국 명령에 따라 특정 방송 채널을 선국할 수 있다. 튜너(131)는 선국된 특정 방송 채널에 대한 방송 신호를 수신할 수 있다.

복조부(132)는 수신한 방송 신호를 비디오 신호, 오디오 신호, 방송 프로그램과 관련된 데이터 신호로 분리할 수 있고, 분리된 비디오 신호, 오디오 신호 및 데이터 신호를 출력이 가능한 형태로 복원할 수 있다.

외부장치 인터페이스부(135)는 인접하는 외부 장치 내의 애플리케이션 또는 애플리케이션 목록을 수신하여, 제어부(170) 또는 저장부(140)로 전달할 수 있다.

외부장치 인터페이스부(135)는 디스플레이 장치(100)와 주변장치 간의 연결 경로를 제공할 수 있다. 외부장치 인터페이스부(135)는 주변장치에 저장된 컨텐트를 수신하여 제어부(170)로 전달할 수 있다.

네트워크 인터페이스부(133)는 디스플레이 장치(100)를 인터넷망을 포함하는 유/무선 네트워크와 연결하기 위한 인터페이스를 제공할 수 있다. 네트워크 인터페이스부(133)는 접속된 네트워크 또는 접속된 네트워크에 링크된 다른 네트워크를 통해, 다른 사용자 또는 다른 전자 기기와 데이터를 송신 또는 수신할 수 있다.

또한, 디스플레이 장치(100)에 미리 등록된 다른 사용자 또는 다른 전자 기기 중 선택된 사용자 또는 선택된 전자기기에, 디스플레이 장치(100)에 저장된 일부의 컨텐츠 데이터를 송신할 수 있다.

네트워크 인터페이스부(133)는 접속된 네트워크 또는 접속된 네트워크에 링크된 다른 네트워크를 통해, 소정 웹 페이지에 접속할 수 있다. 즉, 네트워크를 통해 소정 웹 페이지에 접속하여, 해당 서버와 데이터를 송신 또는 수신할 수 있다.

그리고, 네트워크 인터페이스부(133)는 컨텐츠 제공자 또는 네트워크 운영자가 제공하는 컨텐츠 또는 데이터들을 수신할 수 있다. 즉, 네트워크 인터페이스부(133)는 네트워크를 통하여 컨텐츠 제공자 또는 네트워크 제공자로부터 제공되는 영화, 광고, 게임, VOD, 방송 신호 등의 컨텐츠 및 그와 관련된 정보를 수신할 수 있다.

또한, 네트워크 인터페이스부(133)는 네트워크 운영자가 제공하는 펌웨어의 업데이트 정보 및 업데이트 파일을 수신할 수 있으며, 인터넷 또는 컨텐츠 제공자 또는 네트워크 운영자에게 데이터들을 송신할 수 있다.

네트워크 인터페이스부(133)는 네트워크를 통해, 공중에 공개(open)된 애플리케이션들 중 원하는 애플리케이션을 선택하여 수신할 수 있다.

저장부(140)는 제어부(170) 내의 각 신호 처리 및 제어를 위한 프로그램이 저장하고, 신호 처리된 영상, 음성 또는 데이터신호를 저장할 수 있다.

또한, 저장부(140)는 외부장치 인터페이스부(135) 또는 네트워크 인터페이스부(133)로부터 입력되는 영상, 음성, 또는 데이터 신호의 임시 저장을 위한 기능을 수행할 수도 있으며, 채널 기억 기능을 통하여 소정 이미지에 관한 정보를 저장할 수도 있다.

저장부(140)는 외부장치 인터페이스부(135) 또는 네트워크 인터페이스부(133)로부터 입력되는 애플리케이션 또는 애플리케이션 목록을 저장할 수 있다.

디스플레이 장치(100)는 저장부(140) 내에 저장되어 있는 컨텐츠 파일(동영상 파일, 정지영상 파일, 음악 파일, 문서 파일, 애플리케이션 파일 등)을 재생하여 사용자에게 제공할 수 있다.

사용자입력 인터페이스부(150)는 사용자가 입력한 신호를 제어부(170)로 전달하거나, 제어부(170)로부터의 신호를 사용자에게 전달할 수 있다. 예를 들어, 사용자입력 인터페이스부(150)는 블루투스(Bluetooth), WB(Ultra Wideband), 지그비(ZigBee) 방식, RF(Radio Frequency) 통신 방식 또는 적외선(IR) 통신 방식 등 다양한 통신 방식에 따라, 원격제어장치(200)로부터 전원 온/오프, 채널 선택, 화면 설정 등의 제어 신호를 수신하여 처리하거나, 제어부(170)로부터의 제어 신호를 원격제어장치(200)로 송신하도록 처리할 수 있다.

또한, 사용자입력 인터페이스부(150)는, 전원키, 채널키, 볼륨키, 설정치 등의 로컬키(미도시)에서 입력되는 제어 신호를 제어부(170)에 전달할 수 있다.

제어부(170)에서 영상 처리된 영상 신호는 디스플레이부(180)로 입력되어 해당 영상 신호에 대응하는 영상으로 표시될 수 있다. 또한, 제어부(170)에서 영상 처리된 영상 신호는 외부장치 인터페이스부(135)를 통하여 외부 출력장치로 입력될 수 있다.

제어부(170)에서 처리된 음성 신호는 오디오 출력부(185)로 오디오 출력될 수 있다. 또한, 제어부(170)에서 처리된 음성 신호는 외부장치 인터페이스부(135)를 통하여 외부 출력장치로 입력될 수 있다.

그 외, 제어부(170)는, 디스플레이 장치(100) 내의 전반적인 동작을 제어할 수 있다.

또한, 제어부(170)는 사용자입력 인터페이스부(150)를 통하여 입력된 사용자 명령 또는 내부 프로그램에 의하여 디스플레이 장치(100)를 제어할 수 있으며, 네트워크에 접속하여 사용자가 원하는 애플리케이션 또는 애플리케이션 목록을 디스플레이 장치(100) 내로 다운받을 수 있도록 할 수 있다.

제어부(170)는 사용자가 선택한 채널 정보 등이 처리한 영상 또는 음성신호와 함께 디스플레이부(180) 또는 오디오 출력부(185)를 통하여 출력될 수 있도록 한다.

또한, 제어부(170)는 사용자입력 인터페이스부(150)를 통하여 수신한 외부장치 영상 재생 명령에 따라, 외부장치 인터페이스부(135)를 통하여 입력되는 외부 장치, 예를 들어, 카메라 또는 캠코더로부터의, 영상 신호 또는 음성 신호가 디스플레이부(180) 또는 오디오 출력부(185)를 통해 출력될 수 있도록 한다.

한편, 제어부(170)는 영상을 표시하도록 디스플레이부(180)를 제어할 수 있으며, 예를 들어 튜너(131)를 통해 입력되는 방송 영상, 또는 외부장치 인터페이스부(135)를 통해 입력되는 외부 입력 영상, 또는 네트워크 인터페이스부를 통해 입력되는 영상, 또는 저장부(140)에 저장된 영상이 디스플레이부(180)에서 표시되도록 제어할 수 있다. 이 경우, 디스플레이부(180)에 표시되는 영상은 정지 영상 또는 동영상일 수 있으며, 2D 영상 또는 3D 영상일 수 있다.

또한, 제어부(170)는 디스플레이 장치(100) 내에 저장된 컨텐츠, 또는 수신된 방송 컨텐츠, 외부로 부터 입력되는 외부 입력 컨텐츠가 재생되도록 제어할 수 있으며, 상기 컨텐츠는 방송 영상, 외부 입력 영상, 오디오 파일, 정지 영상, 접속된 웹 화면, 및 문서 파일 등 다양한 형태일 수 있다.

디스플레이부(180)는 제어부(170)에서 처리된 영상 신호, 데이터 신호, OSD 신호 또는 외부장치 인터페이스부(135)에서 수신되는 영상 신호, 데이터 신호 등을 각각 R,G,B 신호로 변환하여 구동 신호를 생성할 수 있다.

통신부(195)는 유선 또는 무선 통신을 통해 다른 디스플레이 장치와 정보를 교환할 수 있다. 통신부(195)는 근거리 통신 모듈을 포함할 수 있다. 근거리 통신 모듈은 근거리 통신(Short range communication)을 위한 것으로서, 블루투스(Bluetooth™), RFID(Radio Frequency Identification), 적외선 통신(Infrared Data Association; IrDA), UWB(Ultra Wideband), ZigBee, NFC(Near Field Communication), Wi-Fi(Wireless-Fidelity), Wi-Fi Direct, Wireless USB(Wireless Universal Serial Bus) 기술 중 적어도 하나를 이용하여, 근거리 통신을 지원할 수 있다.

통신부(195)는 제어부(170)에 포함될 수 있다.

한편, 도 1에 도시된 디스플레이 장치(100)는 본 발명의 일실시예에 불과하므로. 도시된 구성요소들 중 일부는 실제 구현되는 디스플레이 장치(100)의 사양에 따라 통합, 추가, 또는 생략될 수 있다.

즉, 필요에 따라 2 이상의 구성요소가 하나의 구성요소로 합쳐지거나, 혹은 하나의 구성요소가 2 이상의 구성요소로 세분되어 구성될 수 있다. 또한, 각 블록에서 수행하는 기능은 본 발명의 실시예를 설명하기 위한 것이며, 그 구체적인 동작이나 장치는 본 발명의 권리범위를 제한하지 아니한다.

본 발명의 또 다른 실시예에 따르면, 디스플레이 장치(100)는 도 1에 도시된 바와 달리, 튜너(131)와 복조부(132)를 구비하지 않고 네트워크 인터페이스부(133) 또는 외부장치 인터페이스부(135)를 통해서 영상을 수신하여 재생할 수도 있다.

예를 들어, 디스플레이 장치(100)는 방송 신호 또는 다양한 네트워크 서비스에 따른 컨텐츠들을 수신하기 위한 등과 같은 셋탑 박스 등과 같은 영상 처리 장치와 상기 영상 처리 장치로부터 입력되는 컨텐츠를 재생하는 컨텐츠 재생 장치로 분리되어 구현될 수 있다.

이 경우, 이하에서 설명할 본 발명의 실시예에 따른 디스플레이 장치의 동작 방법은 도 1을 참조하여 설명한 바와 같은 디스플레이 장치(100)뿐 아니라, 상기 분리된 셋탑 박스 등과 같은 영상 처리 장치 또는 디스플레이부(180) 및 오디오출력부(185)를 구비하는 컨텐츠 재생 장치 중 어느 하나에 의해 수행될 수도 있다.

한편, 디스플레이 장치(100)는 외부 장치 인터페이스부(135) 및 통신부(173)의 기능을 모두 수행하는 외부 입력 인터페이스부(미도시)를 포함할 수 있다. 즉, 디스플레이 장치(100)는 외부 입력 인터페이스부(미도시)를 통하여 연결된 외부 기기와 통신하거나, 외부 입력 인터페이스부(미도시)를 통하여 외부 기기와 무선 통신을 수행할 수 있다.

한편, 디스플레이 장치(100)는 입력부(미도시)를 포함할 수 있다. 여기서 입력부(미도시)는 사용자 입력 인터페이스부(150)를 포함하여, 상술한 사용자 입력 인터페이스부(150)의 동작을 모두 수행할 수 있다. 또한 입력부(미도시)는 로컬 키를 이용한 사용자 입력을 수신할 수 있다.

다음으로, 도 2 내지 도 3을 참조하여, 본 발명의 일 실시 예에 따른 원격제어장치에 대해 설명한다.

도 2은 본 발명의 일 실시 예에 따른 원격제어장치의 블록도이고, 도 3은 본발명의 일 실시 예에 따른 원격제어장치(200)의 실제 구성 예를 보여준다.

먼저, 도 2를 참조하면, 원격제어장치(200)는 지문인식부(210), 무선통신부(220), 사용자 입력부(230), 센서부(240), 출력부(250), 전원공급부(260), 저장부(270), 제어부(280), 음성 획득부(290)를 포함할 수 있다.

도 2을 참조하면, 무선통신부(225)는 전술하여 설명한 본 발명의 실시 예들에 따른 디스플레이 장치 중 임의의 어느 하나와 신호를 송수신한다.

원격제어장치(200)는 RF 통신규격에 따라 디스플레이 장치(100)와 신호를 송수신할 수 있는 RF 모듈(221)을 구비하며, IR 통신규격에 따라 디스플레이 장치(100)와 신호를 송수신할 수 있는 IR 모듈(223)을 구비할 수 있다. 또한, 원격제어장치(200)는 블루투스 통신규격에 따라 디스플레이 장치(100)와 신호를 송수신할 수 있는 블루투스 모듈(225)를 구비할 수 있다. 또한, 원격제어장치(200)는 NFC(Near Field Communication) 통신 규격에 따라 디스플레이 장치(100)와 신호를 송수할 수 있는 NFC 모듈(227)을 구비하며, WLAN(Wireless LAN) 통신 규격에 따라 디스플레이 장치(100)와 신호를 송수신할 수 있는 WLAN 모듈(229)을 구비할 수 있다.

또한, 원격제어장치(200)는 디스플레이 장치(100)로 원격제어장치(200)의 움직임 등에 관한 정보가 담긴 신호를 무선 통신부(220)를 통해 전송한다.

한편, 원격제어장치(200)는 디스플레이 장치(100)가 전송한 신호를 RF 모듈(221)을 통하여 수신할 수 있으며, 필요에 따라 IR 모듈(223)을 통하여 디스플레이 장치(100)로 전원 온/오프, 채널 변경, 볼륨 변경 등에 관한 명령을 전송할 수 있다.

사용자 입력부(230)는 키패드, 버튼, 터치 패드, 또는 터치 스크린 등으로 구성될 수 있다. 사용자는 사용자 입력부(230)를 조작하여 원격제어장치(200)으로 디스플레이 장치(100)와 관련된 명령을 입력할 수 있다. 사용자 입력부(230)가 하드키 버튼을 구비할 경우 사용자는 하드키 버튼의 푸쉬 동작을 통하여 원격제어장치(200)으로 디스플레이 장치(100)와 관련된 명령을 입력할 수 있다. 이에 대해서는 도 3을 참조하여 설명한다.

도 3을 참조하면, 원격제어장치(200)는 복수의 버튼을 포함할 수 있다. 복수의 버튼은 지문 인식 버튼(212), 전원 버튼(231), 홈 버튼(232), 라이브 버튼(233), 외부 입력 버튼(234), 음량 조절 버튼(235), 음성 인식 버튼(236), 채널 변경 버튼(237), 확인 버튼(238) 및 뒤로 가기 버튼(239)을 포함할 수 있다.

지문 인식 버튼(212)은 사용자의 지문을 인식하기 위한 버튼일 수 있다. 일 실시예로, 지문 인식 버튼(212)은 푸쉬 동작이 가능하여, 푸쉬 동작 및 지문 인식 동작을 수신할 수도 있다. 전원 버튼(231)은 디스플레이 장치(100)의 전원을 온/오프 하기 위한 버튼일 수 있다. 홈 버튼(232)은 디스플레이 장치(100)의 홈 화면으로 이동하기 위한 버튼일 수 있다. 라이브 버튼(233)은 실시간 방송 프로그램을 디스플레이 하기 위한 버튼일 수 있다. 외부 입력 버튼(234)은 디스플레이 장치(100)에 연결된 외부 입력을 수신하기 위한 버튼일 수 있다. 음량 조절 버튼(235)은 디스플레이 장치(100)가 출력하는 음량의 크기를 조절하기 위한 버튼일 수 있다. 음성 인식 버튼(236)은 사용자의 음성을 수신하고, 수신된 음성을 인식하기 위한 버튼일 수 있다. 채널 변경 버튼(237)은 특정 방송 채널의 방송 신호를 수신하기 위한 버튼일 수 있다. 확인 버튼(238)은 특정 기능을 선택하기 위한 버튼일 수 있고, 뒤로 가기 버튼(239)은 이전 화면으로 되돌아가기 위한 버튼일 수 있다.

다시 도 2를 설명한다.

사용자 입력부(230)가 터치스크린을 구비할 경우 사용자는 터치스크린의 소프트키를 터치하여 원격제어장치(200)로 디스플레이 장치(100)와 관련된 명령을 입력할 수 있다. 또한, 사용자 입력부(230)는 스크롤 키나, 조그 키 등 사용자가 조작할 수 있는 다양한 종류의 입력수단을 구비할 수 있으며 본 실시 예는 본 발명의 권리범위를 제한하지 아니한다.

센서부(240)는 자이로 센서(241) 또는 가속도 센서(243)를 구비할 수 있으며, 자이로 센서(241)는 원격제어장치(200)의 움직임에 관한 정보를 센싱할 수 있다.

예를 들어, 자이로 센서(241)는 원격제어장치(200)의 동작에 관한 정보를 x,y,z 축을 기준으로 센싱할 수 있으며, 가속도 센서(243)는 원격제어장치(200)의 이동속도 등에 관한 정보를 센싱할 수 있다. 한편, 원격제어장치(200)는 거리측정센서를 더 구비할 수 있어, 디스플레이 장치(100)의 디스플레이부(180)와의 거리를 센싱할 수 있다.

출력부(250)는 사용자 입력부(235)의 조작에 대응하거나 디스플레이 장치(100)에서 전송한 신호에 대응하는 영상 또는 음성 신호를 출력할 수 있다. 출력부(250)를 통하여 사용자는 사용자 입력부(235)의 조작 여부 또는 디스플레이 장치(100)의 제어 여부를 인지할 수 있다.

예를 들어, 출력부(250)는 사용자 입력부(235)가 조작되거나 무선 통신부(225)를 통하여 디스플레이 장치(100)와 신호가 송수신되면 점등되는 LED 모듈(251), 진동을 발생하는 진동 모듈(253), 음향을 출력하는 음향 출력 모듈(255), 또는 영상을 출력하는 디스플레이 모듈(257)을 구비할 수 있다.

또한, 전원공급부(260)는 원격제어장치(200)으로 전원을 공급하며, 원격제어장치(200)이 소정 시간 동안 움직이지 않은 경우 전원 공급을 중단함으로서 전원 낭비를 줄일 수 있다. 전원공급부(260)는 원격제어장치(200)에 구비된 소정 키가 조작된 경우에 전원 공급을 재개할 수 있다.

저장부(270)는 원격제어장치(200)의 제어 또는 동작에 필요한 여러 종류의 프로그램, 애플리케이션 데이터 등이 저장될 수 있다. 만일 원격제어장치(200)가 디스플레이 장치(100)와 RF 모듈(221)을 통하여 무선으로 신호를 송수신할 경우 원격제어장치(200)과 디스플레이 장치(100)는 소정 주파수 대역을 통하여 신호를 송수신한다.

원격제어장치(200)의 제어부(280)는 원격제어장치(200)과 페어링된 디스플레이 장치(100)와 신호를 무선으로 송수신할 수 있는 주파수 대역 등에 관한 정보를 저장부(270)에 저장하고 참조할 수 있다.

제어부(280)는 원격제어장치(200)의 제어에 관련된 제반사항을 제어한다. 제어부(280)는 사용자 입력부(235)의 소정 키 조작에 대응하는 신호 또는 센서부(240)에서 센싱한 원격제어장치(200)의 움직임에 대응하는 신호를 무선 통신부(225)를 통하여 디스플레이 장치(100)로 전송할 수 있다.

또한, 원격제어장치(200)의 음성 획득부(290)는 음성을 획득할 수 있다.

음성 획득부(290)는 적어도 하나 이상의 마이크(291)을 포함할 수 있고, 마이크(291)를 통해 음성을 획득할 수 있다.

다음으로 도 4를 설명한다.

도 4는 본 발명의 실시 예에 따라 원격 제어 장치를 활용하는 예를 보여준다.

도 4의 (a)는 원격 제어 장치(200)에 대응하는 포인터(205)가 디스플레이부(180)에 표시되는 것을 예시한다.

사용자는 원격 제어 장치(200)를 상하, 좌우로 움직이거나 회전할 수 있다. 디스플레이 장치(100)의 디스플레이부(180)에 표시된 포인터(205)는 원격 제어 장치(200)의 움직임에 대응한다. 이러한 원격 제어 장치(200)는, 도면과 같이, 3D 공간 상의 움직임에 따라 해당 포인터(205)가 이동되어 표시되므로, 공간 리모콘이라 명명할 수 있다.

도 4의 (b)는 사용자가 원격 제어 장치(200)를 왼쪽으로 이동하면, 디스플레이 장치(100)의 디스플레이부(180)에 표시된 포인터(205)도 이에 대응하여 왼쪽으로 이동하는 것을 예시한다.

원격 제어 장치(200)의 센서를 통하여 감지된 원격 제어 장치(200)의 움직임에 관한 정보는 디스플레이 장치(100)로 전송된다. 디스플레이 장치(100)는 원격 제어 장치(200)의 움직임에 관한 정보로부터 포인터(205)의 좌표를 산출할 수 있다. 디스플레이 장치(100)는 산출한 좌표에 대응하도록 포인터(205)를 표시할 수 있다.

도 4의 (c)는, 원격 제어 장치(200) 내의 특정 버튼을 누른 상태에서, 사용자가 원격 제어 장치(200)를 디스플레이부(180)에서 멀어지도록 이동하는 경우를 예시한다. 이에 의해, 포인터(205)에 대응하는 디스플레이부(180) 내의 선택 영역이 줌인되어 확대 표시될 수 있다.

이와 반대로, 사용자가 원격 제어 장치(200)를 디스플레이부(180)에 가까워지도록 이동하는 경우, 포인터(205)에 대응하는 디스플레이부(180) 내의 선택 영역이 줌아웃되어 축소 표시될 수 있다.

한편, 원격 제어 장치(200)가 디스플레이부(180)에서 멀어지는 경우, 선택 영역이 줌아웃되고, 원격 제어 장치(200)가 디스플레이부(180)에 가까워지는 경우, 선택 영역이 줌인될 수도 있다.

또한, 원격 제어 장치(200) 내의 특정 버튼을 누른 상태에서는 상하, 좌우 이동의 인식이 배제될 수 있다. 즉, 원격 제어 장치(200)가 디스플레이부(180)에서 멀어지거나 접근하도록 이동하는 경우, 상, 하, 좌, 우 이동은 인식되지 않고, 앞뒤 이동만 인식되도록 할 수 있다. 원격 제어 장치(200) 내의 특정 버튼을 누르지 않은 상태에서는, 원격 제어 장치(200)의 상, 하, 좌, 우 이동에 따라 포인터(205)만 이동하게 된다.

한편, 포인터(205)의 이동속도나 이동방향은 원격 제어 장치(200)의 이동속도나 이동방향에 대응할 수 있다.

한편, 본 명세서에서의 포인터는, 원격 제어 장치(200)의 동작에 대응하여, 디스플레이부(180)에 표시되는 오브젝트를 의미한다. 따라서, 포인터(205)로 도면에 도시된 화살표 형상 외에 다양한 형상의 오브젝트가 가능하다. 예를 들어, 점, 커서, 프롬프트, 두꺼운 외곽선 등을 포함하는 개념일 수 있다. 그리고, 포인터(205)가 디스플레이부(180) 상의 가로축과 세로축 중 어느 한 지점(point)에 대응하여 표시되는 것은 물론, 선(line), 면(surface) 등 복수 지점에 대응하여 표시되는 것도 가능하다.

도 5는 본 발명의 실시 예에 따른 디스플레이 장치의 동작 방법을 설명하기 위한 도면이다.

도 5에 따르면, 본 발명의 실시 예에 따른 디스플레이 장치의 동작 방법은, 특정 오브젝트를 포함하는 제1 컨텐츠의 제1 영상을 디스플레이 장치의 화면에 디스플레이 하는 단계(S510), 상기 화면에 디스플레이 되는 영상을 확대하기 위한 입력을 수신하는 단계(S520), 상기 제1 영상으로부터 시간적으로 이후의 영상인 상기 제1 컨텐츠의 제2 영상이 확대됨에 따라 상기 제1 컨텐츠의 제2 영상에 포함된 상기 특정 오브젝트의 일부 또는 전부가 상기 화면을 벗어나면, 상기 제2 영상으로부터 상기 특정 오브젝트를 포함하는 영상을 획득하는 단계(S530), 상기 제2 영상을 확대한 영상 및 상기 제2 영상으로부터 획득한 특정 오브젝트를 포함하는 영상을 디스플레이 하는 단계(S540), 및 상기 제1 컨텐츠의 제2 영상으로부터 시간적으로 이후의 영상인 상기 제1 컨텐츠의 제3 영상에 포함된 특정 오브젝트가 상기 화면에 디스플레이 되면, 특정 오브젝트를 포함하는 영상의 디스플레이를 중단하는 단계(S550)를 포함할 수 있다.

한편, 하나 이상의 오브젝트가 포함되는 제1 컨텐츠의 제1 영상을 디스플레이 하는 단계(S510)와 관련해서는, 도 6a를 참고하여 구체적으로 설명한다.

도 6a는 본 발명의 실시 예에 따른, 하나 이상의 오브젝트를 포함하는 제1 컨텐츠의 제1 영상을 디스플레이 하는 방법을 설명하기 위한 도면이다.

도 6a에 따르면, 제어부(170)는 하나 이상의 오브젝트가 포함되는 제1 컨텐츠의 제1 영상(610)을 디스플레이 할 수 있다.

여기서 제1 컨텐츠, 또한 후술하는 제2 컨텐츠는 방송 제공자로부터 제공되는 방송 컨텐츠일 수 있다. 예를 들어, 제1 컨텐츠 또는 제2 컨텐츠는 특정 채널을 통하여 특정 방송 제공자로부터 제공되는 야구 경기일 수 있다.

다만 이에 한정되지 않으며, 제1 컨텐츠 또는 제2 컨텐츠는 디스플레이 장치(100)에서 다양한 루트로 획득하여 디스플레이 할 수 있는 모든 컨텐츠일 수 있다. 예를 들어, 제1 컨텐츠 또는 제2 컨텐츠는 디스플레이 장치(100)와 연결된 주변 기기로부터 획득한 컨텐츠일 수 있다. 다른 예로써, 제1 컨텐츠는 컨텐츠 제공자 또는 네트워크 운영자로부터 제공되는 영화, 광고, 게임, VOD, 방송 신호 등의 컨텐츠나 그와 관련된 정보일 수 있다. 다른 예로써, 제1 컨텐츠 또는 제2 컨텐츠는 소정의 웹페이지에서 제공하는 컨텐츠일 수 있다.

다른 예로써, 제1 컨텐츠 또는 제2 컨텐츠는 다양한 루트로 획득되어 저장부(140)에 저장된 컨텐츠일 수 있다.

한편, 제1 컨텐츠의 제1 영상(610)은 하나 이상의 오브젝트(611, 612, 613, 614, 615, 616, 617, 618, 619, 620)를 포함할 수 있다. 여기서, 오브젝트는 텍스트를 포함하는 이미지, 인물, 물건 등 독립적으로 인식될 수 있는 모든 객체일 수 있다. 예를 들어, 제1 오브젝트(611)는, 야구 경기의 스코어에 대한 정보를 제공하기 위한 텍스트를 포함하는 객체일 수 있다. 다른 예를 들어, 제2 오브젝트(612)는 특정 인물일 수 있으며, 제6 오브젝트(616)는 특정 물건일 수 있다. 제10 오브젝트(610)는 방송 제공자가 특정 정보를 제공하기 위한 텍스트를 포함하는 객체일 수 있다.

다시 도 5로 돌아가서, 본 발명의 실시 예에 따른 디스플레이 장치의 동작 방법은, 화면에 디스플레이 되는 영상을 확대하기 위한 입력을 수신하는 단계 (S520), 상기 제1 영상으로부터 시간적으로 이후의 영상인 상기 제1 컨텐츠의 제2 영상이 확대됨에 따라 상기 제1 컨텐츠의 제2 영상에 포함된 상기 특정 오브젝트의 일부 또는 전부가 상기 화면을 벗어나면, 상기 제2 영상으로부터 상기 특정 오브젝트를 포함하는 영상을 획득하는 단계(S530) 및 상기 제2 영상을 확대한 영상 및 상기 제2 영상으로부터 획득한 특정 오브젝트를 포함하는 영상을 디스플레이 하는 단계(S540)를 포함할 수 있다.

도 6b는 본 발명의 실시 예에 따른, 영상의 확대에 의하여 특정 오브젝트가 디스플레이 되지 않는 경우, 특정 오브젝트를 포함하는 영상을 획득하여 디스플레이 하는 방법을 설명하기 위한 도면이다.

제어부(170)는 화면에 디스플레이 되는 영상을 확대 하기 위한 입력을 수신할 수 있다.

한편, 화면에 디스플레이 되는 영상은, 제1 컨텐츠의 제1 영상(610)으로부터 시간적으로 이후의 영상인 제1 컨텐츠의 제2 영상(630)의 전부 또는 일부일 수 있다. 구체적으로, 도 6a에서 설명한 제1 컨텐츠의 제1 영상(610)이 디스플레이 된 상태에서 시간이 경과함에 따라, 제어부(170)는 제1 영상(610)으로부터 시간적으로 이후의 영상인 제1 컨텐츠의 제2 영상(630)의 일부 또는 전부를 디스플레이 할 수 있다.

한편, 영상을 확대하여 디스플레이 하기 위한 입력에 기초하여, 제어부(170)는 제1 컨텐츠의 제2 영상(630)을 확대한 영상(631)을 디스플레이 할 수 있다. 여기서, 제2 영상을 확대한 영상(631)은 제2 영상(630) 중 디스플레이 장치(100)의 화면에 디스플레이 되는 영역의 영상일 수 있다. 즉, 제2 영상(630)은 디스플레이 장치(100)의 화면에 디스플레이 되는 제2 영상을 확대한 영상(631) 및 디스플레이 장치(100)의 화면에 디스플레이 되지 않는 일부 영상(632)를 포함할 수 있다.

한편, 제어부(170)는 확대한 영상(631)을 디스플레이 하기에 앞서, 제1 컨텐츠의 제2 영상(630)이 확대됨에 따라 제1 컨텐츠의 제2 영상(630)에 포함된 특정 오브젝트(611)의 일부 또는 전부가 화면을 벗어나면, 제2 영상(630)으로부터 특정 오브젝트를 포함하는 영상(640)을 획득할 수 있다.

구체적으로, 제어부(170)는 제2 영상(630)이 확대됨에 따라 제2 영상(630)에 포함된 특정 오브젝트(611)의 일부 또는 전부가 화면에 디스플레이 되지 않는 일부 영상(632)에 포함되는지 판단할 수 있다.

한편 특정 오브젝트(611)의 일부 또는 전부가 제2 영상(630) 중 화면에 디스플레이 되지 않는 일부 영상(632)에 포함되면, 제어부(170)는 특정 오브젝트를 포함하는 영상(640)을 제2 영상(630)으로부터 획득하고, 획득한 영상(640)을 디스플레이 할 수 있다.

이 경우, 제어부(170)는 제2 영상을 확대한 영상(631) 및 특정 오브젝트를 포함하는 영상(640)를 함께 디스플레이 할 수 있다. 구체적으로, 제어부(170)는 제2 영상을 확대한 영상(631)을 디스플레이 장치의 화면의 전체 영역에 디스플레이 할 수 있다. 또한, 제2 영상(630)으로부터 획득한 특정 오브젝트를 포함하는 영상(640)을 디스플레이 장치(100)의 화면의 일 영역에 디스플레이 할 수 있다. 즉, 제어부(170)는 제2 영상을 확대한 영상(631)을 디스플레이 하고, 제2 영상(630)으로부터 획득한 특정 오브젝트를 포함하는 영상(640)을 제2 영상을 확대한 영상(631)에 중첩하여 디스플레이 할 수 있다. 다시 말해서, 제어부(170)는 제2 영상을 확대한 영상(631)을 디스플레이 하고, 제2 영상(630)으로부터 획득한 특정 오브젝트를 포함하는 영상(640)을 PIP 창에서 디스플레이 할 수 있다.

한편, 제2 영상(630)에 포함된 특정 오브젝트(611)의 전부가 화면에 디스플레이 되지 않는 일부 영상(632)에 포함되면, 특정 오브젝트를 포함하는 영상(640)을 획득하여 디스플레이 하는 방식으로도 구현이 가능하며, 제2 영상(630)에 포함된 특정 오브젝트(611)의 일부가 화면에 디스플레이 되지 않는 일부 영상(632)에 포함되면, 특정 오브젝트를 포함하는 영상(640)을 획득하여 디스플레이 하는 방식으로도 구현이 가능하다.

한편, 제어부(170)는 제1 영상(610)에 포함된 하나 이상의 오브젝트 중 특정 오브젝트를 자동으로 인식하고, 특정 오브젝트의 전부 또는 일부가 화면을 벗어나면 제2 영상(630)으로부터 특정 오브젝트를 포함하는 영상을 획득하여 디스플레이 할 수 있다.

한편, 특정 오브젝트(611)는, 텍스트를 포함하는 오브젝트 일 수 있다. 구체적으로, 제어부(170)는 제1 영상(610)에 포함된 하나 이상의 오브젝트 중 텍스트를 포함하는 오브젝트를 특정 오브젝트인 것으로 판단할 수 있다. 예를 들어 특정 오브젝트(611)는 야구 경기에 대한 정보(스코어, 아웃 카운트, 볼카운트, 투구수 등)를 제공하기 위한 텍스트를 포함하는 오브젝트 일 수 있다.

또한, 특정 오브젝트(611)는, 화면의 가장 자리 영역에 위치한 오브젝트일 수 있다. 구체적으로, 특정 오브젝트(6110)는, 화면의 모서리로부터 일정 범위 이내의 영역에 위치한 오브젝트일 수 있다. 이 경우 제어부(170)는 제1 영상(610)에 포함된 하나 이상의 오브젝트 중 화면의 가장 자리 영역에 위치한 오브젝트를 특정 오브젝트인 것으로 판단할 수 있다. 예를 들어, 특정 오브젝트(611)는 제1 영상(610)의 좌측 상단에 위치하여 제1 영상(610)의 전체 영상이 디스플레이 될 때 화면의 모서리로부터 일정 범위 내에 디스플레이 되는 야구 스코어일 수 있다. 다른 예를 들어 특정 오브젝트는 제1 영상(610)의 하측에 위치하여 제1 영상(610)의 전체 영상이 디스플레이 될 때 화면의 모서리로부터 일정 범위 내에 위치하는 야구 경기 관련 퀴즈나 뉴스 속보일 수 있다.

또한, 특정 오브젝트(611)는, 화면의 가장 자리 영역에 위치하고 텍스트를 포함하는 오브젝트일 수 있다. 구체적으로 제어부(170)는 제1 영상(610)에 포함된 하나 이상의 오브젝트 중 텍스트를 포함하고 화면의 가장 자리 영역에 위치한 오브젝트를 특정 오브젝트인 것으로 판단할 수 있다.

또한 특정 오브젝트(611)는 화면의 특정 영역에 위치하고 텍스트를 포함하는 오브젝트일 수 있다. 예를 들어, 제어부(170)는 제1 영상(610)의 전체 영상이 디스플레이 될 때 화면의 우측 상단에 위치하는 야구 스코어를 포함하는 오브젝트를 특정 오브젝트인 것으로 판단할 수 있다.

한편, 제어부(170)는 제2 영상(630)으로부터 획득된 특정 오브젝트를 포함하는 영상(640)을 기 설정된 위치에 디스플레이 할 수 있다. 예를 들어, 제어부(170)는 제2 영상(630)으로부터 획득한 특정 오브젝트를 포함하는 영상(640)을 화면의 우측 하단 영역에 디스플레이 할 수 있다.

다만 이에 한정되지 아니하며, 제2 영상(620)으로부터 획득한 특정 오브젝트를 포함하는 영상(640)은, 제1 영상에 포함되는 특정 오브젝트의 위치와 대응하는 위치에 디스플레이 될 수 있다. 이와 관련된 구체적인 설명은 도 17에서 후술한다.

또한, 특정 오브젝트를 포함하는 영상의 위치, 크기 및 배율 중 적어도 하나는 변경될 수 있다. 이와 관련해서는 도 11a 내지 도 11c에서 후술한다.

한편, 특정 오브젝트를 포함하는 영상은 특정 오브젝트 및 특정 오브젝트의 주변의 영상을 포함할 수 있다. 이와 관련해서는 도 13a 내지 도 13b에서 구체적으로 설명한다.

또한, 영상의 확대에 의하여 특정 오브젝트의 전부 또는 일부가 디스플레이 되지 않는 경우의 구체적인 동작에 대해서는 도 14 내지 도 16a에서 설명한다.

또한, 확대된 영상의 이동에 의하여 특정 오브젝트의 전부 또는 일부가 디스플레이 되지 않는 경우, 또는 영상의 이동에 의하여 특정 오브젝트가 디스플레이 되는 경우의 구체적인 동작에 대해서는 도 16b 내지 도 16c에서 구체적으로 설명한다.

또한, 제1 컨텐츠의 영상으로부터 획득한 특정 오브젝트를 포함하는 영상은, 제2 컨텐츠의 영상과 함께 디스플레이 될 수 있다. 이와 관련해서는 도 18 내지 도 19에서 구체적으로 후술한다.

한편, 제2 컨텐츠의 영상이 디스플레이 되는 중 제1 컨텐츠의 영상에 포함된 특정 오브젝트가 변경되면, 이전 구간의 제1 컨텐츠의 영상이 디스플레이 될 수 있다. 이와 관련해서는 도 20 내지 도 21에서 구체적으로 후술한다.

또한, 영상에 특정 오브젝트가 포함되지 않으면 특정 오브젝트를 포함하는 영상의 디스플레이를 중단할 수 있고, 영상이 특정 오브젝트를 다시 포함하면 특정 오브젝트를 포함하는 영상의 디스플레이를 재개할 수 있다. 이와 관련해서는 도 25 내지 도 26에서 구체적으로 후술한다.

다시 도 5로 돌아가서, 본 발명의 실시 예에 따른 디스플레이 장치의 동작 방법은, 상기 제1 컨텐츠의 제2 영상으로부터 시간적으로 이후의 영상인 상기 제1 컨텐츠의 제3 영상에 포함된 특정 오브젝트가 상기 화면에 디스플레이 되면, 특정 오브젝트를 포함하는 영상의 디스플레이를 중단하는 단계(S550)를 포함할 수 있다.

이와 관련해서는 도 6c를 참고하여 구체적으로 설명한다.

도 6c는 본 발명의 실시 예에 따른, 영상의 축소에 의하여 특정 오브젝트가 디스플레이 되는 경우, 특정 오브젝트를 포함하는 영상의 디스플레이를 중단하는 방법을 설명하기 위한 도면이다.

제어부(170)는 화면에 디스플레이 되는 영상을 축소하기 위한 입력을 수신할 수 있다.

한편, 화면에 디스플레이 되는 영상은, 제1 컨텐츠의 제2 영상(630)으로부터 시간적으로 이후의 영상인 제1 컨텐츠의 제3 영상의 전부 또는 일부 일 수 있다. 구체적으로, 도 6b에서 설명한 제1 컨텐츠의 제2 영상(630)의 전부 또는 일부가 디스플레이 된 상태에서 시간이 경과함에 따라, 제어부(170)는 제2 영상(630)으로부터 시간적으로 이후의 영상인 제1 컨텐츠의 제3 영상의 전부 또는 일부를 디스플레이 할 수 있다.

예를 들어, 제어부(170)는, 도 6c에서 도시하는 바와 같이, 제1 컨텐츠의 제2 영상(630)으로부터 시간적으로 이후의 영상인 제1 컨텐츠의 제3 영상의 일부 영상(651)을 디스플레이 할 수 있다.

한편, 제1 컨텐츠의 제3 영상이 축소됨에 따라 제1 컨텐츠의 제3 영상에 포함된 특정 오브젝트(611)가 화면에 디스플레이 되면, 제어부(170)는 특정 오브젝트를 포함하는 영상(640)의 디스플레이를 중단할 수 있다.

구체적으로, 화면에 디스플레이 되는 영상을 축소하기 위한 입력에 기초하여, 제어부(170)는 제1 컨텐츠의 제2 영상에 비하여 축소된 제1 컨텐츠의 제3 영상을 디스플레이 할 수 있다. 즉, 제3 영상은, 디스플레이 장치(100)의 화면에 디스플레이 되는 제3 영상의 일부 영상(651) 및 디스플레이 장치(100)의 화면에 디스플레이 되지 않는 제3 영상의 다른 일부 영상을 포함할 수 있다.

한편, 제어부(170)는 제3 영상의 일부 영상(651)을 디스플레이 하기에 앞서, 제1 컨텐츠의 제3 영상에 포함된 특정 오브젝트(611)가 화면에 디스플레이 되는지 여부에 대하여 판단하고, 제1 컨텐츠의 제3 영상에 포함된 특정 오브젝트(611)가 화면에 디스플레이 되는 것으로 판단되면 특정 오브젝트를 포함하는 영상(640)의 디스플레이를 중단할 수 있다.

즉, 제어부(170)는 특정 오브젝트(611)가 화면에 디스플레이 되는 제3 영상의 일부 영상(651)에 포함되면 특정 오브젝트를 포함하는 영상(640)의 디스플레이를 중단할 수 있다.

한편, 도 6c에서는, 특정 오브젝트(611)의 전부가 화면에 디스플레이 되는 제3 영상의 일부 영상(651)에 포함되는 것으로 설명하였으나 이에 한정되지 아니하며, 특정 오브젝트(611)의 일부가 화면에 디스플레이 되는 경우에도 특정 오브젝트를 포함하는 영상의 디스플레이를 중단하는 방식으로도 구현이 가능하다.

화면 상에 디스플레이 되는 텍스트에는 사용자가 얻기를 원하는 중요한 정보가 포함되어 있는 경우가 많으며, 텍스트는 영상의 가장 자리 영역에 위치하는 경우가 많다. 예를 들어, 야구 스코어는 영상의 좌측 상단의 가장 자리 영역에, 뉴스 속보는 영상의 하측의 가장 자리 영역에 고정되어 디스플레이 되는 경우가 있다.

따라서, 본 발명은 텍스트를 포함하는 오브젝트가 화면의 확대에 따라 디스플레이 되지 않는 경우 별도 화면으로 제공함으로써, 사용자가 화면을 다시 축소하여 텍스트를 봐야 하는 불편함을 해소할 수 있다.

또한, 야구 스코어 등의 텍스트와는 별개로, 사용자가 관심이 없는 텍스트가 영상에 포함되어 있을 수 있다(예를 들어 야구 경기에서 포수 뒤에 표시되는 광고판). 이 경우 본 발명은 영상의 특정 영역(즉 야구 스코어 등의 주요 정보가 디스플레이 되는 특정 영역)에 위치하는 텍스트가 디스플레이 되지 않는 경우에만, 텍스트를 포함하는 영상을 별도로 디스플레이 함으로써, 사용자가 관심 있어하는 정보만을 별도의 화면으로 제공할 수 있다.

또한 본 발명은, 화면을 벗어나서 디스플레이 되지 않던 특정 오브젝트가 다시 화면에 디스플레이 되는 경우에는 특정 오브젝트를 포함하는 영상의 디스플레이를 중단함으로써, 사용자의 TV 시청을 최대한 방해하지 않으면서 특정 오브젝트를 적절하게 디스플레이 할 수 있다.

한편, 앞선 실시 예에서는 디스플레이 장치(100)가 특정 오브젝트를 자동으로 판단하는 것으로 설명하였으나 이에 한정되지 않는다.

구체적으로, 도 5에서 설명한 특정 오브젝트를 포함하는 제1 컨텐츠의 제1 영상을 디스플레이 장치의 화면에 디스플레이 하는 단계(S510) 및 상기 화면에 디스플레이 되는 영상을 확대하기 위한 입력을 수신하는 단계(S520) 사이에는 제1 컨텐츠의 제1 영상에 포함되는 하나 이상의 오브젝트 중 특정 오브젝트를 선택하는 입력을 수신하는 단계가 더 포함될 수 있다.

또한, 특정 오브젝트가 사용자에 의하여 선택되는 경우에도, 도 5에서 설명하는 S530, S540 및 S550는 그대로 적용될 수 있다.

이하에서 설명하는 특정 오브젝트가 사용자에 의하여 선택되는 경우의 동작 방법은, 도 6a 내지 도 6c에서 설명한 디스플레이 장치가 특정 오브젝트가 무엇인지를 자동으로 판단하는 실시 예에서도 모두 적용될 수 있다.

제1 컨텐츠의 제1 영상에 포함되는 하나 이상의 오브젝트 중 특정 오브젝트를 선택하는 입력을 수신하는 단계와 관련해서는 도 7 내지 도 8을 참고하여 구체적으로 설명한다.

도 7 내지 도 8은, 제1 컨텐츠의 제1 영상에 포함된 특정 오브젝트를 선택하는 입력을 수신하는 방법을 설명하기 위한 도면이다.

제어부(170)는 제1 영상(610)에 포함된 하나 이상의 오브젝트 중 특정 오브젝트(611)를 선택하는 입력을 수신할 수 있다. 구체적으로, 제어부(170)는 원격 제어 장치(200)의 움직임에 대응하는 포인터(201)를 하나 이상의 오브젝트(611, 612, 613, 614, 615, 616, 617, 618, 619, 620) 중 특정 오브젝트(611) 위에 위치시키는 입력을 원격 제어 장치(200)로부터 수신할 수 있다. 한편, 포인터(201)가 특정 오브젝트(611)에 위치하면, 제어부(180)는 특정 오브젝트(611)가 선택된 것으로 판단할 수 있다. 다른 예로써, 포인터(201)가 특정 오브젝트(611)에 위치하고, 원격 제어 장치(200) 상의 특정 키를 선택하는 입력이 수신되면, 제어부(180)는 특정 오브젝트(611)가 선택된 것으로 판단할 수 있다.

한편, 특정 오브젝트(611)가 선택되면, 제어부(180)는 특정 오브젝트(611)가 디스플레이 된 영역(710)에 대한 정보를 획득할 수 있다. 구체적으로, 제어부(180)는 특정 오브젝트(611)의 경계를 추출하고, 추출된 경계에 기초하여 특정 오브젝트(611)가 디스플레이 된 영역(710)에 대한 좌표 정보를 획득할 수 있다. 한편, 제어부(180)는 특정 오브젝트(611)의 경계를 나타내는 UI를 디스플레이 할 수 있다.

한편, 제어부(180)는 특정 오브젝트(611)가 디스플레이 된 영역(710)에 대한 정보에 기초하여, 후술하는, 제2 영상으로부터 획득되는 특정 오브젝트를 포함하는 영상의 영역을 나타내는 UI(721)를 디스플레이 할 수 있다.

여기서, 제2 영상으로부터 획득되는 특정 오브젝트를 포함하는 영상은, 특정 오브젝트(611)를 모두 포함할 수 있는 다각형, 원, 타원 등의 형태일 수 있으며, 특정 오브젝트를 포함하는 영상의 영역을 나타내는 UI(721) 역시 이에 대응하는 형태로 디스플레이 될 수 있다.

예를 들어, 제2 영상으로부터 획득되는 특정 오브젝트(611)를 포함하는 영상은, 특정 오브젝트(611)가 잘림 없이 모두 포함되면서 특정 오브젝트(611) 주변의 영상을 포함하는 사각형의 형태일 수 있다.

다른 예로써, 특정 오브젝트(611)가 잘림 없이 모두 포함되면서 특정 오브젝트(611) 주변의 영상을 포함하는 원의 형태일 수 있다.

다른 예를 들어, 특정 오브젝트(611)를 포함하는 영상은, 특정 오브젝트(611)만이 포함되는 다각형의 형태일 수 있다. 이 경우 특정 오브젝트(611)를 포함하는 영상은, 특정 오브젝트(611)의 경계와 일치하는 다각형의 형태일 수 있다.

한편, 이후에 제어부(170)는, 특정 오브젝트를 포함하는 영상의 영역을 나타내는 UI(721)와 대응하는 영역의 영상을 제2 영상으로부터 획득하고, 획득한 영상을 디스플레이 할 수 있다.

예를 들어, 특정 오브젝트를 포함하는 영상의 영역을 나타내는 UI(721)가 제1 영상(810)에 포함된 특정 오브젝트의 좌측 10cm, 우측 5cm, 상측 5cm까지의 영상, 하측 8cm까지의의 영상을 포함하는 경우, 제어부(180)는 제2 영상에 디스플레이 된 특정 오브젝트의 좌측 10cm, 우측 5cm, 상측 5cm, 하측 8cm까지의 영상을 획득하고, 획득한 영상을 디스플레이 할 수 있다.

한편, 제2 영상으로부터 획득되는 영상의 영역 및 제2 영상으로부터 획득되는 영상의 형태 중 적어도 하나는 사용자 입력에 기초하여 변경될 수 있다.

예를 들어, 제2 영상으로부터 획득되는 특정 오브젝트를 포함하는 영상의 영역을 나타내는 UI(721)를 우측으로 확장하기 위한 입력이 수신되면, 제어부(180)는 우측으로 확장된 UI(721)를 디스플레이 할 수 있다. 이후, 제어부(170)는, 제2 영상으로부터 우측으로 확장된 UI(721)와 대응하는 영역의 영상을 제2 영상으로부터 획득하고, 획득한 영상을 디스플레이 할 수 있다.

다른 예를 들어, 제2 영상으로부터 획득되는 특정 오브젝트를 포함하는 영상의 영역을 나타내는 UI(721)를 원으로 변경하기 위한 입력이 수신되면, 제어부(180)는 원의 형태로 변경된 UI(721)를 디스플레이 할 수 있다. 이후, 제어부(170)는 원의 형태로 변경된 UI(721)와 대응하는 영역의 영상을 제2 영상으로부터 획득하고, 획득한 영상을 디스플레이 할 수 있다.

이와 같이 본 발명은, 특정 오브젝트를 포함하는 영상이 디스플레이 되는 경우, 특정 오브젝트를 포함하는 영상의 형태를 사용자가 결정할 수 있는 환경을 제공한다.

또한 본 발명은, 특정 오브젝트를 포함하는 영상이 디스플레이 되는 경우, 특정 오브젝트를 포함하는 영상 상에서 특정 오브젝트가 디스플레이 되는 위치를 사용자가 결정할 수 있는 환경을 제공한다.

한편, 제2 영상으로부터 획득되는 특정 오브젝트를 포함하는 영상은, 특정 오브젝트(611)를 모두 포함하는 최소 크기의 다각형, 원, 타원 중 적어도 하나일 수 있다.

예를 들어, 특정 오브젝트가 A 인물인 경우, 제2 영상으로부터 획득되는 특정 오브젝트를 포함하는 영상은 A 인물을 모두 포함할 수 있는 최소 크기의 직사각형일 수 있다.

이와 같이 본 발명은, 특정 오브젝트를 포함하는 최소 크기의 영상을 획득함으로써, 사용자가 본 영상을 시청하는 것에 대한 방해를 최소화하면서 특정 오브젝트를 포함하는 영상을 사용자에게 제공할 수 있다.

한편, 도 7에서는, 특정 오브젝트가 야구 경기의 진행 정보, 예를 들어 팀, 스코어, 아웃 카운트, 볼카운트, 투구수 등을 나타내는 텍스트를 포함하는 것으로 설명하였다. 한편, 특정 정보를 나타내는 텍스트를 포함하는 오브젝트는, 고정된 위치에 디스플레이 되는 경우가 일반적이다.

다만, 특정 오브젝트는 도 8에서 도시하는 바와 같이 특정 인물일 수도 있으며, 움직이는 오브젝트일 수도 있다.

예를 들어, 제1 영상(810)에 포함된 특정 인물(811)을 선택하는 입력이 수신되면, 제어부(180)는 특정 인물(811)가 디스플레이된 영역에 대한 정보를 획득하고, 특정 인물(811)의 경계를 나타내는 UI(820)를 디스플레이 할 수 있다. 또한 제어부(180)는 특정 인물(811)을 포함하는 영상(830)의 영역을 나타내는 UI(831)를 디스플레이 할 수 있다.

도 9는 본 발명의 실시 예에 따른, 제2 영상으로부터 특정 오브젝트를 포함하는 영상을 획득하여 디스플레이 하는 방법을 설명하기 위한 도면이다.

도 8에서는, 제1 컨텐츠의 제1 영상(810)에 포함된 하나 이상의 오브젝트 중 특정 오브젝트(811)가 선택된 것으로 설명하였다.

한편, 제어부(180)는 제1 컨텐츠의 제2 영상(910)을 디스플레이 할 수 있다. 여기서 제2 영상(910)는 제1 영상으로부터 시간적으로 이후의 영상일 수 있다.

구체적으로, 제1 컨텐츠가 방송 제공자로부터 특정 채널을 통하여 제공되는 방송 컨텐츠인 경우, 제1 컨텐츠의 제2 영상(910)은 제1 컨텐츠의 제1 영상(810)에 비하여 시간적으로 이후에 방송되는 영상일 수 있다.

예를 들어, 제1 컨텐츠의 제1 영상(810)이 특정 음악 프로그램의 10분 27초의 영상이라면, 제1 컨텐츠의 제2 영상(910)은 특정 음악 프로그램의 10분 38초의 영상일 수 있다.

다른 예를 들어, 제1 컨텐츠가 저장부(140) 내에 저장되어 재생되는 특정 애니메이션인 경우, 제1 컨텐츠의 제1 영상(810)이 재생 시점이 5분 31초인 때의 특정 애니메이션의 영상이라면, 제1 컨텐츠의 제2 영상(920)은 재생 시점이 5분 32초인 때의 특정 애니메이션의 영상일 수 있다.

한편, 제어부(180)는 제1 컨텐츠의 제2 영상(910)으로부터 특정 오브젝트(811)를 포함하는 영상을 획득할 수 있다.

구체적으로, 제1 컨텐츠의 제1 영상(810) 및 제1 컨텐츠의 제2 영상(910)에는 모두 특정 오브젝트(811)가 포함되어 있을 수 있다. 한편, 제1 컨텐츠의 제1 영상(810)에 포함된 특정 오브젝트(811)와 제1 컨텐츠의 제2 영상(910)에 포함된 특정 오브젝트(811)는 동일한 객체이면 족하며, 동일한 형태일 필요는 없다.

예를 들어, 제1 영상(810)에 포함되는 특정 오브젝트(811)는 제1 포즈를 취하면서 화면의 좌측에 위치한 인물 A일 수 있으며, 제2 영상(910)에 포함되는 특정 오브젝트(811)는 제2 포즈를 취하면서 화면의 우측에 위치한 인물 A일 수 있다.

한편, 제1 컨텐츠의 제2 영상(910)으로부터 획득되는 특정 오브젝트를 포함하는 영상은 제2 영상(910)의 일부 영상일 수 있다.

구체적으로, 제1 컨텐츠의 제2 영상(910)으로부터 획득되는 특정 오브젝트를 포함하는 영상은, 도 7에서 설명한 제2 영상으로부터 획득되는 특정 오브젝트를 포함하는 영상의 영역을 나타내는 UI와 대응하는 영역의 영상일 수 있다. 즉, 제어부(170)는 도 7에서 설명한 특정 오브젝트를 포함하는 영상의 영역을 나타내는 UI(721)와 일치하는 영역의 영상을 제2 영상으로부터 획득할 수 있다.

예를 들어, 특정 오브젝트를 포함하는 영상의 영역을 나타내는 UI(721)가 제1 영상(810)에 포함된 특정 오브젝트의 좌측 10cm, 우측 5cm, 상측 5cm까지의 영상, 하측 8cm까지의의 영상을 포함하는 경우, 제어부(180)는 제2 영상에 디스플레이 된 특정 오브젝트의 좌측 10cm, 우측 5cm, 상측 5cm, 하측 8cm까지의 영상을 획득할 수 있다.

다른 예를 들어, 특정 오브젝트를 포함하는 영상의 영역을 나타내는 UI(721)가 원의 형태인 경우, 제어부(180)는 원의 형태의 특정 오브젝트를 포함하는 영상을 제2 영상으로부터 획득할 수 있다.

한편, 본 실시 예에서는, 특정 오브젝트를 포함하는 영상의 영역을 나타내는 UI와 일치하는 영역의 영상을 제2 영상으로부터 획득하는 것으로 설명하였으나 이에 한정되지 않는다.

가령, 제어부(170)는 특정 오브젝트(811)를 포함하는 임의의 크기 및 형태의 영상을 제2 영상으로부터 획득할 수 있다.

또한, 제어부(170)는 특정 오브젝트(811)의 일부만을 포함하는 영상을 제2 영상으로부터 획득할 수 있다. 예를 들어, 특정 오브젝트(811)가 인물인 경우, 인물의 팔이나 다리의 일부분은 제2 영상으로부터 획득하는 영상에 포함되지 않을 수 있다.

한편, 제어부(170)는 제2 영상(910)으로부터 획득한 특정 오브젝트(811)를 포함하는 영상(920)을 디스플레이 할 수 있다.

이 경우, 제어부(170)는 제1 컨텐츠의 제2 영상(910)을 디스플레이 하고, 제2 영상(910)으로부터 획득한 특정 오브젝트(811)를 포함하는 영상(920)을 제1 컨텐츠의 제2 영상(910)과 함께 디스플레이 할 수 있다.

또한, 제어부(170)는 제1 컨텐츠의 제2 영상(910)을 주화면으로써 디스플레이부(180)의 전체 화면에 디스플레이 할 수 있으며, 제2 영상(910)으로부터 획득한 특정 오브젝트(811)를 포함하는 영상(920)을 부화면으로써 제1 컨텐츠의 제2 영상(910)이 표시된 영역 중 임의의 영역에 제1 컨텐츠의 제2 영상(910)과 중첩하여 디스플레이 할 수 있다. 이 경우, 제2 영상(910)으로부터 획득한 특정 오브젝트(811)를 포함하는 영상(920)은, 제2 영상(910)보다 작은 크기의 영상일 수 있다.

이와 같이 본 발명은, 특정 오브젝트를 전체화면과는 별개로 디스플레이 함으로써, 사용자가 관심이 있는 오브젝트를 집중하여 시청할 수 있는 환경을 제공할 수 있다.

한편 본 실시 예에서는, 제1 컨텐츠의 제2 영상(910)으로부터 획득한 특정 오브젝트(811)를 포함하는 영상(920)이 제1 컨텐츠의 제2 영상(910)과 함께 디스플레이 되는 것으로 설명하였으나 이에 한정되지 않는다.

구체적으로, 제1 컨텐츠의 제2 영상(910)으로부터 획득한 특정 오브젝트(811)를 포함하는 영상(920)은, 제1 컨텐츠의 영상과 함께 디스플레이 될 수 있다. 이 경우 디스플레이 되는 제1 컨텐츠의 영상은, 특정 오브젝트(811)를 포함하는 영상(920)을 획득한 영상과 다른 시점의 영상일 수 있다.

예를 들어, 제어부(170)는 제1 컨텐츠의 제2 영상(910)으로부터 시간적으로 이후의 영상인 제1 컨텐츠의 제3 영상을 제2 영상(910)으로부터 획득한 특정 오브젝트를 포함하는 영상(920)과 함께 디스플레이 할 수 있다. 다른 예를 들어, 제어부(170)는 제1 컨텐츠의 시간적으로 제1 영상(810)과 제2 영상(910) 사이의 영상인 제1 컨텐츠의 제4 영상을 제2 영상(910)으로부터 시간적으로 이후의 영상인 제1 컨텐츠의 제3 영상을 제2 영상(910)으로부터 획득한 특정 오브젝트를 포함하는 영상(920)과 함께 디스플레이 할 수 있다.

이와 같이 본 발명은, 제1 컨텐츠의 제2 영상 및 제2 영상으로부터 획득되는 오브젝트를 포함하는 영상의 시차를 달리 하여 디스플레이 함으로써, 사용자가 전체화면과 연계하여 특정 오브젝트를 더욱 집중하여 볼 수 있는 환경을 제공한다.

예를 들어, 제2 영상으로부터 획득되는 특정 오브젝트를 포함하는 영상이 제1 컨텐츠의 제2 영상보다 먼저 디스플레이 되는 경우, 사용자는 먼저 관심이 있는 특정 오브젝트의 움직임을 미리 인지한 후, 전체화면에서의 특정 오브젝트의 움직임을 확인할 수 있다.

다른 예를 들어, 제1 컨텐츠의 제2 영상이 제2 영상으로부터 획득되는 특정 오브젝트를 포함하는 영상보다 먼저 디스플레이 되는 경우, 사용자는 전체 화면에서의 특정 오브젝트의 움직임을 미리 인지한 후, 관심이 있는 특정 오브젝트만의 움직임을 부화면에서 확인할 수 있다.

한편, 제어부(170)는 제2 영상으로부터 획득된 특정 오브젝트를 포함하는 영상(920)을 기 설정된 위치에 디스플레이 할 수 있다.

또한 제2 영상으로부터 획득된 특정 오브젝트를 포함하는 영상(920)이 디스플레이 될 위치를 지정하는 입력에 기초하여, 제어부(170)는 제2 영상으로부터 획득된 특정 오브젝트를 포함하는 영상(920)을 사용자로부터 지정된 위치에 디스플레이 할 수 있다.

이와 관련해서는 도 10을 참고하여 구체적으로 설명한다.

도 10a 내지 도 10b는, 본 발명의 실시 예에 따른 제2 영상으로부터 획득된 특정 오브젝트를 포함하는 영상(920)이 디스플레이 되는 위치를 지정하는 방법을 설명하기 위한 도면이다.

도 10a에서 도시하는 바와 같이, 제1 컨텐츠의 제1 영상(810)이 디스플레이된 상태에서 포인터(201)가 특정 오브젝트(811) 상에 위치하면, 제어부(170)는 특정 오브젝트(811)가 선택된 것으로 판단할 수 있다. 또한, 제어부(170)는 특정 오브젝트(811)를 드래그하는 입력을 수신할 수 있다.

한편, 도 10b을 참고하면, 특정 오브젝트(811)가 드래그 되는 동안 시간이 경과함에 따라 제1 컨텐츠의 제2 영상(910)이 디스플레이 된 상태이다.

이 경우 제어부(170)는 특정 오브젝트(811)를 화면의 일 영역에 드롭하는 입력을 수신할 수 있다.

한편, 특정 오브젝트(811)를 드롭하는 입력이 수신되면, 도 10b에서 도시하는 바와 같이, 제어부(170)는 제2 영상으로부터 획득된 특정 오브젝트를 포함하는 영상(920)을 특정 오브젝트(811)가 드롭된 위치에 디스플레이 할 수 있다.

도 11a 내지 도 11c는 본 발명의 실시 예에 따른 제2 영상으로부터 획득된 특정 오브젝트를 포함하는 영상의 위치 또는 크기를 변경하는 방법을 설명하기 위한 도면이다.

도 11a를 참고하면, 디스플레이 장치(100)의 화면 상에는 제1 컨텐츠의 제2 영상(1010) 및 제2 영상으로부터 획득한 특정 오브젝트를 포함하는 영상(1020)이 디스플레이 되어 있는 상태이다.

한편 제어부(170)는 제2 영상(1010)으로부터 획득한 특정 오브젝트를 포함하는 영상(1020)을 화면을 드래그 하는 입력을 수신할 수 있다.

한편, 도 11b에서는, 제2 영상(1010)으로부터 획득한 특정 오브젝트를 포함하는 영상(1020)이 드래그 되는 동안 시간이 경과함에 따라, 제1 컨텐츠의 제3 영상(1030)이 디스플레이 되어 있는 상태이다.

한편, 제2 영상(1010)으로부터 획득한 특정 오브젝트를 포함하는 영상(1020)을 화면의 일 영역에 드롭하는 입력이 수신되면, 제어부(170)는 제3 영상(1030)으로부터 획득한 특정 오브젝트를 포함하는 영상(1040)을 제2 영상(1010)으로부터 획득한 특정 오브젝트를 포함하는 영상(1020)이 드롭된 위치에 디스플레이 할 수 있다.

다시 도 11a로 돌아가서, 디스플레이 장치(100)의 화면 상에는 제1 컨텐츠의 제2 영상(1010) 및 제2 영상으로부터 획득한 특정 오브젝트를 포함하는 영상(1020)이 디스플레이 되어 있는 상태이다.

한편, 제어부(170)는 제2 영상(1010)으로부터 획득한 특정 오브젝트를 포함하는 영상(1020)을 변경하기 위한 입력을 수신할 수 있다.

한편, 도 11c를 참고하면, 제2 영상(1010)으로부터 획득한 특정 오브젝트를 포함하는 영상(1020)을 변경하기 위한 입력이 수신되는 동안, 시간이 경과함에 따라 제1 컨텐츠의 제3 영상(1030)이 디스플레이 되어 있는 상태이다.

이 경우, 제어부(170)는 제3 영상(1030)으로부터 획득한, 특정 오브젝트를 포함하면서 기존의 영상(1020)에 비하여 크기가 변경된 영상(1050)을 디스플레이 할 수 있다.

한편, 본 실시 예에서는 특정 오브젝트를 포함하는 영상(1020)의 위치가 변경되어 표시되거나 특정 오브젝트를 포함하는 영상(1020)의 크기가 변경되어 디스플레이 되는 것으로 설명하였으나 이에 한정되지 않는다.

구체적으로, 특정 오브젝트를 포함하는 영상(1020)의 배율을 변경하기 위한 입력이 수신되면, 제어부(170)는 특정 오브젝트를 포함하는 영상(1020)의 배율을 변경하여 디스플레이 할 수 있다.

예를 들어, 제어부(170)는 특정 오브젝트를 포함하는 영상(1020)을 확대하여 디스플레이 하거나 축소하여 디스플레이 할 수 있다. 이 경우, 확대되거나 축소된 특정 오브젝트를 포함하는 영상의 크기는, 배율이 변경되기 전의 특정 오브젝트를 포함하는 영상(1020)의 크기와 동일할 수 있다.

한편 도 7에서는, 사용자가, 제1 컨텐츠의 영상으로부터 획득되는 영상의 영역 및 제1 컨텐츠의 영상으로부터 획득되는 영상의 형태 중 적어도 하나를 제1 컨텐츠의 제1 영상이 디스플레이 된 상태에서 변경할 수 있는 것으로 설명하였다.

다만 이에 한정되지 아니하며, 특정 오브젝트를 포함하는 영상이 디스플레이 되고 있는 중에도, 제1 컨텐츠의 영상으로부터 획득되는 영상의 영역 및 제1 컨텐츠의 영상으로부터 획득되는 영상의 형태 중 적어도 하나는 변경될 수 있다.

예를 들어, 도 11a에서 도시하는 바와 같이 특정 오브젝트를 포함하는 영상(1020)이 디스플레이 된 상태에서, 특정 오브젝트를 포함하는 영상(1020)의 좌측 경계를 좌로 이동시키는 입력이 수신되면, 제어부(170)는 제2 영상(1010)으로부터 시간적으로 이후의 영상인 제3 영상으로부터 특정오브젝트의 좌측 영역을 더 포함하는 특정 오브젝트를 포함하는 영상을 획득하여 디스플레이 할 수 있다.

다른 예를 들어, 도 11a에서 도시하는 바와 같이 특정 오브젝트를 포함하는 영상(1020)이 디스플레이 된 상태에서, 특정 오브젝트를 포함하는 영상(1020)의 형태를 변경하기 위한 입력이 수신되면, 제어부(170)는 제2 영상(1010)으로부터 시간적으로 이후의 영상인 제3 영상으로부터 변경된 형태의 특정 오브젝트를 포함하는 영상을 획득하여 디스플레이 할 수 있다.

이와 같이 본 발명은, 특정 오브젝트를 선택하는 과정에 있어서뿐만이 아니라 특정 오브젝트를 포함하는 영상이 디스플레이 되는 중에도, 특정 오브젝트를 포함하는 영상의 형태를 변경하거나 특정 오브젝트를 포함하는 영상 상에서 특정 오브젝트가 디스플레이 되는 위치를 변경할 수 있는 환경을 제공한다.

다시 도 11a로 돌아가서, 제어부(170)는 특정 오브젝트를 포함하는 영상(1020)과 함께 특정 오브젝트를 포함하는 영상(1020)의 디스플레이를 중단하기 위한 UI(1151)를 디스플레이 할 수 있다. 한편, 특정 오브젝트를 포함하는 영상(1020)의 디스플레이를 중단하기 위한 UI(1151)를 선택하는 입력이 수신되면, 제어부(170)는 특정 오브젝트를 포함하는 영상(1020)의 디스플레이를 중단하고, 제1 컨텐츠의 영상 만을 디스플레이 할 수 있다.

도 12a 내지 도 13b는 본 발명의 실시 예에 따른, 특정 오브젝트를 포함하는 영상의 디스플레이 방법을 설명하기 위한 도면이다.

도 12a는 제1 컨텐츠의 제1 영상(1210)이 디스플레이 된 상태에서 특정 오브젝트(1220)가 선택된 상태를 도시한 도면이고, 도 12b는 특정 오브젝트(1220)가 표시된 영역 및 그 주변 영역을 확대하여 나타낸 도면이다.

특정 오브젝트(1220)가 선택되면, 제어부(170)는 특정 오브젝트(1220)의 경계에 대응하는 UI(1231) 및 특정 오브젝트(1220)를 포함하는 영상의 영역을 나타내는 UI(1232) 중 적어도 하나를 디스플레이 할 수 있다.

한편, 특정 오브젝트(1220)를 포함하는 영상의 영역을 나타내는 UI(1232)는, 특정 오브젝트(1220) 및 특정 오브젝트(1220)의 주변의 영상(1240)이 포함될 수 있다.

한편, 도 13a는 제1 컨텐츠의 제2 영상(1310)과 함께, 제2 영상(1310)으로부터 획득한 특정 오브젝트를 포함하는 영상(1320)이 디스플레이 된 상태를 도시한 도시한 도면이고, 도 13b는 제2 영상(1310)으로부터 획득한 특정 오브젝트를 포함하는 영상(1320)을 확대하여 나타낸 도면이다.

도 12b에서 설명한 바와 같이 특정 오브젝트(1220)를 포함하는 영상의 영역을 나타내는 UI(1232)는 특정 오브젝트(1220) 및 특정 오브젝트(1220)의 주변의 영상(1240)을 포함하는 바, 제2 영상(1310)으로부터 획득한 특정 오브젝트를 포함하는 영상(1320) 역시 특정 오브젝트(1321) 및 특정 오브젝트(1321)의 주변의 영상(1322)를 포함할 수 있다.

한편, 제어부(170)는 특정 오브젝트(1321)의 주변의 영상(1322)을 투명하게 디스플레이 할 수 있다. 구체적으로, 제어부(170)는 제2 영상(1310)으로부터 획득한 특정 오브젝트(1321)를 포함하는 영상(1320) 중 특정 오브젝트가 위치하는 영역을 판단하고, 특정 오브젝트(1321)가 위치하는 영역을 제외한 나머지 영역, 즉 특정 오브젝트(1321)의 주변 영상(1322)을 투명하게 디스플레이 할 수 있다.

한편, 특정 오브젝트(1321)를 포함하는 영상(1320)은 제2 영상(1310)과 중첩되어 디스플레이 되는 바, 특정 오브젝트(1321)가 위치하는 영역을 제외한 나머지 영역이 투명하게 디스플레이 되는 경우 특정 오브젝트(1321)가 위치하는 영역을 제외한 나머지 영역에는 제2 영상(1310)이 디스플레이 되게 된다.

이와 같이 본 발명은 특정 오브젝트의 주변의 영상을 투명하게 디스플레이 함으로써, 사용자가 관심이 있는 특정 오브젝트 부분의 영상 만을 별도로 디스플레이 할 수 있다.

한편 본 실시 예에서는, 제2 영상으로부터 특정 오브젝트를 포함하는 영상을 획득하고, 특정 오브젝트의 주변 영상을 투명하게 디스플레이 한다고 설명하였으나 이에 한정되지 않는다.

예를 들어, 제어부(170)는 제2 영상으로부터 특정 오브젝트가 디스플레이 되는 영역에 대응하는 영상을 획득할 수 있다. 즉, 제어부(170)는 특정 오브젝트가 표시된 영역의 영상만을 획득할 수 있다. 이 경우, 제어부(170)는 특정 오브젝트가 디스플레이되는 영역에 대응하는 영상을 디스플레이 함으로써, 제2 영상 중 특정 오브젝트 부분의 영상 만을 별도로 디스플레이 할 수 있다.

한편, 특정 오브젝트를 포함하는 영상이 특정 경우에만 디스플레이 되는 방식으로도 구현될 수 있다. 이와 관련해서는 도 14 내지 도 16a를 참고하여 구체적으로 설명한다.

도 14 내지 도 16a는 본 발명의 실시 예에 따른, 영상의 확대에 의하여 특정 오브젝트가 디스플레이 되지 않는 경우, 특정 오브젝트를 포함하는 영상을 획득하여 디스플레이 하는 방법을 설명하기 위한 도면이다.

도 14에서 도시하는 바와 같이, 제어부(170)는 제1 컨텐츠의 제1 영상(1410)을 디스플레이 할 수 있으며, 제1 컨텐츠의 제1 영상(1410)에 포함된 하나 이상의 오브젝트 중 특정 오브젝트(1411)를 선택하는 입력을 수신할 수 있다.

한편, 제어부(170)는 영상을 확대하여 디스플레이 하기 위한 입력을 수신할 수 있다.

한편 도 15를 참고하면, 제1 컨텐츠의 제1 영상(1410)에 포함된 특정 오브젝트(1411)가 선택된 후 시간이 경과함에 따라, 제1 컨텐츠의 제1 영상(1410)으로부터 시간적으로 이후의 영상인 제1 컨텐츠의 제2 영상이 디스플레이 된 상태이다. 또한, 영상을 확대하여 디스플레이 하기 위한 입력에 기초하여, 제어부(170)는 제1 컨텐츠의 제2 영상의 일부 영상(1511)을 디스플레이 할 수 있다.

한편, 영상이 확대됨에 따라, 제어부(170)는 제2 영상에 포함된 특정 오브젝트(1411)가 제2 영상의 일부 영상(1511), 즉 제2 영상 중 화면 상에 디스플레이 되는 일부 영상(1511)에 포함되는지를 판단할 수 있다. 또한 제어부(170)는 제2 영상에 포함된 특정 오브젝트(1411)가 제2 영상 중 상기 일부 영상(1511)과는 다른 영상, 즉 제2 영상 중 영상이 확대됨에 따라 디스플레이 되지 않는 영상에 포함되는 지를 판단할 수 있다.

한편, 특정 오브젝트(1411)가 제2 영상 중 화면 상에 디스플레이 되는 일부 영상(1511)에 포함되면, 제어부(170)는 제2 영상의 일부 영상(1511)만을 디스플레이 할 수 있다.

한편 도 16a를 참고하면, 제2 영상의 일부 영상(1511)이 디스플레이 된 상태에서 시간이 경과함에 따라 제1 컨텐츠의 제2 영상으로부터 시간적으로 이후의 영상인 제1 컨텐츠의 제3 영상(1610)이 디스플레이 된 상태이다. 또한 영상을 확대하여 디스플레이 하기 위한 입력에 기초하여, 제어부(170)는 제1 컨텐츠의 제3 영상(1610)의 일부 영상(1611)을 디스플레이 할 수 있다.

한편 영상이 확대됨에 따라, 제3 영상(1610)은 화면 상에 디스플레이 되는 제3 영상(1610)의 일부 영상(1611) 및 제3 영상(1610) 중 화면 상에 디스플레이 되는 일부 영상(1611)과는 다른 영상(1612)을 포함할 수 있다.

한편, 영상이 확대됨에 따라, 제어부(170)는 제3 영상(1610)에 포함된 특정 오브젝트(1411)가 제3 영상(1610)의 일부 영상(1611), 즉 제3 영상(1610) 중 화면 상에 디스플레이 되는 영상에 포함되는지 판단할 수 있다. 또한 제어부(170)는 제3 영상(1610)에 포함된 특정 오브젝트(1411)가, 제3 영상(1610) 중 상기 일부 영상(1611)과는 다른 영상(1612)(즉 제3 영상(1610) 중 영상이 확대됨에 따라 디스플레이 되지 않는 영상)에 포함되는지 판단할 수 있다.

한편 특정 오브젝트(1411)가, 제3 영상(1610) 중 화면 상에 디스플레이 되는 일부 영상(1611)과는 다른 영상(1612)에 포함되면, 제어부(170)는 특정 오브젝트(1411)를 포함하는 영상을 제3 영상(1610)으로부터 획득하고, 획득한 영상(1620)을 제3 영상의 일부 영상(1611)과 함께 디스플레이 할 수 있다.

이 경우, 제3 영상(1610)에 포함된 특정 오브젝트(1411)의 전부가 다른 영상(1612)에 포함되면, 특정 오브젝트(1411)를 포함하는 영상(1620)을 획득하여 디스플레이 하는 방식으로도 구현이 가능하며, 제3 영상(1610)에 포함된 특정 오브젝트(1411)의 일부가 다른 영상(1612)에 포함되면, 특정 오브젝트(1411)를 포함하는 영상(1620)을 획득하여 디스플레이 하는 방식으로도 구현이 가능하다.

한편, 도시하지는 않았으나, 제3 영상(1610)으로부터 시간적으로 이후의 영상인 제4 영상 중 화면 상에 디스플레이 되는 제4 영상의 일부 영상에 특정 오브젝트(1411)가 포함되면, 제어부(170)는 특정 오브젝트(1411)를 포함하는 영상의 획득 및 디스플레이를 중단할 수 있다.

최근에는 영상의 확대 또는 축소가 자유롭게 가능한 디스플레이 장치가 개발되고 있다. 다만 영상이 확대되는 경우 사용자가 획득하기를 원하는 정보가 잘려나가 디스플레이 되지 않는 경우가 발생할 수 있다. 야구 경기의 영상의 상단에 나타나는 경기 스코어, 방송 영상의 하단에 나타나는 뉴스 속보 등을 그 예로 들 수 있다. 또한 다른 예로써, 영상이 확대됨에 따라 사용자가 관심을 가지고 보기를 원하는 특정 인물이 잘려나가 디스플레이 되지 않는 경우가 발생할 수 있다.

이와 같이 본 발명은, 평소에는 특정 오브젝트를 포함하는 영상을 별도로 디스플레이 하지 않되, 사용자가 선택한 특정 오브젝트가 영상의 확대에 따라 디스플레이 되지 않는 경우에만 특정 오브젝트를 포함하는 영상을 별도로 디스플레이 함으로써, 평소에는 사용자의 컨텐츠의 시청을 방해하지 않으면서도 사용자가 관심을 가지는 오브젝트가 보이지 않을 경우에만 오브젝트의 영상을 적절하게 디스플레이 할 수 있다.

한편, 도 7 내지 도 16a의 실시 예에서는, 사용자가 텍스트를 포함하는 특정 오브젝트를 선택하면, 특정 오브젝트를 포함하는 영상이 디스플레이 되는 것으로 설명하였으나 이에 한정되지 않는다.

구체적으로, 텍스트를 포함하는 특정 오브젝트를 자동으로 인식하고, 텍스트를 포함하는 특정 오브젝트가 화면 상에 디스플레이 되지 않는 경우 특정 오브젝트를 포함하는 영상을 자동으로 획득하여 디스플레이 하는 방식으로도 구현이 가능하다.

더욱 구체적으로, 제어부(170)는 영상에 텍스트가 포함되어 있는지 판단할 수 있다. 또한, 영상에 텍스트가 포함되어 있으면, 텍스트를 포함하는 특정 오브젝트의 좌표에 대한 정보를 획득할 수 있다. 한편, 영상이 확대됨에 따라 텍스트를 포함하는 특정 오브젝트가 화면 상에 디스플레이 되지 않으면, 즉 텍스트를 포함하는 특정 오브젝트가 화면 상에 디스플레이 되지 않는 일부 영상에 포함되면, 제어부(170)는 특정 오브젝트를 포함하는 영상을 획득하여 디스플레이 할 수 있다.

한편, 특정 오브젝트를 포함하는 영상을 획득하여 디스플레이 하기 전, 제어부(170)는 텍스트를 포함하는 특정 오브젝트가 화면상에 디스플레이 되지 않고 있음을 나타내는 UI를 디스플레이 할 수 있다. 이 경우, 텍스트를 포함하는 오브젝트를 디스플레이 하기 위한 입력이 수신되면, 특정 오브젝트를 포함하는 영상을 획득하여 디스플레이 하는 방식으로도 구현할 수 있다.

한편, 사용자가 보기를 원하는 텍스트는 영상 상의 고정된 영역에서 디스플레이 되는 경우가 많다. 예를 들어, 야구 스코어는 영상의 좌측 상단에, 뉴스 속보는 영상의 아래에 고정되어 디스플레이 되는 경우가 있다.

따라서, 영상에 텍스트를 포함하는 오브젝트가 포함되는지 판단함에 있어서, 제어부(170)는 영상의 특정 영역에 텍스트를 포함하는 오브젝트가 포함되는지 판단할 수 있다. 예를 들어 제어부(170)는 영상의 가장 자리 영역에 텍스트를 포함하는 오브젝트가 포함되는지 판단할 수 있다. 또 다른 예를 들어 제어부(170)는 영상의 좌측 상단 영역에 텍스트를 포함하는 오브젝트가 포함되는지 판단할 수 있다. 한편, 영상의 특정 영역에 텍스트를 포함하는 오브젝트가 위치하고, 텍스트를 포함하는 오브젝트가 영상의 확대에 따라 디스플레이 되지 않으면, 제어부(170)는 오브젝트를 포함하는 영상을 획득하여 디스플레이 할 수 있다.

화면 상에 디스플레이 되는 텍스트에는 사용자가 얻기를 원하는 중요한 정보가 포함되어 있는 경우가 많다. 따라서, 본 발명은 텍스트를 포함하는 오브젝트가 화면의 확대에 따라 디스플레이 되지 않는 경우 별도 화면으로 제공함으로써, 사용자가 화면을 다시 축소하여 텍스트를 봐야 하는 불편함을 해소할 수 있다.

또한, 야구 스코어 등의 텍스트와는 별개로, 사용자가 관심이 없는 텍스트가 영상에 포함되어 있을 수 있다(예를 들어 야구 경기에서 포수 뒤에 표시되는 광고판). 이 경우 본 발명은 영상의 특정 영역(즉 야구 스코어 등의 주요 정보가 디스플레이 되는 특정 영역)에 위치하는 텍스트가 디스플레이 되지 않는 경우에만, 텍스트를 포함하는 영상을 별도로 디스플레이 함으로써, 사용자가 관심있어하는 정보만을 별도의 화면으로 제공할 수 있다.

한편, 영상이 확대되면, 영상이 확대됨에 따라 화면 상에 디스플레이 되지 않는 영역에 텍스트가 포함되어 있는지 판단하고, 텍스트가 포함되어 있으면 텍스트를 포함하는 특정 오브젝트에 대한 정보를 획득하고, 특정 오브젝트를 포함하는 영상을 디스플레이 하는 방식으로도 구현이 가능하다.

도 16b 내지 도 16c는 본 발명의 실시 예에 따른, 영상의 이동에 의하여 특정 오브젝트가 디스플레이 되거나 디스플레이 되지 않는 경우의 디스플레이 장치의 동작 방법을 설명하기 위한 도면이다.

도 16a에서는 제1 컨텐츠의 제3 영상(1610)의 일부 영상(1611)이 디스플레이 되어 있는 상태이다.

한편, 제어부(170)는 화면에 디스플레이 되는 영상을 이동하기 위한 제1 입력을 수신할 수 있다.

이 경우 제어부(170)는 제1 컨텐츠의 영상을 이동하여 디스플레이 할 수 있다. 구체적으로, 제어부(170)는 제1 입력에 기초하여 제1 컨텐츠의 제4 영상(1630)을 이동시키고, 제1 컨텐츠의 제4 영상(1630)의 일부 영상(1631)을 디스플레이 할 수 있다. 여기서, 제1 컨텐츠의 제4 영상(1630)은 제1 컨텐츠의 제3 영상(1610)으로부터 시간적으로 이후의 영상일 수 있다.

한편, 제1 컨텐츠의 제4 영상(1630)에 포함된 특정 오브젝트(1411)가 디스플레이 장치(100)의 화면 상에 디스플레이 되면, 제어부(170)는 특정 오브젝트(1411)를 포함하는 영상의 디스플레이를 중단할 수 있다.

구체적으로, 제1 입력에 기초하여 제4 영상(1630)이 이동하여 디스플레이 되는 경우, 이동한 제4 영상(1630)은 화면 상에 디스플레이 되는 일부 영상(1631) 및 화면 상에 디스플레이 되지 않는 다른 일부 영상(1632)를 포함할 수 있다.

한편, 제어부(170)는 제4 영상(1630)의 일부 영상(1631)을 디스플레이 하기에 앞서, 제1 컨텐츠의 제4 영상(1630)에 포함된 특정 오브젝트(1411)가 화면에 디스플레이 되는 지(즉, 화면 상에 디스플레이 되는 일부 영상(1631)에 포함되는지) 판단할 수 있다. 또한, 제1 컨텐츠의 제4 영상(1630)에 포함된 특정 오브젝트(1411)가 화면에 디스플레이 되면, 제어부(170)는 특정 오브젝트를 포함하는 영상(640)의 디스플레이를 중단할 수 있다.

한편, 도 16b에서는, 특정 오브젝트(1411)의 전부가 화면에 디스플레이 되는 것으로 설명하였으나 이에 한정되지 아니하며, 특정 오브젝트(1411)의 일부가 화면에 디스플레이 되는 경우에도 특정 오브젝트를 포함하는 영상의 디스플레이를 중단하는 방식으로도 구현이 가능하다.

한편, 특정 오브젝트가 화면 상에 다시 디스플레이 되지 않는 경우, 제어부(170)는 특정 오브젝트를 포함하는 영상의 디스플레이를 재개할 수 있다.

구체적으로, 제어부(170)는 화면에 디스플레이 되는 영상을 이동하기 위한 제2 입력을 수신할 수 있다.

이 경우, 제어부(170)는 제2 입력에 기초하여 제1 컨텐츠의 제5 영상(1640)을 이동시키고, 제1 컨텐츠의 제5 영상(1640)의 일부 영상(1641)을 디스플레이 할 수 있다. 여기서, 제1 컨텐츠의 제5 영상(1640)은 제1 컨텐츠의 제4 영상(1630)으로부터 시간적으로 이후의 영상일 수 있다.

한편, 제1 컨텐츠의 제5 영상(1640)에 포함된 특정 오브젝트(1411)의 일부 또는 전부가 디스플레이 장치(100)의 화면을 벗어나면, 제어부(170)는 제5 영상(1640)으로부터 특정 오브젝트를 포함하는 영상(1650)를 획득하여 디스플레이 할 수 있다.

구체적으로, 제2 입력에 기초하여 제5 영상(1640)이 이동하여 디스플레이 되는 경우, 이동한 제5 영상(1640)은 화면 상에 디스플레이 되는 일부 영상(1641) 및 화면 상에 디스플레이 되지 않는 다른 일부 영상(1642)를 포함할 수 있다.

한편, 제어부(170)는 제5 영상(1640)의 일부 영상(1641)을 디스플레이 하기에 앞서, 제1 컨텐츠의 제5 영상(1640)에 포함된 특정 오브젝트(1411)의 일부 또는 전부가 디스플레이 장치(100)의 화면을 벗어나는 지(즉, 특정 오브젝트(1411)의 일부 또는 전부가 화면 상에 디스플레이 되지 않는 다른 일부 영상(1642)에 포함되는 지) 판단할 수 있다.

이 경우, 제1 컨텐츠의 제5 영상(1640)에 포함된 특정 오브젝트(1411)의 일부 또는 전부가 화면을 벗어나면, 제어부(170)는 제5 영상(1640)으로부터 특정 오브젝트를 포함하는 영상(1650)을 획득할 수 있다.

한편, 제어부(170)는 제5 영상(1640)으로부터 획득한 특정 오브젝트를 포함하는 영상(1650)을 제5 영상(1640)의 일부 영상(1641)과 함께 디스플레이 할 수 있다.

한편, 제2 영상으로부터 획득한 특정 오브젝트를 포함하는 영상은, 제1 영상에 포함되는 특정 오브젝트의 위치와 대응하는 위치에 디스플레이 될 수 있다.

이와 관련해서는 도 17을 참고하여 구체적으로 설명한다.

도 17은 본 발명의 실시 예에 따른, 특정 오브젝트를 포함하는 영상의 디스플레이 위치를 설명하기 위한 도면이다.

도 14를 다시 참고하면, 제1 영상(1410)에 포함된 특정 오브젝트(1411)는 제1 영상(1410) 상의 특정 영역에 디스플레이 되어 있다.

한편, 제어부(170)는 디스플레이 장치(100)의 화면 상에서의 특정 오브젝트(1411)의 위치에 대한 정보를 획득할 수 있다.

한편, 도 17을 참고하면, 제1 컨텐츠의 제1 영상(1410)이 디스플레이된 때로부터 시간이 경과함에 따라 제1 컨텐츠의 제1 영상(1410)으로부터 시간적으로 이후의 영상인 제1 컨텐츠의 제2 영상이 디스플레이 된 상태이다. 또한, 영상을 확대하여 디스플레이 하기 위한 입력에 기초하여, 제2 영상의 일부 영상(1711)이 디스플레이 된 상태이다.

한편, 디스플레이 장치(100)의 화면 상에서의 특정 오브젝트(1411)의 위치에 대한 정보에 기초하여, 제어부(170)는 제1 영상(1410)이 표시된 화면 상에서의 특정 오브젝트의 위치와 동일한 위치에 제2 영상으로부터 획득한 특정 오브젝트를 포함하는 영상(1720)을 디스플레이 할 수 있다.

특정 오브젝트는 고정된 위치에 디스플레이 되는 경우가 많다. 예를 들어, 특정 오브젝트가 야구 경기의 스코어인 경우, 야구 경기의 스코어는 화면의 좌 상단에 고정되어 디스플레이 되게 된다. 따라서, 야구 경기를 관람하는 사용자는 야구 스코어를 확인하기 위하여 화면의 좌 상단 영역을 보게 되는 것이 일반적이다. 본 발명은, 영상이 확대됨에도 불구하고, 특정 오브젝트를 포함하는 영상을 특정 오브젝트가 고정적으로 디스플레이 되는 위치에 디스플레이 함으로써, 사용자가 보기를 원하는 특정 오브젝트를 더욱 친숙하게 볼 수 있는 환경을 제공할 수 있다.

한편, 상술한 실시 예에서는, 동일한 컨텐츠, 즉 제1 컨텐츠의 영상 및 제1 컨텐츠의 영상으로부터 획득한 특정 오브젝트를 포함하는 영상을 함께 디스플레이 하는 것으로 설명하였다.

다만 이에 한정되지 아니하며, 제1 컨텐츠의 영상으로부터 획득한 특정 오브젝트를 포함하는 영상을 제2 컨텐츠의 영상과 함께 디스플레이 하는 방식으로도 구현될 수 있다.

이와 관련해서는 도 18 내지 도 19를 참고하여 구체적으로 설명한다.

도 18 내지 도 19는, 본 발명의 실시 예에 따른 제1 컨텐츠의 영상으로부터 획득한 특정 오브젝트를 포함하는 영상을 제2 컨텐츠의 영상과 함께 디스플레이 하는 방법을 설명하기 위한 도면이다.

도 18을 참고하면, 제1 컨텐츠의 제1 영상에 포함된 특정 오브젝트를 선택하는 입력이 수신됨에 따라, 제1 컨텐츠의 2 영상(1810) 및 제2 영상으로부터 획득한 특정 오브젝트를 포함하는 영상(1820)이 디스플레이 되고 있는 상태이다.

한편, 제어부(170)는 제2 컨텐츠의 영상을 디스플레이 하기 위한 입력을 수신할 수 있다.

한편, 제2 컨텐츠의 영상을 디스플레이 하기 위한 입력이 수신되면, 도 19에서 도시하는 바와 같이, 제어부(170)는 제2 컨텐츠의 영상(1910)을 디스플레이 할 수 있다.

한편, 제어부(170)는 제1 컨텐츠의 제2 영상(1810)으로부터 시간적으로 이후의 영상인 제1 컨텐츠의 제3 영상으로부터 특정 오브젝트를 포함하는 영상(1920)을 획득할 수 있다. 또한 제어부(170)는 제1 컨텐츠의 제3 영상으로부터 획득한 특정 오브젝트를 포함하는 영상(1920)을 제2 컨텐츠의 영상(1910)과 함께 디스플레이 할 수 있다.

예를 들어, 제어부(170)는 제1 튜너(미도시)를 통하여 A 채널에 대응하는 컨텐츠(야구 경기)를 수신하여 디스플레이 할 수 있다. 또한, 제어부(170)는 A 채널에 대응하는 컨텐츠(야구 경기)의 영상에 포함된 하나 이상의 오브젝트 중 특정 오브젝트(경기 스코어를 포함하는 오브젝트)를 선택하는 입력을 수신할 수 있다. 다른 예로써, 제어부(170)는 A 채널에 대응하는 컨텐츠(야구 경기)의 영상에 포함된 하나 이상의 오브젝트 중 경기 스코어를 포함하는 오브젝트가 특정 오브젝트인 것으로 판단할 수 있다.

한편, 채널을 A 채널에서 B 채널로 변경하는 입력이 수신되면, 제어부(170)는 제2 튜너(미도시)를 통하여 B 채널에 대응하는 컨텐츠(드라마)를 수신할 수 있다. 이 경우, 제어부(170)는 제2 튜너(미도시)를 통하여 B 채널에 대응하는 컨텐츠(드라마)를 수신하는 것과 함께, 제1 튜너(미도시)를 통하여 A 채널에 대응하는 컨텐츠(야구 경기)를 계속적으로 수신할 수 있다.

한편, 제어부(170)는 제1 튜너(미도시)를 통하여 계속적으로 수신되는 A 채널에 대응하는 컨텐츠(야구 경기)의 영상으로부터, 특정 오브젝트(경기 스코어)를 포함하는 영상을 계속적으로 획득할 수 있다. 또한, 제어부(170)는 B 채널에 대응하는 컨텐츠(드라마)를 계속적으로 디스플레이 하는 것과 함께, A 채널에 대응하는 컨텐츠(야구 경기)의 영상으로부터 계속적으로 획득되는 특정 오브젝트(경기 스코어)를 포함하는 영상을 계속적으로 디스플레이 할 수 있다.

예를 들어, A 채널의 야구 경기를 시청하는 사용자는 11시 50분 01초에 특정 오브젝트(경기 스코어)을 선택하는 입력을 디스플레이 장치(100)로 제공할 수 있다. 한편, A 채널의 야구 경기를 시청하는 사용자는 11시 50분 10초에 시청하는 채널을 A 채널에서 B 채널로 변경하는 입력을 디스플레이 장치(100)로 제공할 수 있다. 이 경우, 제어부(170)는 11시 50분 10초 이후에 방송되는 B 채널의 드라마를 계속적으로 디스플레이 할 수 있으며, B 채널의 드라마와 함께 11시 50분 10초 이후에 방송되는 야구 경기의 스코어를 계속적으로 디스플레이 할 수 있다.

사용자는 특정 컨텐츠를 감상하면서도 다른 컨텐츠의 특정 오브젝트만을 감상하기를 원하는 경우가 있다. 드라마를 시청하면서 야구 경기의 스코어를 확인하고 싶은 경우, 또는 다른 컨텐츠를 시청하면서 음악 프로그램에 출연한 복수의 걸그룹 멤버 중 자신이 좋아하는 특정 멤버만을 보고 싶은 경우가 그 예이다. 이러한 경우 본 발명은, 특정 컨텐츠를 시청하는 사용자가 다른 컨텐츠의 특정 오브젝트만을 함께 감상할 수 있는 환경을 제공할 수 있다.

도 20 내지 도 21은, 본 발명의 실시 예에 따른 특정 오브젝트가 변경되면 이전 구간의 제1 컨텐츠의 영상을 디스플레이 하는 방법을 설명하기 위한 도면이다.

제어부(170)는 제1 튜너(미도시)를 통하여 제1 컨텐츠를 수신할 수 있고, 제2 튜너(미도시)를 통하여 제2 컨텐츠를 수신할 수 있다.

한편, 제어부(170)는 제2 컨텐츠의 복수의 영상이 디스플레이 되는 중에 획득되는 제1 컨텐츠의 복수의 영상을 저장부(140)에 저장할 수 있다.

구체적으로, 제어부(170)는 제2 튜너(미도시)를 통하여 계속적으로 수신되는 제2 컨텐츠의 복수의 영상을 계속적으로 디스플레이 할 수 있다. 또한, 제어부(170)는 제2 컨텐츠의 복수의 영상이 디스플레이 되는 중에 제1 튜너(미도시)를 통하여 계속적으로 수신되는 제1 컨텐츠의 복수의 영상을 저장부(140)에 저장할 수 있다.

또한, 제어부(170)는 제2 컨텐츠의 복수의 영상이 디스플레이 되는 중에 계속적으로 수신되는 제1 컨텐츠의 복수의 영상으로부터, 특정 오브젝트를 포함하는 영상을 계속적으로 획득하고, 획득한 영상을 제2 컨텐츠의 복수의 영상과 함께 디스플레이 할 수 있다.

도 20은, 계속적으로 디스플레이 되는 제2 컨텐츠의 복수의 영상 중 A 영상(2010)이 제1 컨텐츠의 복수의 영상으로부터 계속적으로 획득되는 특정 오브젝트를 포함하는 영상 중 B 영상(2020)과 함께 디스플레이 되어 있는 것을 도시한 도면이다.

한편, 도 20에서 도시하는 바와 같이, 제어부(170)는 특정 오브젝트를 포함하는 영상(2020)을 PIP 창에서 디스플레이 할 수 있다.

한편, 특정 오브젝트는 텍스트를 포함할 수 있다. 예를 들어 도 20에서 도시되는 특정 오브젝트는 “16:5”라는 경기 스코어를 나타내는 텍스트를 포함할 수 있다.

한편, 제어부(170)는 제2 컨텐츠의 복수의 영상이 디스플레이 되는 중 특정 오브젝트가 변경되는지를 판단할 수 있다. 구체적으로 제어부(170)는 제2 컨텐츠의 복수의 영상이 디스플레이 되는 중 특정 오브젝트에 포함되는 텍스트가 변경되는지 판단할 수 있다. 예를 들어 도 19에서 도시하는 바와 같이 경기 스코어가 16:4인 상태에서, 도 20에서 도시하는 바와 같이 경기 스코어가 16:5로 변경되면, 제어부(170)는 제1 컨텐츠에 포함되는 특정 오브젝트가 변경되는 것으로 판단할 수 있다.

한편, 제1 컨텐츠에 포함되는 특정 오브젝트가 변경되면, 제어부(170)는 특정 오브젝트가 변경되었음을 나타내는 UI를 디스플레이 할 수 있다. 예를 들어, 경기 스코어가 “16:4”에서 “16:5”로 변경되면, 제어부(170)는 특정 오브젝트를 포함하는 영상을 하이라이트 표시하거나, 변경된 텍스트(16:5”에서의 “5”)를 하이라이트 표시하거나, 변경된 텍스트를 다른 색체로 디스플레이 할 수 있다.

한편, 제1 컨텐츠에 포함되는 특정 오브젝트가 변경되면, 도 21에서 도시하는 바와 같이, 제어부(170)는 특정 오브젝트가 변경된 시점보다 이전 구간의 제1 컨텐츠의 영상(2130)을 디스플레이 할 수 있다. 구체적으로 제어부(170)는 제2 컨텐츠의 복수의 영상이 디스플레이 되는 중에 수신하여 저장부(140)에 저장된 제1 컨텐츠의 복수의 영상 중, 특정 오브젝트가 변경된 시점보다 이전 시점의 기 설정된 구간에 해당하는 복수의 영상을 디스플레이 할 수 있다.

예를 들어, 11시 50분 50초인 시점에 경기 스코어가 16:4에서 16:5로 변경된 경우, 제어부(170)는 11시 50분 30초부터 11시 50분 50초까지의 제1 컨텐츠(야구 경기)의 영상을 디스플레이 할 수 있다.

한편, 제2 컨텐츠의 복수의 영상이 디스플레이 되는 중에 수신된 제1 컨텐츠의 영상 들을 저장부(140)에 저장하는 것으로 설명하였으나 이에 한정되지 않으며, 제어부(170)는 제2 컨텐츠의 영상이 디스플레이 되기 이전의 제1 컨텐츠의 복수의 영상을 저장부(140)에 저장할 수 있다. 이 경우에도 제어부(170)는 저장부(140)에 저장된 제1 컨텐츠의 복수의 영상 중 특정 오브젝트가 변경된 시점보다 이전 시점의 기 설정된 구간에 해당하는 복수의 영상을 디스플레이 할 수 있다.

한편, 도 21에서 도시하는 바와 같이, 제어부(170)는 특정 오브젝트가 변경된 시점보다 이전 구간의 제1 컨텐츠의 영상(2130)을 PIP 창에서 디스플레이 할 수 있다. 이 경우, 특정 오브젝트가 변경된 시점보다 이전 구간의 제1 컨텐츠의 영상(2130)은, 제2 컨텐츠의 영상(2010)과 함께 디스플레이 될 수 있다.

다만 이에 한정되지 아니하며, 특정 오브젝트가 변경된 시점보다 이전 구간의 제1 컨텐츠의 영상(2130)은, 디스플레이 장치(100)의 화면의 전체 영역에 디스플레이 될 수 있다.

구체적으로, 제어부(170)는 특정 오브젝트가 변경된 시점보다 이전 구간의 제1 컨텐츠의 영상(2130)을 화면의 전체 영역에 디스플레이 하기 위한 입력을 수신할 수 있다.

더욱 구체적으로, 제어부(170)는 특정 오브젝트를 포함하는 영상 또는 특정 오브젝트가 변경된 시점보다 이전 구간의 제1 컨텐츠의 영상을 포함하는 PIP 창을 선택하는 입력을 수신할 수 있다.

예를 들어, 도 20에서 도시하는 바와 같이 특정 오브젝트를 포함하는 영상이 PIP 창으로 디스플레이 되고, 특정 오브젝트가 변경됨에 따라 특정 오브젝트가 변경되었음을 나타내는 UI가 디스플레이 되고 있는 경우, 제어부(170)는 특정 오브젝트를 포함하는 영상(2020)을 포함하는 PIP 창을 선택하는 입력을 수신할 수 있다.

다른 예를 들어, 도 21에서 도시하는 바와 같이 특정 오브젝트가 변경된 시점보다 이전 구간의 제1 컨텐츠의 영상(2130)이 PIP 창으로 디스플레이 되고 있는 경우, 제어부(170)는 특정 오브젝트가 변경된 시점보다 이전 구간의 제1 컨텐츠의 영상(2130)을 포함하는 PIP 창을 선택하는 입력을 수신할 수 있다.

한편, PIP창을 선택하는 입력이 수신되면, 제어부(170)는 특정 오브젝트가 변경된 시점보다 이전 구간의 제1 컨텐츠의 영상을 화면의 전체 영역에 디스플레이 할 수 있다.

한편, 디스플레이 장치(100)는 타임 시프트 기능을 제공할 수 있으며, 이에 따라 사용자는 원하는 시점부터 제1 컨텐츠를 시청할 수 있다.

타임 시프트 기능을 이용하는 하나의 실시 예로, 제2 컨텐츠의 재생을 유지하면서, 이전 구간의 제1 컨텐츠를 출력하는 방법에 대하여 설명한다.

제1 컨텐츠에 포함되는 특정 오브젝트가 변경되면, 제어부(170)는 제1 컨텐츠를 재생할 시작 시점을 지정하는 입력을 수신할 수 있다.

예를 들어, 제1 컨텐츠에 포함되는 특정 오브젝트가 변경되면, 제어부(170)는 저장부(140)에 저장된 제1 컨텐츠의 전체 재생 구간에 대응하는 프로그레스 바(progress bar)를 디스플레이 할 수 있다. 이 경우, 사용자는 프로그레스 바(progress bar)를 이용하여 제1 컨텐츠의 전체 재생 구간 중 자신이 시청을 시작하기를 원하는 시작 지점을 입력할 수 있다.

한편, 제1 컨텐츠를 재생할 시작 지점을 지정하는 입력이 수신되면, 제어부(170)는 제1 컨텐츠를 재생할 시작 지점으로부터 특정 오브젝트가 변경된 시점까지의 구간의 제1 컨텐츠를 출력할 수 있다.

이 경우, 제어부(170)는 제1 컨텐츠를 재생할 시작 지점으로부터 특정 오브젝트가 변경된 시점까지의 구간의 제1 컨텐츠의 영상을 PIP 창에서 디스플레이 할 수 있다. 다른 예로써, 제어부(170)는 제1 컨텐츠를 재생할 시작 지점으로부터 특정 오브젝트가 변경된 시점까지의 구간의 제1 컨텐츠를 전체 화면으로 출력할 수 있다.

한편, 제1 컨텐츠를 재생할 시작 지점으로부터 특정 오브젝트가 변경된 시점까지의 구간의 제1 컨텐츠가 출력되면, 제어부(170)는 제2 컨텐츠의 출력을 재개할 수 있다.

타임 시프트 기능을 이용하는 또 하나의 실시 예로, 출력되는 컨텐츠를 제2 컨텐츠에서 제1 컨텐츠로 변경하는 방법에 대하여 설명한다.

제1 컨텐츠의 영상에 포함되는 특정 오브젝트가 변경되면, 제어부(170)는 제1 컨텐츠를 출력하기 위한 입력을 수신할 수 있다. 또한, 제1 컨텐츠를 출력하기 위한 입력을 수신되면, 제어부(170)는 제2 컨텐츠의 출력을 중단하고, 제1 컨텐츠를 출력할 수 있다.

예를 들어, 도 20에서 도시하는 바와 같이 특정 오브젝트를 포함하는 영상(2020)을 포함하는 PIP창을 선택하는 입력이 수신되거나, 도 21에서 도시하는 바와 같이 특정 오브젝트가 변경된 시점보다 이전 구간의 제1 컨텐츠의 영상(2130)을 포함하는 PIP 창을 선택하는 입력이 수신되는 경우, 제어부(170)는 제2 컨텐츠의 출력을 중단하고, 제1 컨텐츠의 영상을 전체 화면으로 디스플레이 할 수 있다.

한편 제1 컨텐츠가 출력되기 시작되면, 제어부(170)는 제1 컨텐츠의 영상과 함께 제1 컨텐츠의 전체 재생 구간에 대응하는 프로그레스 바(progress bar)를 디스플레이 할 수 있다. 이 경우, 사용자는 프로그레스 바(progress bar)를 이용하여 제1 컨텐츠의 전체 재생 구간 중 자신이 시청을 시작하기를 원하는 시작 지점을 입력할 수 있다.

한편, 제어부(170)는 제1 컨텐츠의 전체 재생 구간 중 제2 컨텐츠의 영상이 디스플레이 된 구간과 제1 컨텐츠의 영상이 디스플레이 된 구간이 서로 구별되도록 디스플레이 할 수 있다.

예를 들어, 0분부터 30분까지의 제1 컨텐츠의 재생 구간은 제1 컨텐츠의 영상이 디스플레이 된 구간이고, 30분부터 50분까지의 제1 컨텐츠의 재생 구간은 사용자가 채널을 전환함에 따라 제2 컨텐츠의 영상이 특정 오브젝트를 포함하는 영상과 함께 디스플레이 된 구간이고, 50분부터 52분까지의 제1 컨텐츠의 재생 구간은 사용자가 PIP 창을 선택함에 따라 제1 컨텐츠의 영상이 디스플레이 된 구간인 경우, 제어부(170)는 프로그레스 바(progress bar)의 전체 영역 중 0분부터 30분 까지의 제1 컨텐츠의 재생 구간에 대응하는 영역 및 50분부터 52분까지의 제1 컨텐츠의 재생 구간에 대응하는 영역을 30분부터 50분까지의 제1 컨텐츠의 재생 구간에 대응하는 영역과 다른 색깔로 디스플레이 할 수 있다.

한편, 제1 컨텐츠를 재생할 시작 지점을 지정하는 입력이 수신되면, 제어부(170)는 지정된 시작 지점부터의 제1 컨텐츠를 재생할 수 있다.

이와 같이 본 발명은, 특정 오브젝트를 포함하는 영상을 디스플레이 하는 중 특정 오브젝트가 변경되면, 특정 오브젝트가 변경된 시점보다 이전 구간의 제1 컨텐츠의 영상을 디스플레이 함으로써, 사용자가 특정 오브젝트가 변경된 경위를 용이하게 파악하도록 할 수 있다.

도 22 내지 도 24b은, 본 발명의 실시 예에 따른 보정된 크기의 특정 오브젝트를 포함하는 영상을 디스플레이 하는 방법을 설명하기 위한 도면이다.

도 22를 참고하면, 제1 컨텐츠의 제1 영상(2210)은 특정 오브젝트(2211)를 포함하고 있다. 한편, 제1 영상(2210)에 포함된 특정 오브젝트(2211)를 선택하는 입력이 수신되면, 제어부(170)는 제1 영상(2210)과 함께 제1 영상(2210)으로부터 획득한 특정 오브젝트를 포함하는 영상(2220)을 디스플레이 할 수 있다. 한편, 제1 영상(2210)은 정지 영상일 수 있다.

한편, 본 실시 예에서는 설명의 편의상 제1 영상(2210)과 함께 제1 영상(2210)으로부터 획득한 특정 오브젝트를 포함하는 영상(2220)이 디스플레이 되는 것으로 설명하였으나 이에 한정되지 않고, 특정 오브젝트를 포함하는 영상은 제1 영상으로부터 시간적으로 이후의 영상인 제2 영상으로부터 획득하여 디스플레이 될 수 있다.

한편, 특정 오브젝트를 포함하는 영상은 특정 오브젝트를 포함할 수 있는 최소 크기의 다각형일 수 있다. 예를 들어 특정 오브젝트가 A 인물인 경우, 제1 영상으로부터 획득되는 특정 오브젝트를 포함하는 영상 및 제2 영상으로부터 획득되는 특정 오브젝트를 포함하는 영상은 A 인물을 모두 포함할 수 있는 최소 크기의 직사각형일 수 있다.

또는, 특정 오브젝트를 포함하는 영상은 특정 오브젝트 및 특정 오브젝트의 경계의 상하좌우의 일정 크기의 영역을 포함하는 다각형일 수 있다.

한편, 제1 컨텐츠의 제1 영상(2210)이 디스플레이 된 상태에서 시간이 경과하면, 도 23에서 도시하는 바와 같이, 제어부(170)는 제1 컨텐츠의 제1 영상(2210)으로부터 시간적으로 이후의 영상인 제1 컨텐츠의 제2 영상(2310)을 디스플레이 할 수 있다.

또한, 제어부(170)는 제1 컨텐츠의 제2 영상(2310)으로부터 특정 오브젝트를 포함하는 영상(2320)을 획득하여 제1 컨텐츠의 제2 영상(2310)과 함께 디스플레이 할 수 있다.

한편, 제1 영상(2210)에 포함된 특정 오브젝트(2211)의 크기와 제2 영상(2310)에 포함된 특정 오브젝트(2311)의 크기는 서로 상이할 수 있다.

예를 들어, 제2 영상(2310)은 제1 영상(2210)을 줌인(zoom-in)한 영상일 수 있으며, 이에 따라 제2 영상(2310)에 포함된 특정 오브젝트(2311)는 제1 영상(2210)에 포함된 특정 오브젝트(2211)보다 더 클 수 있다.

이 경우, 제어부(170)는 제1 영상(2210)에 포함된 특정 오브젝트(2211)의 크기와 제2 영상(2310)에 포함된 특정 오브젝트(2311)의 크기에 기초하여, 특정 오브젝트를 포함하는 영상(2320)의 배율을 보정하여 디스플레이 할 수 있다.

구체적으로, 도 22에서 도시하는 바와 같이, 제어부(170)는 제1 영상(2210)에서 특정 오브젝트가 표시된 다각형의 영역(2231)에 대한 정보에 기초하여, 제1 영상(2210)에 포함되는 특정 오브젝트(2211)의 크기에 대한 정보를 획득할 수 있다. 또한, 도 23에서 도시하는 바와 같이, 제어부(170)는 제2 영상(2310)에서 특정 오브젝트가 표시된 다각형의 영역(2331)에 대한 정보에 기초하여, 제2 영상(2310)에 포함되는 특정 오브젝트(2311)의 크기에 대한 정보를 획득할 수 있다.

한편, 제어부(170)는 제1 영상(2210)에 포함된 특정 오브젝트(2211)의 크기 대비 제2 영상(2310)에 포함된 특정 오브젝트(2311)의 크기에 기초하여, 제2 영상(2310)으로부터 획득한 특정 오브젝트를 포함하는 영상(2341)의 배율을 보정하고, 배율이 보정된 영상(2320)을 디스플레이 할 수 있다. 여기서 보정되는 배율은, 제2 영상(2310)으로부터 획득되어 디스플레이 되는 영상(2320)의 크기를 제1 영상(2210)으로부터 획득되어 디스플레이 되는 영상(2220)의 크기와 같게 하는 배율일 수 있다.

한편, 도 24a는 제1 컨텐츠의 제2 영상(2310)이 디스플레이 된 상태에서 시간이 경과함에 따라 제2 영상(2310)으로부터 시간적으로 이후의 영상인 제1 컨텐츠의 제3 영상(2410)이 디스플레이 되어 있는 상태를 도시한 도면이다.

제3 영상(2410)에 포함된 오브젝트(2411)는 제2 영상(2310)에 포함된 오브젝트(2311)와 비교할 때, 그 형태와 위치가 변경된 상태이다.

한편, 제어부(170)는 영상이 변경됨에 따라 형태 및 위치 중 적어도 하나가 변경되는 오브젝트를 추적할 수 있다. 이 경우, 오브젝트 트래킹 기술이 이용될 수 있다.

한편, 제어부(170)는 제2 영상(2310)에 포함된 특정 오브젝트(2311)의 가로 세로 비율 대비 제3 영상(2410)에 포함된 특정 오브젝트(2411)의 가로 세로 비율에 기초하여, 가로 세로 비율이 조절된 특정 오브젝트를 포함하는 영상(2420)을 디스플레이 할 수 있다.

구체적으로, 도 23에서 도시하는 바와 같이, 제어부(170)는 제2 영상(2310)에서 특정 오브젝트(2311)가 표시된 다각형의 영역(2331)에 대한 정보에 기초하여, 제2 영상(2310)에 포함되는 특정 오브젝트(2311)의 가로 세로 비율에 대한 정보를 획득할 수 있다. 또한, 제3 영상(2410)으로부터 형태 및 위치 중 적어도 하나가 변경된 특정 오브젝트(2411)가 추적되면, 도 24a에서 도시하는 바와 같이, 제3 영상(2410)에서 특정 오브젝트(2411)가 표시된 다각형의 영역(2431)에 대한 정보에 기초하여, 제3 영상(2410)에 포함되는 특정 오브젝트(2411)의 가로 세로 비율에 대한 정보를 획득할 수 있다.

한편, 오브젝트의 동작이 변경되었기 때문에, 제2 영상(2310)에 포함되는 특정 오브젝트(2311)의 가로 세로 비율 및 및 제3 영상(2410)에 포함되는 특정 오브젝트(2411)를 포함하는 영상(2441)의 가로 세로 비율은 서로 상이하다. 따라서, 제2 영상(2310)으로부터 획득되는 특정 오브젝트(2311)를 포함하는 영상(2341) 및 제3 영상(2410)으로부터 획득되는 특정 오브젝트(2411)를 포함하는 영상(2441)의 가로 세로 비율도 서로 상이하다.

이 경우, 제어부(170)는 가로 세로 비율이, 제2 영상(2310)으로부터 획득한 특정 오브젝트(2311)를 포함하는 영상(2341)의 가로 세로 비율과 동일하게 되도록, 제3 영상(2410)으로부터 특정 오브젝트(2411)를 포함하는 영상을 획득할 수 있다.

구체적으로, 도 24b에서 도시하는 바와 같이, 제어부(170)는 특정 오브젝트(2411)를 포함하는 영상(2451)을 획득할 수 있다. 여기서 획득되는 특정 오브젝트(2411)를 포함하는 영상(2451)의 가로 세로 비율은, 제2 영상(2310)으로부터 획득한 특정 오브젝트(2311)를 포함하는 영상(2341)의 영상의 가로 세로 비율과 동일할 수 있다.

한편, 제어부(170)는 이와 같은 과정에 의해 가로 세로 비율이 보정된 특정 오브젝트(2411)를 포함하는 영상(2420)을 제3 영상(2410)으로부터 획득하여 디스플레이 할 수 있다.

한편, 본 실시 예에서는 제2 영상(2310)과 제3 영상(2410)의 비교를 통하여 보정이 수행되는 것으로 설명하였으나 이에 한정되지 아니하며, 제1 영상(2210)과 제3 영상(2410)의 비교를 통하여 보정이 수행되는 방식으로 구현될 수 있다.

또한, 제3 영상(2410)으로부터 시간적으로 이후의 영상인 제4 영상, 제4 영상으로부터 시간적으로 이후의 영상인 제5 영상에 포함된 오브젝트들도 같은 방법으로 보정되어 디스플레이 될 수 있다.

한편, 도 24a에서는 특정 오브젝트를 포함하는 영상의 배율의 보정을 설명하였고, 도 24b에서는 특정 오브젝트를 포함하는 영상의 가로 세로 비율의 보정을 설명하였으나, 특정 오브젝트를 포함하는 영상의 배율 및 가로 세로 비율이 함께 보정되어 디스플레이 될 수도 있다.

다시 도 5로 돌아가서, 본 발명의 실시 예에 따른 디스플레이 장치의 동작 방법은, 상기 제1 컨텐츠의 제2 영상으로부터 시간적으로 이후의 영상인 상기 제1 컨텐츠의 제3 영상에서 상기 특정 오브젝트가 사라지면, 상기 특정 오브젝트를 포함하는 영상의 디스플레이를 중단하는 단계(S550) 및 상기 제1 컨텐츠의 제3 영상으로부터 시간적으로 이후의 영상인 상기 제1 컨텐츠의 제4 영상이 상기 특정 오브젝트를 포함하면, 상기 제4 영상에 포함된 상기 특정 오브젝트를 포함하는 영상을 디스플레이 하는 단계(S560)를 포함할 수 있다.

이와 관련해서는 도 25 내지 도 26을 참고하여 구체적으로 설명한다.

도 25 내지 도 26은, 본 발명의 실시 예에 따른 특정 오브젝트가 사라지거나 다시 나타난 경우, 특정 오브젝트를 포함하는 영상을 디스플레이 하는 방법을 설명하기 위한 도면이다.

도 24b에서는 제1 컨텐츠의 제3 영상(2410)이 디스플레이 되는 것으로 설명하였다.

한편, 도 25에서 도시하는 바와 같이, 제어부(170)는 제1 컨텐츠의 제3 영상(2410)으로부터 시간적으로 이후의 영상인 제1 컨텐츠의 제4 영상(2510)을 디스플레이 할 수 있다.

한편, 제4 영상(2510)은 다른 오브젝트들을 포함할 뿐, 사용자 입력에 의해 선택된 특정 오브젝트는 포함하고 있지 않다.

이 경우, 즉, 제1 컨텐츠의 제3 영상(2410)으로부터 시간적으로 이후의 영상인 제1 컨텐츠의 제4 영상(2510)에서 특정 오브젝트가 사라지면, 제어부(170)는 특정 오브젝트를 포함하는 영상의 디스플레이를 중단할 수 있다.

한편, 도 26에서 도시하는 바와 같이, 제어부(170)는 제1 컨텐츠의 제4 영상(2510)으로부터 시간적으로 이후의 영상인 제1 컨텐츠의 제5 영상(2610)을 디스플레이 할 수 있다.

한편, 제5 영상(2610)에서는 특정 오브젝트(2611)가 다시 나타난 상태이다.

이 경우, 즉, 제1 컨텐츠의 제4 영상(2510)으로부터 시간적으로 이후의 영상인 제1 컨텐츠의 제5 영상(2610)이 특정 오브젝트(2611)를 포함하면, 제어부(170)는 제5 영상(2610)으로부터 특정 오브젝트를 포함하는 영상(2620)을 획득하여 디스플레이 할 수 있다.

한편, 도 6 내지 도 26의 실시 예에서는, 영상에 포함된 오브젝트에 기초하여 오브젝트를 포함하는 영상을 디스플레이 하는 것으로 설명하였으나 이에 한정되지 않는다. 예를 들어, 제어부(170)는 화면 상의 특정 구간의 좌표를 지정하는 입력을 수신할 수 있으며, 이 경우 제어부(170)는 특정 구간의 좌표에 대응하는 영상을 부화면으로 디스플레이 할 수 있다.

한편, 제어부(170)는 일반적으로 장치의 제어를 담당하는 구성으로, 중앙처리장치, 마이크로 프로세서, 프로세서 등의 용어와 혼용될 수 있다.

본 발명의 일 실시 예에 의하면, 전술한 방법은, 프로그램이 기록된 매체에 프로세서가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 프로세서가 읽을 수 있는 매체의 예로는, ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광 데이터 저장장치 등이 있으며, 캐리어 웨이브(예를 들어, 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다.

상기와 같이 설명된 디스플레이 장치는 상기 설명된 실시 예들의 구성과 방법이 한정되게 적용될 수 있는 것이 아니라, 상기 실시 예들은 다양한 변형이 이루어질 수 있도록 각 실시 예들의 전부 또는 일부가 선택적으로 조합되어 구성될 수도 있다.

170: 제어부 180: 디스플레이부

Claims (20)

1. 디스플레이 장치의 동작 방법에 있어서,
   특정 오브젝트를 포함하는 제1 컨텐츠의 제1 영상을 상기 디스플레이 장치의 화면에 디스플레이 하는 단계;
   상기 화면에 디스플레이 되는 영상을 확대하기 위한 입력을 수신하는 단계;
   상기 제1 영상으로부터 시간적으로 이후의 영상인 상기 제1 컨텐츠의 제2 영상이 확대됨에 따라 상기 제1 컨텐츠의 제2 영상에 포함된 상기 특정 오브젝트의 일부 또는 전부가 상기 화면을 벗어나면, 상기 제2 영상으로부터 상기 특정 오브젝트를 포함하는 영상을 획득하는 단계; 및
   상기 제2 영상을 확대한 영상 및 상기 제2 영상으로부터 획득한 특정 오브젝트를 포함하는 영상을 디스플레이 하는 단계를 포함하는
   디스플레이 장치의 동작 방법.
2. 제 1항에 있어서,
   상기 제2 영상을 확대한 영상 및 상기 제2 영상으로부터 획득한 특정 오브젝트를 포함하는 영상을 디스플레이 하는 단계는,
   상기 제2 영상을 확대한 영상을 상기 화면의 전체 영역에 디스플레이 하고, 상기 제2 영상으로부터 획득한 특정 오브젝트를 포함하는 영상을 상기 화면의 일 영역에 디스플레이 하는 단계를 포함하는
   디스플레이 장치의 동작 방법.
3. 제 1항에 있어서,
   상기 제2 영상은,
   상기 화면에 디스플레이 되는 상기 제2 영상을 확대한 영상 및 상기 화면에 디스플레이 되지 않는 일부 영상을 포함하고,
   상기 제2 영상으로부터 상기 특정 오브젝트를 포함하는 영상을 획득하는 단계는,
   상기 특정 오브젝트가 상기 화면에 디스플레이 되지 않는 일부 영상에 포함되면 상기 제2 영상으로부터 상기 특정 오브젝트를 포함하는 영상을 획득하는 단계를 포함하는
   디스플레이 장치의 동작 방법.
4. 제 1항에 있어서,
   상기 제1 컨텐츠의 제1 영상에 포함되는 하나 이상의 오브젝트 중 상기 특정 오브젝트를 선택하는 입력을 수신하는 단계를 더 포함하는
   디스플레이 장치의 동작 방법.
5. 제 1항에 있어서,
   상기 제1 컨텐츠의 제1 영상에 포함되는 특정 오브젝트는,
   상기 화면의 가장 자리 영역에 위치하고 텍스트를 포함하는 오브젝트인
   디스플레이 장치의 동작 방법.
6. 제 1항에 있어서,
   제2 컨텐츠의 영상을 디스플레이 하기 위한 입력을 수신하는 단계;
   상기 제1 컨텐츠의 제2 영상으로부터 시간적으로 이후의 영상인 상기 제1 컨텐츠의 제3 영상으로부터 상기 특정 오브젝트를 포함하는 영상을 획득하는 단계; 및
   상기 제2 컨텐츠의 영상을 디스플레이 하고, 상기 제1 컨텐츠의 제3 영상으로부터 획득한 특정 오브젝트를 포함하는 영상을 상기 제2 컨텐츠의 영상과 함께 디스플레이 하는 단계를 더 포함하는
   디스플레이 장치의 동작 방법.
7. 제 6항에 있어서,
   상기 제2 컨텐츠의 복수의 영상이 디스플레이 되는 중에 획득되는 상기 제1 컨텐츠의 복수의 영상을 저장하는 단계; 및
   상기 제2 컨텐츠의 복수의 영상이 디스플레이 되는 중 상기 제1 컨텐츠의 복수의 영상으로부터 상기 특정 오브젝트를 포함하는 영상을 획득하여 디스플레이 하고, 상기 제2 컨텐츠의 복수의 영상이 디스플레이 되는 중 상기 특정 오브젝트가 변경되면 상기 특정 오브젝트가 변경된 시점보다 이전 구간의 제1 컨텐츠의 영상을 디스플레이 하는 단계를 더 포함하는
   디스플레이 장치의 동작 방법.
8. 제 1항에 있어서,
   상기 화면에 디스플레이 되는 영상을 축소하기 위한 입력을 수신하는 단계; 및
   상기 제2 영상으로부터 시간적으로 이후의 영상인 상기 제1 컨텐츠의 제4 영상이 축소됨에 따라 상기 제1 컨텐츠의 제4 영상에 포함된 상기 특정 오브젝트가 상기 화면에 디스플레이 되면, 특정 오브젝트를 포함하는 영상의 디스플레이를 중단하는 단계를 더 포함하는
   디스플레이 장치의 동작 방법.
9. 제 1항에 있어서,
   상기 화면에 디스플레이 되는 영상을 이동하기 위한 제1 입력을 수신하는 단계;
   상기 제1 입력에 기초하여 상기 제2 영상으로부터 시간적으로 이후의 영상인 상기 제1 컨텐츠의 제5 영상에 포함된 상기 특정 오브젝트가 상기 화면에 디스플레이 되면, 특정 오브젝트를 포함하는 영상의 디스플레이를 중단하는 단계;
   상기 화면에 디스플레이 되는 영상을 이동하기 위한 제2 입력을 수신하는 단계; 및
   상기 제2 입력에 기초하여 상기 제1 컨텐츠의 제5 영상으로부터 시간적으로 이후의 영상인 상기 제1 컨텐츠의 제6 영상에 포함된 상기 특정 오브젝트의 일부 또는 전부가 상기 화면을 벗어나면, 상기 제6 영상으로부터 특정 오브젝트를 포함하는 영상을 획득하여 상기 제6 영상의 일부 영상과 함께 디스플레이 하는 단계를 포함하는
   디스플레이 장치의 동작 방법.
10. 제 1항에 있어서,
    상기 특정 오브젝트를 포함하는 영상을 디스플레이 하는 단계는,
    상기 제1 영상에 포함된 특정 오브젝트의 크기 대비 상기 제2 영상에 포함된 특정 오브젝트의 크기 및 상기 제1 영상에 포함된 특정 오브젝트의 가로 세로 비율 대비 상기 제2 영상에 포함된 특정 오브젝트의 가로 세로 비율 중 적어도 하나에 기초하여, 배율 및 가로 세로 비율 중 적어도 하나가 보정된 특정 오브젝트를 포함하는 영상을 디스플레이 하는 단계를 포함하는
    디스플레이 장치의 동작 방법.
11. 디스플레이 장치에 있어서,
    영상을 디스플레이 하는 디스플레이부;
    사용자로부터 입력을 수신하는 입력부; 및
    특정 오브젝트를 포함하는 제1 컨텐츠의 제1 영상을 상기 디스플레이 장치의 화면에 디스플레이 하도록 상기 디스플레이부를 제어하고, 상기 화면에 디스플레이 되는 영상을 확대하기 위한 입력을 상기 입력부를 통하여 수신하고, 상기 제1 영상으로부터 시간적으로 이후의 영상인 상기 제1 컨텐츠의 제2 영상이 확대됨에 따라 상기 제1 컨텐츠의 제2 영상에 포함된 상기 특정 오브젝트의 일부 또는 전부가 상기 화면을 벗어나면, 상기 제2 영상으로부터 상기 특정 오브젝트를 포함하는 영상을 획득하고, 상기 제2 영상을 확대한 영상 및 상기 제2 영상으로부터 획득한 특정 오브젝트를 포함하는 영상을 디스플레이 하도록 상기 디스플레이부를 제어하는 제어부를 포함하는
    디스플레이 장치.
12. 제 11항에 있어서,
    상기 제어부는,
    상기 제2 영상을 확대한 영상을 상기 화면의 전체 영역에 디스플레이 하고, 상기 제2 영상으로부터 획득한 특정 오브젝트를 포함하는 영상을 상기 화면의 일 영역에 디스플레이 하는
    디스플레이 장치.
13. 제 11항에 있어서,
    상기 제2 영상은,
    상기 화면에 디스플레이 되는 상기 제2 영상을 확대한 영상 및 상기 화면에 디스플레이 되지 않는 일부 영상을 포함하고,
    상기 제어부는,
    상기 특정 오브젝트가 상기 화면에 디스플레이 되지 않는 일부 영상에 포함되면 상기 제2 영상으로부터 상기 특정 오브젝트를 포함하는 영상을 획득하는
    디스플레이 장치.
14. 제 11항에 있어서,
    상기 제어부는,
    상기 제1 컨텐츠의 제1 영상에 포함되는 하나 이상의 오브젝트 중 상기 특정 오브젝트를 선택하는 입력을 수신하는
    디스플레이 장치.
15. 제 11항에 있어서,
    상기 제1 컨텐츠의 제1 영상에 포함되는 특정 오브젝트는,
    상기 화면의 가장 자리 영역에 위치하고 텍스트를 포함하는 오브젝트인
    디스플레이 장치.
16. 제 11항에 있어서,
    상기 제어부는,
    제2 컨텐츠의 영상을 디스플레이 하기 위한 입력을 수신하고, 상기 제1 컨텐츠의 제2 영상으로부터 시간적으로 이후의 영상인 상기 제1 컨텐츠의 제3 영상으로부터 상기 특정 오브젝트를 포함하는 영상을 획득하고, 상기 제2 컨텐츠의 영상을 디스플레이 하고, 상기 제1 컨텐츠의 제3 영상으로부터 획득한 특정 오브젝트를 포함하는 영상을 상기 제2 컨텐츠의 영상과 함께 디스플레이 하는
    디스플레이 장치.
17. 제 16항에 있어서,
    영상을 저장하는 저장부를 더 포함하고,
    상기 제어부는,
    상기 제2 컨텐츠의 복수의 영상이 디스플레이 되는 중에 획득되는 상기 제1 컨텐츠의 복수의 영상을 상기 저장부에 저장하고, 상기 제2 컨텐츠의 복수의 영상이 디스플레이 되는 중 상기 제1 컨텐츠의 복수의 영상으로부터 상기 특정 오브젝트를 포함하는 영상을 획득하여 디스플레이 하고, 상기 제2 컨텐츠의 복수의 영상이 디스플레이 되는 중 상기 특정 오브젝트가 변경되면 상기 특정 오브젝트가 변경된 시점보다 이전 구간의 제1 컨텐츠의 영상을 디스플레이 하는
    디스플레이 장치.
18. 제 11항에 있어서,
    상기 제어부는,
    상기 화면에 디스플레이 되는 영상을 축소하기 위한 입력을 수신하고, 상기 제2 영상으로부터 시간적으로 이후의 영상인 상기 제1 컨텐츠의 제4 영상이 축소됨에 따라 상기 제1 컨텐츠의 제4 영상에 포함된 상기 특정 오브젝트가 상기 화면에 디스플레이 되면 특정 오브젝트를 포함하는 영상의 디스플레이를 중단하는
    디스플레이 장치.
19. 제 11항에 있어서,
    상기 제어부는,
    상기 화면에 디스플레이 되는 영상을 이동하기 위한 제1 입력을 수신하고,
    상기 제1 입력에 기초하여 상기 제2 영상으로부터 시간적으로 이후의 영상인 상기 제1 컨텐츠의 제5 영상에 포함된 상기 특정 오브젝트가 상기 화면에 디스플레이 되면, 특정 오브젝트를 포함하는 영상의 디스플레이를 중단하고,
    상기 화면에 디스플레이 되는 영상을 이동하기 위한 제2 입력을 수신하고,
    상기 제2 입력에 기초하여 상기 제1 컨텐츠의 제5 영상으로부터 시간적으로 이후의 영상인 상기 제1 컨텐츠의 제6 영상에 포함된 상기 특정 오브젝트의 일부 또는 전부가 상기 화면을 벗어나면, 상기 제6 영상으로부터 특정 오브젝트를 포함하는 영상을 획득하여 상기 제6 영상의 일부 영상과 함께 디스플레이 하는
    디스플레이 장치.
20. 제 11항에 있어서,
    상기 제어부는,
    상기 제1 영상에 포함된 특정 오브젝트의 크기 대비 상기 제2 영상에 포함된 특정 오브젝트의 크기 및 상기 제1 영상에 포함된 특정 오브젝트의 가로 세로 비율 대비 상기 제2 영상에 포함된 특정 오브젝트의 가로 세로 비율 중 적어도 하나에 기초하여, 배율 및 가로 세로 비율 중 적어도 하나가 보정된 특정 오브젝트를 포함하는 영상을 디스플레이 하는
    디스플레이 장치.

Images