KR20180016805A - 디스플레이 장치 및 그의 동작 방법 - Google Patents
디스플레이 장치 및 그의 동작 방법 Download PDFInfo
- Publication number
- KR20180016805A KR20180016805A KR1020160100607A KR20160100607A KR20180016805A KR 20180016805 A KR20180016805 A KR 20180016805A KR 1020160100607 A KR1020160100607 A KR 1020160100607A KR 20160100607 A KR20160100607 A KR 20160100607A KR 20180016805 A KR20180016805 A KR 20180016805A
- Authority
- KR
- South Korea
- Prior art keywords
- display
- content
- unit
- display device
- image
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
-
- H04N5/44513—
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
- H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
- H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
- H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
- H04N21/42208—Display device provided on the remote control
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/485—End-user interface for client configuration
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/81—Monomedia components thereof
- H04N21/8146—Monomedia components thereof involving graphical data, e.g. 3D object, 2D graphics
-
- H04N2005/4408—
-
- H04N2005/44517—
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Computer Graphics (AREA)
- Controls And Circuits For Display Device (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
본 발명의 실시 예에 따른 디스플레이 장치는 360 컨텐트(content)를 표시하는 디스플레이부, 360 컨텐트의 확대 위치 또는 확대 레벨을 변경하는 명령을 수신하고, 수신된 명령에 따라 360 컨텐트의 확대 위치 또는 확대 레벨을 변경하여 표시하도록 디스플레이부를 제어하는 제어부 및 확대 위치 또는 확대 레벨의 변경과 관련된 메타 데이터(meta data)를 저장하는 저장부를 포함하여, 360 컨텐트와 관련된 나만의 영상을 제공할 수 있다.
Description
본 발명은 디스플레이 장치 및 그의 동작 방법에 관한 것이다.
최근 들어, 유선 또는 무선 통신망을 이용한 디지털 TV 서비스가 보편화되고 있다. 디지털 TV 서비스는 기존의 아날로그 방송 서비스에서는 제공할 수 없었던 다양한 서비스를 제공할 수 있다.
예를 들어 디지털 TV 서비스의 한 종류인 IPTV(Internet Protocol Television), smart TV 서비스의 경우 사용자로 하여금 시청 프로그램의 종류, 시청 시간 등을 능동적으로 선택할 수 있도록 하는 양방향성을 제공한다. IPTV, smart TV서비스는 이러한 양방향성을 기반으로 하여 다양한 부가 서비스, 예컨대 인터넷 검색, 홈쇼핑, 온라인 게임 등을 제공할 수도 있다.
또한, 최근 디스플레이 장치는 360 컨텐트(content)를 제공할 수 있다. 360 컨텐트는 360도 카메라로 촬영된 영상을 포함할 수 있다. 360 카메라는 복수개의 렌즈를 포함하여, 사각 지역 없이 전, 후, 좌, 우, 상 그리고 하 방향을 모두 촬영할 수 있다. 따라서, 디스플레이 장치는 360도 카메라로 전 방향을 동시에 촬영한 영상을 고화질로 제공할 수 있다.
그러나, 360 컨텐트는 주로 VR(Virtual Reality) 기기에 최적화되어 있어 TV와 같은 디스플레이 장치로 제공하는 경우 그 조작이 불편할 수 있다.
본 발명은 360 컨텐트를 디스플레이 하는 중 사용자가 보고 있지 않은 영역에서 특정 이벤트가 발생하면, 이벤트가 발생한 영역으로 자동으로 이동하여 표시하는 디스플레이 장치 및 그의 동작 방법을 제공하고자 한다.
본 발명은 360 컨텐트를 보면서 리모컨의 모션만으로 편리하게 화면의 일부분을 확대하거나 화면을 이동하는 디스플레이 장치 및 그의 동작 방법을 제공하고자 한다.
본 발명은 하나의 360 컨텐트와 관련하여 적어도 하나 이상의 나만의 영상을 제공하는 디스플레이 장치 및 그의 동작 방법을 제공하고자 한다.
본 발명의 실시 예에 따른 디스플레이 장치는 360 컨텐트(content)를 표시하는 디스플레이부, 360 컨텐트의 확대 위치 또는 확대 레벨을 변경하는 명령을 수신하고, 수신된 명령에 따라 360 컨텐트의 확대 위치 또는 확대 레벨을 변경하여 표시하도록 디스플레이부를 제어하는 제어부 및 확대 위치 또는 확대 레벨의 변경과 관련된 메타 데이터(meta data)를 저장하는 저장부를 포함할 수 있다.
본 발명의 실시 예에 따른 디스플레이 장치에서, 제어부는, 개인화 줌 영상 재생 명령을 수신하면 360 컨텐트를 메타 데이터와 함께 처리하여 360 컨텐트의 확대 위치 또는 확대 레벨을 변경하여 표시하도록 디스플레이부를 제어할 수 있다.
본 발명의 실시 예에 따른 디스플레이 장치에서, 메타 데이터는, 확대 위치 또는 확대 레벨을 변경하는 시점에서의 시간, 확대 위치 또는 확대 레벨을 변경하는 시점에서의 포인터 좌표, 360 컨텐트의 회전 각도 및 배율 정보를 포함할 수 있다.
본 발명의 실시 예에 따른 디스플레이 장치에서, 제어부는, 이벤트 발생을 감지하고, 감지된 이벤트에 기초하여 360 컨텐트의 확대 위치 또는 확대 레벨을 변경하여 표시하도록 디스플레이부를 제어할 수 있다.
본 발명의 실시 예에 따른 디스플레이 장치에서, 제어부는, 감지된 이벤트에 대응하는 영역으로 확대 위치 또는 확대 레벨을 변경하여 표시하도록 디스플레이부를 제어할 수 있다.
본 발명의 실시 예에 따른 디스플레이 장치에서, 제어부는, 감지된 이벤트를 트랙킹(tracking)하여 표시하도록 디스플레이부를 제어할 수 있다.
본 발명의 실시 예에 따른 디스플레이 장치에서, 이벤트는, 사람 등장 이벤트 및 일정 기준 이상의 볼륨(volume) 증가 이벤트를 포함할 수 있다.
본 발명의 실시 예에 따른 디스플레이 장치에서, 제어부는, 디스플레이부에 수직인 방향으로 원격 제어 장치가 움직이는 신호를 수신함에 따라 360 컨텐트의 확대 레벨을 변경하여 표시하도록 디스플레이부를 제어할 수 있다.
본 발명의 실시 예에 따른 디스플레이 장치에서, 제어부는, 디스플레이부에 가까워지는 방향으로 원격 제어 장치가 움직이는 신호를 수신하면 360 컨텐트의 확대 레벨을 증가시켜 표시하고, 디스플레이부에 멀어지는 방향으로 원격 제어 장치가 움직이는 신호를 수신하면 360 컨텐트의 확대 레벨을 감소시켜 표시하도록 디스플레이부를 제어할 수 있다.
본 발명의 실시 예에 따른 디스플레이 장치에서, 제어부는, 원격 제어 장치가 움직인 거리에 비례하여 360 컨텐트의 확대 레벨을 증가 또는 감소시켜 표시하도록 디스플레이부를 제어할 수 있다.
본 발명의 다양한 실시 예에 따르면, 360 컨텐트를 시청하는 경우 사방에서 발생할 수 있는 이벤트들을 사용자가 놓치지 않고 모두 볼 수 있도록 돕는 효과가 있다.
본 발명의 다양한 실시 예에 따르면, 360 컨텐트를 시청하고 있는 경우 특정 이벤트가 발생하면, 사용자가 별도로 조작하지 않아도 발생한 이벤트를 자동으로 보여주는 편리함을 제공하는 효과가 있다.
본 발명의 다양한 실시 예에 따르면, 동일한 360 컨텐트를 사용자마다 다르게 나만의 영상을 제작할 수 있는 효과가 있다.
본 발명의 다양한 실시 예에 따르면, 동일한 360 컨텐트와 관련된 나만의 영상을 제작하는 경우, 나만의 영상을 영상 파일이 아닌 텍스트 파일의 형식으로 저장할 수 있어 메모리 크기를 줄일 수 있는 효과가 있다.
본 발명의 다양한 실시 예에 따르면, 동일한 360 컨텐트를 볼 때마다 확대 위치 또는 확대 배율을 변경해야 하는 불편함을 해소할 수 있는 효과가 있다.
도 1은 본 발명의 일 실시 예에 따른 디스플레이 장치의 구성을 블록도로 도시한 것이다.
도 2는 본 발명의 일 실시 예에 따른 원격제어장치의 블록도이다.
도 3은 본 발명의 일 실시 예에 따른 원격제어장치의 실제 구성 예를 보여준다.
도 4는 본 발명의 실시 예에 따라 원격 제어 장치를 활용하는 예를 보여준다.
도 5는 본 발명의 일 실시 예에 따른 디스플레이 장치의 동작 방법을 설명하기 위한 순서도이다.
도 6은 본 발명의 제1 실시 예에 따른 디스플레이 장치가 360 컨텐트를 디스플레이하는 방법을 설명하기 위한 도면이다.
도 7은 본 발명의 제2 실시 예에 따른 디스플레이 장치가 360 컨텐트를 디스플레이하는 방법을 설명하기 위한 도면이다.
도 8은 본 발명의 제3 실시 예에 따른 디스플레이 장치가 360 컨텐트를 디스플레이하는 방법을 설명하기 위한 도면이다.
도 9는 본 발명의 제4 실시 예에 따른 디스플레이 장치가 360 컨텐트를 디스플레이하는 방법을 설명하기 위한 도면이다.
도 10은 본 발명의 제5 실시 예에 따른 디스플레이 장치가 360 컨텐트를 디스플레이하는 방법을 설명하기 위한 도면이다.
도 11은 본 발명의 제6 실시 예에 따른 디스플레이 장치가 360 컨텐트를 디스플레이하는 방법을 설명하기 위한 도면이다.
도 12는 본 발명의 실시 예에 따른 사람 등장 이벤트를 감지함에 따라 360 컨텐트의 확대 위치 또는 확대 레벨을 변경하는 동작을 설명하기 위한 도면이다.
도 13 내지 도 14는 본 발명의 실시 예에 따른 일정 기준 이상의 볼륨 증가 이벤트를 감지함에 따라 360 컨텐트의 확대 위치 또는 확대 레벨을 변경하는 동작을 설명하기 위한 도면이다.
도 15는 본 발명의 실시 예에 따른 360 컨텐트 전체 영상에서 일 영역을 선택하는 명령을 수신하여 확대 위치 또는 확대 레벨을 변경하는 명령을 수신하는 동작을 설명하기 위한 도면이다.
도 16은 본 발명의 실시 예에 따른 360 컨텐트 미니뷰 영상에서 일 영역을 선택하는 명령을 수신하여 확대 위치 또는 확대 레벨을 변경하는 명령을 수신하는 동작을 설명하기 위한 도면이다.
도 17은 본 발명의 실시 예에 따른 확대 위치를 변경하는 명령을 수신하는 동작을 설명하기 위한 도면이다.
도 18은 본 발명의 제1 실시 예에 따른 확대 레벨을 변경하는 명령을 수신하는 동작을 설명하기 위한 도면이다.
도 19 내지 도 20은 본 발명의 제2 실시 예에 따른 확대 레벨을 변경하는 명령을 수신하는 동작을 설명하기 위한 도면이다.
도 21은 본 발명의 실시 예에 따른 개인화 줌 영상을 디스플레이하는 동작을 설명하기 위한 순서도이다.
도 22는 본 발명의 실시 예에 따른 360 컨텐트의 메타 데이터의 예시 도면이다.
도 23은 본 발명의 일 실시 예에 따른 메타 데이터를 적용하지 않은 360 컨텐트를 디스플레이하는 방법을 설명하기 위한 도면이다.
도 24는 본 발명의 일 실시 예에 따른 메타 데이터를 적용하여 360 컨텐트를 디스플레이하는 방법을 설명하기 위한 도면이다.
도 2는 본 발명의 일 실시 예에 따른 원격제어장치의 블록도이다.
도 3은 본 발명의 일 실시 예에 따른 원격제어장치의 실제 구성 예를 보여준다.
도 4는 본 발명의 실시 예에 따라 원격 제어 장치를 활용하는 예를 보여준다.
도 5는 본 발명의 일 실시 예에 따른 디스플레이 장치의 동작 방법을 설명하기 위한 순서도이다.
도 6은 본 발명의 제1 실시 예에 따른 디스플레이 장치가 360 컨텐트를 디스플레이하는 방법을 설명하기 위한 도면이다.
도 7은 본 발명의 제2 실시 예에 따른 디스플레이 장치가 360 컨텐트를 디스플레이하는 방법을 설명하기 위한 도면이다.
도 8은 본 발명의 제3 실시 예에 따른 디스플레이 장치가 360 컨텐트를 디스플레이하는 방법을 설명하기 위한 도면이다.
도 9는 본 발명의 제4 실시 예에 따른 디스플레이 장치가 360 컨텐트를 디스플레이하는 방법을 설명하기 위한 도면이다.
도 10은 본 발명의 제5 실시 예에 따른 디스플레이 장치가 360 컨텐트를 디스플레이하는 방법을 설명하기 위한 도면이다.
도 11은 본 발명의 제6 실시 예에 따른 디스플레이 장치가 360 컨텐트를 디스플레이하는 방법을 설명하기 위한 도면이다.
도 12는 본 발명의 실시 예에 따른 사람 등장 이벤트를 감지함에 따라 360 컨텐트의 확대 위치 또는 확대 레벨을 변경하는 동작을 설명하기 위한 도면이다.
도 13 내지 도 14는 본 발명의 실시 예에 따른 일정 기준 이상의 볼륨 증가 이벤트를 감지함에 따라 360 컨텐트의 확대 위치 또는 확대 레벨을 변경하는 동작을 설명하기 위한 도면이다.
도 15는 본 발명의 실시 예에 따른 360 컨텐트 전체 영상에서 일 영역을 선택하는 명령을 수신하여 확대 위치 또는 확대 레벨을 변경하는 명령을 수신하는 동작을 설명하기 위한 도면이다.
도 16은 본 발명의 실시 예에 따른 360 컨텐트 미니뷰 영상에서 일 영역을 선택하는 명령을 수신하여 확대 위치 또는 확대 레벨을 변경하는 명령을 수신하는 동작을 설명하기 위한 도면이다.
도 17은 본 발명의 실시 예에 따른 확대 위치를 변경하는 명령을 수신하는 동작을 설명하기 위한 도면이다.
도 18은 본 발명의 제1 실시 예에 따른 확대 레벨을 변경하는 명령을 수신하는 동작을 설명하기 위한 도면이다.
도 19 내지 도 20은 본 발명의 제2 실시 예에 따른 확대 레벨을 변경하는 명령을 수신하는 동작을 설명하기 위한 도면이다.
도 21은 본 발명의 실시 예에 따른 개인화 줌 영상을 디스플레이하는 동작을 설명하기 위한 순서도이다.
도 22는 본 발명의 실시 예에 따른 360 컨텐트의 메타 데이터의 예시 도면이다.
도 23은 본 발명의 일 실시 예에 따른 메타 데이터를 적용하지 않은 360 컨텐트를 디스플레이하는 방법을 설명하기 위한 도면이다.
도 24는 본 발명의 일 실시 예에 따른 메타 데이터를 적용하여 360 컨텐트를 디스플레이하는 방법을 설명하기 위한 도면이다.
이하, 본 발명과 관련된 실시 예에 대하여 도면을 참조하여 보다 상세하게 설명한다. 이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 명세서 작성의 용이함만이 고려되어 부여되거나 혼용되는 것으로서, 그 자체로 서로 구별되는 의미 또는 역할을 갖는 것은 아니다.
본 발명의 실시예에 따른 디스플레이 장치는, 예를 들어 방송 수신 기능에 컴퓨터 지원 기능을 추가한 지능형 디스플레이 장치로서, 방송 수신 기능에 충실하면서도 인터넷 기능 등이 추가되어, 수기 방식의 입력 장치, 터치 스크린 또는 공간 리모콘 등 보다 사용에 편리한 인터페이스를 갖출 수 있다. 그리고, 유선 또는 무선 인터넷 기능의 지원으로 인터넷 및 컴퓨터에 접속되어, 이메일, 웹브라우징, 뱅킹 또는 게임 등의 기능도 수행가능하다. 이러한 다양한 기능을 위해 표준화된 범용 OS가 사용될 수 있다.
따라서, 본 발명에서 기술되는 디스플레이 장치는, 예를 들어 범용의 OS 커널 상에, 다양한 애플리케이션이 자유롭게 추가되거나 삭제 가능하므로, 사용자 친화적인 다양한 기능이 수행될 수 있다. 상기 디스플레이 장치는, 보다 구체적으로 예를 들면, 네트워크 TV, HBBTV, 스마트 TV, LED TV, OLED TV 등이 될 수 있으며, 경우에 따라 스마트폰에도 적용 가능하다.
도 1은 본 발명의 일 실시예에 따른 디스플레이 장치의 구성을 블록도로 도시한 것이다.
도 1을 참조하면, 디스플레이 장치(100)는 방송 수신부(130), 외부장치 인터페이스부(135), 저장부(140), 사용자입력 인터페이스부(150), 제어부(170), 근거리 통신부(173), 디스플레이부(180), 오디오 출력부(185), 전원공급부(190)를 포함할 수 있다.
방송 수신부(130)는 튜너(131), 복조부(132) 및 네트워크 인터페이스부(133)를 포함할 수 있다.
튜너(131)는 채널 선국 명령에 따라 특정 방송 채널을 선국할 수 있다. 튜너(131)는 선국된 특정 방송 채널에 대한 방송 신호를 수신할 수 있다.
복조부(132)는 수신한 방송 신호를 비디오 신호, 오디오 신호, 방송 프로그램과 관련된 데이터 신호로 분리할 수 있고, 분리된 비디오 신호, 오디오 신호 및 데이터 신호를 출력이 가능한 형태로 복원할 수 있다.
외부장치 인터페이스부(135)는 인접하는 외부 장치 내의 애플리케이션 또는 애플리케이션 목록을 수신하여, 제어부(170) 또는 저장부(140)로 전달할 수 있다.
외부장치 인터페이스부(135)는 외부장치와의 연결 경로를 제공할 수 있다. 외부장치 인테퍼이스부(135)는 외부장치로부터 출력된 영상, 오디오 중 하나 이상을 수신하여, 제어부(170)로 전달할 수 있다. 외부장치 인터페이스부(135)에 연결 가능한 외부 장치는 셋톱박스, 블루레이 플레이어, DVD 플레이어, 게임기, 사운드 바, 스마트폰, PC, USB 메모리, 홈 씨어터 중 어느 하나일 수 있다.
네트워크 인터페이스부(133)는 디스플레이 장치(100)를 인터넷망을 포함하는 유/무선 네트워크와 연결하기 위한 인터페이스를 제공할 수 있다. 네트워크 인터페이스부(133)는 접속된 네트워크 또는 접속된 네트워크에 링크된 다른 네트워크를 통해, 다른 사용자 또는 다른 전자 기기와 데이터를 송신 또는 수신할 수 있다.
또한, 디스플레이 장치(100)에 미리 등록된 다른 사용자 또는 다른 전자 기기 중 선택된 사용자 또는 선택된 전자기기에, 디스플레이 장치(100)에 저장된 일부의 컨텐츠 데이터를 송신할 수 있다.
네트워크 인터페이스부(133)는 접속된 네트워크 또는 접속된 네트워크에 링크된 다른 네트워크를 통해, 소정 웹 페이지에 접속할 수 있다. 즉, 네트워크를 통해 소정 웹 페이지에 접속하여, 해당 서버와 데이터를 송신 또는 수신할 수 있다.
그리고, 네트워크 인터페이스부(133)는 컨텐츠 제공자 또는 네트워크 운영자가 제공하는 컨텐츠 또는 데이터들을 수신할 수 있다. 즉, 네트워크 인터페이스부(133)는 네트워크를 통하여 컨텐츠 제공자 또는 네트워크 제공자로부터 제공되는 영화, 광고, 게임, VOD, 방송 신호 등의 컨텐츠 및 그와 관련된 정보를 수신할 수 있다.
또한, 네트워크 인터페이스부(133)는 네트워크 운영자가 제공하는 펌웨어의 업데이트 정보 및 업데이트 파일을 수신할 수 있으며, 인터넷 또는 컨텐츠 제공자 또는 네트워크 운영자에게 데이터들을 송신할 수 있다.
네트워크 인터페이스부(133)는 네트워크를 통해, 공중에 공개(open)된 애플리케이션들 중 원하는 애플리케이션을 선택하여 수신할 수 있다.
저장부(140)는 제어부(170) 내의 각 신호 처리 및 제어를 위한 프로그램이 저장하고, 신호 처리된 영상, 음성 또는 데이터신호를 저장할 수 있다.
또한, 저장부(140)는 외부장치 인터페이스부(135) 또는 네트워크 인터페이스부(133)로부터 입력되는 영상, 음성, 또는 데이터 신호의 임시 저장을 위한 기능을 수행할 수도 있으며, 채널 기억 기능을 통하여 소정 이미지에 관한 정보를 저장할 수도 있다.
저장부(140)는 외부장치 인터페이스부(135) 또는 네트워크 인터페이스부(133)로부터 입력되는 애플리케이션 또는 애플리케이션 목록을 저장할 수 있다.
디스플레이 장치(100)는 저장부(140) 내에 저장되어 있는 컨텐츠 파일(동영상 파일, 정지영상 파일, 음악 파일, 문서 파일, 애플리케이션 파일 등)을 재생하여 사용자에게 제공할 수 있다.
사용자입력 인터페이스부(150)는 사용자가 입력한 신호를 제어부(170)로 전달하거나, 제어부(170)로부터의 신호를 사용자에게 전달할 수 있다. 예를 들어, 사용자입력 인터페이스부(150)는 블루투스(Bluetooth), WB(Ultra Wideband), 지그비(ZigBee) 방식, RF(Radio Frequency) 통신 방식 또는 적외선(IR) 통신 방식 등 다양한 통신 방식에 따라, 원격제어장치(200)로부터 전원 온/오프, 채널 선택, 화면 설정 등의 제어 신호를 수신하여 처리하거나, 제어부(170)로부터의 제어 신호를 원격제어장치(200)로 송신하도록 처리할 수 있다.
또한, 사용자입력 인터페이스부(150)는, 전원키, 채널키, 볼륨키, 설정치 등의 로컬키(미도시)에서 입력되는 제어 신호를 제어부(170)에 전달할 수 있다.
제어부(170)에서 영상 처리된 영상 신호는 디스플레이부(180)로 입력되어 해당 영상 신호에 대응하는 영상으로 표시될 수 있다. 또한, 제어부(170)에서 영상 처리된 영상 신호는 외부장치 인터페이스부(135)를 통하여 외부 출력장치로 입력될 수 있다.
제어부(170)에서 처리된 음성 신호는 오디오 출력부(185)로 오디오 출력될 수 있다. 또한, 제어부(170)에서 처리된 음성 신호는 외부장치 인터페이스부(135)를 통하여 외부 출력장치로 입력될 수 있다.
그 외, 제어부(170)는, 디스플레이 장치(100) 내의 전반적인 동작을 제어할 수 있다.
또한, 제어부(170)는 사용자입력 인터페이스부(150)를 통하여 입력된 사용자 명령 또는 내부 프로그램에 의하여 디스플레이 장치(100)를 제어할 수 있으며, 네트워크에 접속하여 사용자가 원하는 애플리케이션 또는 애플리케이션 목록을 디스플레이 장치(100) 내로 다운받을 수 있도록 할 수 있다.
제어부(170)는 사용자가 선택한 채널 정보 등이 처리한 영상 또는 음성신호와 함께 디스플레이부(180) 또는 오디오 출력부(185)를 통하여 출력될 수 있도록 한다.
또한, 제어부(170)는 사용자입력 인터페이스부(150)를 통하여 수신한 외부장치 영상 재생 명령에 따라, 외부장치 인터페이스부(135)를 통하여 입력되는 외부 장치, 예를 들어, 카메라 또는 캠코더로부터의, 영상 신호 또는 음성 신호가 디스플레이부(180) 또는 오디오 출력부(185)를 통해 출력될 수 있도록 한다.
한편, 제어부(170)는 영상을 표시하도록 디스플레이부(180)를 제어할 수 있으며, 예를 들어 튜너(131)를 통해 입력되는 방송 영상, 또는 외부장치 인터페이스부(135)를 통해 입력되는 외부 입력 영상, 또는 네트워크 인터페이스부를 통해 입력되는 영상, 또는 저장부(140)에 저장된 영상이 디스플레이부(180)에서 표시되도록 제어할 수 있다. 이 경우, 디스플레이부(180)에 표시되는 영상은 정지 영상 또는 동영상일 수 있으며, 2D 영상 또는 3D 영상일 수 있다.
또한, 제어부(170)는 디스플레이 장치(100) 내에 저장된 컨텐츠, 또는 수신된 방송 컨텐츠, 외부로 부터 입력되는 외부 입력 컨텐츠가 재생되도록 제어할 수 있으며, 상기 컨텐츠는 방송 영상, 외부 입력 영상, 오디오 파일, 정지 영상, 접속된 웹 화면, 및 문서 파일 등 다양한 형태일 수 있다.
근거리 통신부(173)는 유선 또는 무선 통신을 통해 외부 기기와 통신을 수행할 수 있다. 근거리 통신부(173)는 외부 기기와 근거리 통신(Short range communication)을 수행할 수 있다. 이를 위해, 근거리 통신부(173)는 블루투스(Bluetooth™), RFID(Radio Frequency Identification), 적외선 통신(Infrared Data Association; IrDA), UWB(Ultra Wideband), ZigBee, NFC(Near Field Communication), Wi-Fi(Wireless-Fidelity), Wi-Fi Direct, Wireless USB(Wireless Universal Serial Bus) 기술 중 적어도 하나를 이용하여, 근거리 통신을 지원할 수 있다. 이러한, 근거리 통신부(173)는 근거리 무선 통신망(Wireless Area Networks)을 통해 디스플레이 장치(100)와 무선 통신 시스템 사이, 디스플레이 장치(100)와 다른 디스플레이 장치(100) 사이, 또는 디스플레이 장치(100)와 디스플레이 장치(100, 또는 외부서버)가 위치한 네트워크 사이의 무선 통신을 지원할 수 있다. 근거리 무선 통신망은 근거리 무선 개인 통신망(Wireless Personal Area Networks)일 수 있다.
여기에서, 다른 디스플레이 장치(100)는 본 발명에 따른 디스플레이 장치(100)와 데이터를 상호 교환하는 것이 가능한(또는 연동 가능한) 웨어러블 디바이스(wearable device, 예를 들어, 스마트워치(smartwatch), 스마트 글래스(smart glass), HMD(head mounted display)), 스마트 폰과 같은 이동 단말기가 될 수 있다. 근거리 통신부(173)는 디스플레이 장치(100) 주변에, 통신 가능한 웨어러블 디바이스를 감지(또는 인식)할 수 있다. 나아가, 제어부(170)는 감지된 웨어러블 디바이스가 본 발명에 따른 디스플레이 장치(100)와 통신하도록 인증된 디바이스인 경우, 디스플레이 장치(100)에서 처리되는 데이터의 적어도 일부를, 근거리 통신부(173)를 통해 웨어러블 디바이스로 송신할 수 있다. 따라서, 웨어러블 디바이스의 사용자는, 디스플레이 장치(100)에서 처리되는 데이터를, 웨어러블 디바이스를 통해 이용할 수 있다.
디스플레이부(180)는 제어부(170)에서 처리된 영상 신호, 데이터 신호, OSD 신호 또는 외부장치 인터페이스부(135)에서 수신되는 영상 신호, 데이터 신호 등을 각각 R,G,B 신호로 변환하여 구동 신호를 생성할 수 있다.
한편, 도 1에 도시된 디스플레이 장치(100)는 본 발명의 일실시예에 불과하므로. 도시된 구성요소들 중 일부는 실제 구현되는 디스플레이 장치(100)의 사양에 따라 통합, 추가, 또는 생략될 수 있다.
즉, 필요에 따라 2 이상의 구성요소가 하나의 구성요소로 합쳐지거나, 혹은 하나의 구성요소가 2 이상의 구성요소로 세분되어 구성될 수 있다. 또한, 각 블록에서 수행하는 기능은 본 발명의 실시예를 설명하기 위한 것이며, 그 구체적인 동작이나 장치는 본 발명의 권리범위를 제한하지 아니한다.
본 발명의 또 다른 실시예에 따르면, 디스플레이 장치(100)는 도 1에 도시된 바와 달리, 튜너(131)와 복조부(132)를 구비하지 않고 네트워크 인터페이스부(133) 또는 외부장치 인터페이스부(135)를 통해서 영상을 수신하여 재생할 수도 있다.
예를 들어, 디스플레이 장치(100)는 방송 신호 또는 다양한 네트워크 서비스에 따른 컨텐츠들을 수신하기 위한 등과 같은 셋탑 박스 등과 같은 영상 처리 장치와 상기 영상 처리 장치로부터 입력되는 컨텐츠를 재생하는 컨텐츠 재생 장치로 분리되어 구현될 수 있다.
이 경우, 이하에서 설명할 본 발명의 실시예에 따른 디스플레이 장치의 동작 방법은 도 1을 참조하여 설명한 바와 같은 디스플레이 장치(100)뿐 아니라, 상기 분리된 셋탑 박스 등과 같은 영상 처리 장치 또는 디스플레이부(180) 및 오디오출력부(185)를 구비하는 컨텐츠 재생 장치 중 어느 하나에 의해 수행될 수도 있다.
다음으로, 도 2 내지 도 3을 참조하여, 본 발명의 일 실시 예에 따른 원격제어장치에 대해 설명한다.
도 2은 본 발명의 일 실시 예에 따른 원격제어장치의 블록도이고, 도 3은 본발명의 일 실시 예에 따른 원격제어장치(200)의 실제 구성 예를 보여준다.
먼저, 도 2를 참조하면, 원격제어장치(200)는 지문인식부(210), 무선통신부(220), 사용자 입력부(230), 센서부(240), 출력부(250), 전원공급부(260), 저장부(270), 제어부(280), 음성 획득부(290)를 포함할 수 있다.
도 2을 참조하면, 무선통신부(225)는 전술하여 설명한 본 발명의 실시 예들에 따른 디스플레이 장치 중 임의의 어느 하나와 신호를 송수신한다.
원격제어장치(200)는 RF 통신규격에 따라 디스플레이 장치(100)와 신호를 송수신할 수 있는 RF 모듈(221)을 구비하며, IR 통신규격에 따라 디스플레이 장치(100)와 신호를 송수신할 수 있는 IR 모듈(223)을 구비할 수 있다. 또한, 원격제어장치(200)는 블루투스 통신규격에 따라 디스플레이 장치(100)와 신호를 송수신할 수 있는 블루투스 모듈(225)를 구비할 수 있다. 또한, 원격제어장치(200)는 NFC(Near Field Communication) 통신 규격에 따라 디스플레이 장치(100)와 신호를 송수할 수 있는 NFC 모듈(227)을 구비하며, WLAN(Wireless LAN) 통신 규격에 따라 디스플레이 장치(100)와 신호를 송수신할 수 있는 WLAN 모듈(229)을 구비할 수 있다.
또한, 원격제어장치(200)는 디스플레이 장치(100)로 원격제어장치(200)의 움직임 등에 관한 정보가 담긴 신호를 무선 통신부(220)를 통해 전송한다.
한편, 원격제어장치(200)는 디스플레이 장치(100)가 전송한 신호를 RF 모듈(221)을 통하여 수신할 수 있으며, 필요에 따라 IR 모듈(223)을 통하여 디스플레이 장치(100)로 전원 온/오프, 채널 변경, 볼륨 변경 등에 관한 명령을 전송할 수 있다.
사용자 입력부(230)는 키패드, 버튼, 터치 패드, 또는 터치 스크린 등으로 구성될 수 있다. 사용자는 사용자 입력부(230)를 조작하여 원격제어장치(200)으로 디스플레이 장치(100)와 관련된 명령을 입력할 수 있다. 사용자 입력부(230)가 하드키 버튼을 구비할 경우 사용자는 하드키 버튼의 푸쉬 동작을 통하여 원격제어장치(200)으로 디스플레이 장치(100)와 관련된 명령을 입력할 수 있다. 이에 대해서는 도 3을 참조하여 설명한다.
도 3을 참조하면, 원격제어장치(200)는 복수의 버튼을 포함할 수 있다. 복수의 버튼은 지문 인식 버튼(212), 전원 버튼(231), 홈 버튼(232), 라이브 버튼(233), 외부 입력 버튼(234), 음량 조절 버튼(235), 음성 인식 버튼(236), 채널 변경 버튼(237), 확인 버튼(238) 및 뒤로 가기 버튼(239)을 포함할 수 있다.
지문 인식 버튼(212)은 사용자의 지문을 인식하기 위한 버튼일 수 있다. 일 실시예로, 지문 인식 버튼(212)은 푸쉬 동작이 가능하여, 푸쉬 동작 및 지문 인식 동작을 수신할 수도 있다. 전원 버튼(231)은 디스플레이 장치(100)의 전원을 온/오프 하기 위한 버튼일 수 있다. 홈 버튼(232)은 디스플레이 장치(100)의 홈 화면으로 이동하기 위한 버튼일 수 있다. 라이브 버튼(233)은 실시간 방송 프로그램을 디스플레이 하기 위한 버튼일 수 있다. 외부 입력 버튼(234)은 디스플레이 장치(100)에 연결된 외부 입력을 수신하기 위한 버튼일 수 있다. 음량 조절 버튼(235)은 디스플레이 장치(100)가 출력하는 음량의 크기를 조절하기 위한 버튼일 수 있다. 음성 인식 버튼(236)은 사용자의 음성을 수신하고, 수신된 음성을 인식하기 위한 버튼일 수 있다. 채널 변경 버튼(237)은 특정 방송 채널의 방송 신호를 수신하기 위한 버튼일 수 있다. 확인 버튼(238)은 특정 기능을 선택하기 위한 버튼일 수 있고, 뒤로 가기 버튼(239)은 이전 화면으로 되돌아가기 위한 버튼일 수 있다.
다시 도 2를 설명한다.
사용자 입력부(230)가 터치스크린을 구비할 경우 사용자는 터치스크린의 소프트키를 터치하여 원격제어장치(200)로 디스플레이 장치(100)와 관련된 명령을 입력할 수 있다. 또한, 사용자 입력부(230)는 스크롤 키나, 조그 키 등 사용자가 조작할 수 있는 다양한 종류의 입력수단을 구비할 수 있으며 본 실시 예는 본 발명의 권리범위를 제한하지 아니한다.
센서부(240)는 자이로 센서(241) 또는 가속도 센서(243)를 구비할 수 있으며, 자이로 센서(241)는 원격제어장치(200)의 움직임에 관한 정보를 센싱할 수 있다.
예를 들어, 자이로 센서(241)는 원격제어장치(200)의 동작에 관한 정보를 x,y,z 축을 기준으로 센싱할 수 있으며, 가속도 센서(243)는 원격제어장치(200)의 이동속도 등에 관한 정보를 센싱할 수 있다. 한편, 원격제어장치(200)는 거리측정센서를 더 구비할 수 있어, 디스플레이 장치(100)의 디스플레이부(180)와의 거리를 센싱할 수 있다.
출력부(250)는 사용자 입력부(235)의 조작에 대응하거나 디스플레이 장치(100)에서 전송한 신호에 대응하는 영상 또는 음성 신호를 출력할 수 있다. 출력부(250)를 통하여 사용자는 사용자 입력부(235)의 조작 여부 또는 디스플레이 장치(100)의 제어 여부를 인지할 수 있다.
예를 들어, 출력부(250)는 사용자 입력부(235)가 조작되거나 무선 통신부(225)를 통하여 디스플레이 장치(100)와 신호가 송수신되면 점등되는 LED 모듈(251), 진동을 발생하는 진동 모듈(253), 음향을 출력하는 음향 출력 모듈(255), 또는 영상을 출력하는 디스플레이 모듈(257)을 구비할 수 있다.
또한, 전원공급부(260)는 원격제어장치(200)으로 전원을 공급하며, 원격제어장치(200)이 소정 시간 동안 움직이지 않은 경우 전원 공급을 중단함으로서 전원 낭비를 줄일 수 있다. 전원공급부(260)는 원격제어장치(200)에 구비된 소정 키가 조작된 경우에 전원 공급을 재개할 수 있다.
저장부(270)는 원격제어장치(200)의 제어 또는 동작에 필요한 여러 종류의 프로그램, 애플리케이션 데이터 등이 저장될 수 있다. 만일 원격제어장치(200)가 디스플레이 장치(100)와 RF 모듈(221)을 통하여 무선으로 신호를 송수신할 경우 원격제어장치(200)과 디스플레이 장치(100)는 소정 주파수 대역을 통하여 신호를 송수신한다.
원격제어장치(200)의 제어부(280)는 원격제어장치(200)과 페어링된 디스플레이 장치(100)와 신호를 무선으로 송수신할 수 있는 주파수 대역 등에 관한 정보를 저장부(270)에 저장하고 참조할 수 있다.
제어부(280)는 원격제어장치(200)의 제어에 관련된 제반사항을 제어한다. 제어부(280)는 사용자 입력부(235)의 소정 키 조작에 대응하는 신호 또는 센서부(240)에서 센싱한 원격제어장치(200)의 움직임에 대응하는 신호를 무선 통신부(225)를 통하여 디스플레이 장치(100)로 전송할 수 있다.
또한, 원격제어장치(200)의 음성 획득부(290)는 음성을 획득할 수 있다.
음성 획득부(290)는 적어도 하나 이상의 마이크(291)을 포함할 수 있고, 마이크(291)를 통해 음성을 획득할 수 있다.
다음으로 도 4를 설명한다.
도 4는 본 발명의 실시 예에 따라 원격 제어 장치를 활용하는 예를 보여준다.
도 4의 (a)는 원격 제어 장치(200)에 대응하는 포인터(205)가 디스플레이부(180)에 표시되는 것을 예시한다.
사용자는 원격 제어 장치(200)를 상하, 좌우로 움직이거나 회전할 수 있다. 디스플레이 장치(100)의 디스플레이부(180)에 표시된 포인터(205)는 원격 제어 장치(200)의 움직임에 대응한다. 이러한 원격 제어 장치(200)는, 도면과 같이, 3D 공간 상의 움직임에 따라 해당 포인터(205)가 이동되어 표시되므로, 공간 리모콘이라 명명할 수 있다.
도 4의 (b)는 사용자가 원격 제어 장치(200)를 왼쪽으로 이동하면, 디스플레이 장치(100)의 디스플레이부(180)에 표시된 포인터(205)도 이에 대응하여 왼쪽으로 이동하는 것을 예시한다.
원격 제어 장치(200)의 센서를 통하여 감지된 원격 제어 장치(200)의 움직임에 관한 정보는 디스플레이 장치(100)로 전송된다. 디스플레이 장치(100)는 원격 제어 장치(200)의 움직임에 관한 정보로부터 포인터(205)의 좌표를 산출할 수 있다. 디스플레이 장치(100)는 산출한 좌표에 대응하도록 포인터(205)를 표시할 수 있다.
도 4의 (c)는, 원격 제어 장치(200) 내의 특정 버튼을 누른 상태에서, 사용자가 원격 제어 장치(200)를 디스플레이부(180)에서 멀어지도록 이동하는 경우를 예시한다. 이에 의해, 포인터(205)에 대응하는 디스플레이부(180) 내의 선택 영역이 줌인되어 확대 표시될 수 있다.
이와 반대로, 사용자가 원격 제어 장치(200)를 디스플레이부(180)에 가까워지도록 이동하는 경우, 포인터(205)에 대응하는 디스플레이부(180) 내의 선택 영역이 줌아웃되어 축소 표시될 수 있다.
한편, 원격 제어 장치(200)가 디스플레이부(180)에서 멀어지는 경우, 선택 영역이 줌아웃되고, 원격 제어 장치(200)가 디스플레이부(180)에 가까워지는 경우, 선택 영역이 줌인될 수도 있다.
또한, 원격 제어 장치(200) 내의 특정 버튼을 누른 상태에서는 상하, 좌우 이동의 인식이 배제될 수 있다. 즉, 원격 제어 장치(200)가 디스플레이부(180)에서 멀어지거나 접근하도록 이동하는 경우, 상, 하, 좌, 우 이동은 인식되지 않고, 앞뒤 이동만 인식되도록 할 수 있다. 원격 제어 장치(200) 내의 특정 버튼을 누르지 않은 상태에서는, 원격 제어 장치(200)의 상, 하, 좌, 우 이동에 따라 포인터(205)만 이동하게 된다.
한편, 포인터(205)의 이동속도나 이동방향은 원격 제어 장치(200)의 이동속도나 이동방향에 대응할 수 있다.
한편, 본 명세서에서의 포인터는, 원격 제어 장치(200)의 동작에 대응하여, 디스플레이부(180)에 표시되는 오브젝트를 의미한다. 따라서, 포인터(205)로 도면에 도시된 화살표 형상 외에 다양한 형상의 오브젝트가 가능하다. 예를 들어, 점, 커서, 프롬프트, 두꺼운 외곽선 등을 포함하는 개념일 수 있다. 그리고, 포인터(205)가 디스플레이부(180) 상의 가로축과 세로축 중 어느 한 지점(point)에 대응하여 표시되는 것은 물론, 선(line), 면(surface) 등 복수 지점에 대응하여 표시되는 것도 가능하다.
다음으로, 도 5를 참조하여, 본 발명의 일 실시 예에 따른 디스플레이 장치의 동작 방법을 설명한다.
도 5는 본 발명의 일 실시 예에 따른 디스플레이 장치의 동작 방법을 설명하기 위한 순서도이다.
도 5를 참조하면, 디스플레이 장치(100)의 디스플레이부(180)는 360 컨텐트(content)를 디스플레이할 수 있다(S101).
360 컨텐트는 360도 카메라 또는 구형(spherical) 카메라에 의해 전 방향이 동시에 촬영된 영상을 의미할 수 있다. 사용자가 360 컨텐트를 보고 있는 경우 사용자는 360 컨텐트의 보고 싶은 방향이나 위치를 마우스, 리모컨 등과 같은 입력 장치를 이용하여 편리하게 조작할 수 있다. 이를 통해, 사용자는 360 컨텐트의 일부분만을 볼 수 있다. 또는, 사용자는 360 컨텐트 전체를 한 화면에서 볼 수도 있다.
다음으로 도 6 내지 도 11을 참조하여 디스플레이부(180)가 360 컨텐트를 디스플레이하는 다양한 예를 설명한다.
도 6은 본 발명의 제1 실시 예에 따른 디스플레이 장치가 360 컨텐트를 디스플레이하는 방법을 설명하기 위한 도면이다.
제어부(170)는 도 6에 도시된 바와 같은 360 컨텐트 전체 영상(600)이 한 화면에 모두 디스플레이되도록 디스플레이부(180)를 제어할 수 있다. 360 컨텐트 전체 영상(600)이란 360도 카메라로 촬영된 복수의 영상들을 하나의 영상으로 합성한 영상을 의미할 수 있다. 따라서, 360 컨텐트 전체 영상(600)은 촬영된 시점의 앞, 뒤, 위 및 아래를 모두 포함할 수 있다. 사용자는 디스플레이부(180)에 표시된 360 컨텐트 전체 영상(600)을 통해 촬영된 시점의 앞, 뒤, 위 및 아래 상황을 한번에 볼 수 있다.
도 7은 본 발명의 제2 실시 예에 따른 디스플레이 장치가 360 컨텐트를 디스플레이하는 방법을 설명하기 위한 도면이다.
제어부(170)는 도 7에 도시된 바와 같이 영역 가이드 라인(701 내지 707)과 함께 360 컨텐트 전체 영상(700)이 한 화면에 모두 디스플레이되도록 디스플레이부(180)를 제어할 수 있다. 제어부(170)는 영역 가이드 라인(701 내지 707)을 디스플레이함으로써 360 전체 영상(700)의 각 영역이 어느 방향을 촬영한 영상인지 사용자에게 안내할 수 있는 효과가 있다.
영역 가이드 라인(701 내지 707) 각각을 구체적으로 설명한다. 도 7에 도시된 360 컨텐트 전체 영상(700)을 예로 들면, 제1 영역 가이드 라인(701)은 정면 방향을 촬영한 영상을 나타내는 선이다. 제2 영역 가이드 라인(702)은 정면의 좌측 방향을 촬영한 영상을 나타내는 선이다. 제3 영역 가이드 라인(703)은 정면의 우측 방향을 촬영한 영상을 나타내는 선이다. 제4 영역 가이드 라인(704)은 후면의 우측 방향을 촬영한 영상을 나타내는 선이다. 제5 영역 가이드 라인(705)은 후면의 좌측 방향을 촬영한 영상을 나타내는 선이다. 제6 영역 가이드 라인(706)은 위쪽 방향을 촬영한 영상을 나타내는 선이다. 제7 영역 가이드 라인(707)은 아래쪽 방향을 촬영한 영상을 나타내는 선이다.
제2 영역 가이드 라인(702)과 제5 영역 가이드 라인(705)은 각각 정면 좌측 방향을 촬영한 영상과 후면 좌측 방향을 촬영한 영상으로 이어질 수 있다.
사용자는 영역 가이드 라인(701 내지 707)을 통해 디스플레이부(180)에 표시된 각 영역이 어느 방향을 촬영한 영상인지 확인할 수 있다. 이를 위해, 각각의 영역 가이드 라인과 함께 각 영역을 나타내는 메시지(미도시)를 더 포함할 수 있다. 예를 들어, 제1 영역 가이드 라인(701)과 함께 '정면 영역'이라는 메시지(미도시)를 더 표시할 수 있다. 제어부(170)는 영역을 나타내는 메시지(미도시)를 반투명하게 표시하거나 일정 시간이 지나면 표시되지 않도록 제어할 수 있다.
도 8은 본 발명의 제3 실시 예에 따른 디스플레이 장치가 360 컨텐트를 디스플레이하는 방법을 설명하기 위한 도면이다.
디스플레이부(180)는 도 8에 도시된 바와 같이 360 컨텐트 전체 영상 중 일부분만을 확대한 영상(800) 표시할 수 있다. 도 8에서는 360 컨텐트 전체 영상(700) 중 정면 영역을 확대한 영상(800)을 예로 들었다. 그러나, 이는 예시적인 것에 불과하므로, 디스플레이부(180)는 다른 영역을 확대한 영상 또는 정면 영역의 확대 배율을 달리한 영상을 표시할 수 있다. 또는, 디스플레이부(180)는 360 컨텐트 전체 영상의 영역 가이드 라인(701 내지 707) 중 어느 한 영역에 대응하는 영상만을 확대하여 표시할 수 있다.
도 9는 본 발명의 제4 실시 예에 따른 디스플레이 장치가 360 컨텐트를 디스플레이하는 방법을 설명하기 위한 도면이다.
디스플레이부(180)는 일부분만을 확대한 영상(900)과 함께 미니뷰 영상(910)을 더 디스플레이할 수 있다. 미니뷰 영상(910)은 360 컨텐트 전체 영상을 일부 확대 영상과 함께 볼 수 있도록 표시하는 작은 사이즈의 360 컨텐트 전체 영상일 수 있다.
사용자는 일부 확대 영상(900)을 보면서 현재 보고 있는 영역이 360 컨텐트 전체 영상 내에서 어느 부분인지 확인할 수 있는 효과가 있다. 또한, 사용자는 일부 확대 영상(900)을 보면서 다른 영역에서는 무엇이 표시되고 있는지 미니뷰 영상(910)을 통해 확인할 수 있는 효과가 있다. 또한, 사용자는 미니뷰 영상(910)의 일 영역을 포인터(미도시)로 선택함으로써 일부 확대 영상(900)을 변경할 수 있다. 이러한 확대 위치를 변경하는 방법은 뒤에서 자세히 설명하기로 한다.
도 10은 본 발명의 제5 실시 예에 따른 디스플레이 장치가 360 컨텐트를 디스플레이하는 방법을 설명하기 위한 도면이다.
디스플레이부(180)는 도 9에 도시된 바와 같이 일부 확대 영상(1000)과 함께 미니뷰 영상(1010)을 표시할 수 있다. 이 때, 제어부(170)는 미니뷰 영상(1010)의 360 컨텐트 전체 영상에 영역 가이드 라인을 함께 표시하도록 디스플레이부(180)를 제어할 수 있다.
사용자는 미니뷰 영상(1010)에 포함된 영역 가이드 라인을 통해 현재 일부 확대 영상(1000)이 360 컨텐트 전체에서 어느 방향을 촬영한 영상인지 더 정확하게 파악할 수 있는 효과가 있다. 즉, 사용자는 도 10에 도시된 바와 같은 화면을 보고 현재 일부 확대 영상(1000)이 360 컨텐트 전체 영상의 정면 방향을 촬영한 영상임을 알 수 있다.
도 11은 본 발명의 제6 실시 예에 따른 디스플레이 장치가 360 컨텐트를 디스플레이하는 방법을 설명하기 위한 도면이다.
디스플레이부(180)는 도 10에 도시된 바와 같이 일부 확대 영상(1100)과 함께 현재 영역 가이드 박스(1111)을 더 포함하는 미니뷰 영상(1110)을 디스플레이할 수 있다. 즉, 도 11에 도시된 바와 같이 제어부(170)는 미니뷰 영상(1110)에 360 컨텐트 전체 영상, 영역 가이드 라인 및 현재 영역 가이드 박스(1111)를 더 표시하도록 디스플레이부(180)를 제어할 수 있다.
현재 영역 가이드 박스(1111)는 360 컨텐트 전체 영상에서 일부 확대 영상(1110)의 위치를 나타낸다. 사용자는 현재 영역 가이드 박스(1111)를 통해 일부 확대 영상(1100)과 동일한 부분을 미니뷰 영상(1110)에서 찾지 않아도 일부 확대 영상(1100)의 위치를 바로 알 수 있는 효과가 있다.
360 컨텐트는 TV 등과 같은 디스플레이 장치뿐만 아니라 VR(Virtual Reality) 기기 또는 이동 단말기(Mobile Terminal) 등에서 재생될 수 있다.
다시 도 5를 설명한다.
제어부(170)는 개인화 줌(zoom) 영상을 저장하는 명령을 수신할 수 있다(S103).
개인화 줌 영상이란 하나의 영상과 관련하여 저장된 또는 설정된 확대 위치 또는 확대 배율에 따라 재생되도록 제어되는 영상을 의미할 수 있다. 구체적으로, 동일한 360 컨텐트 영상을 보더라도 사람마다 각자 보고 싶은 영역이나 확대하고 싶은 배율이 다를 수 있다. 예를 들어, 괴물이 나오는 영상에서 어떤 사람은 괴물을 집중적으로 보고 싶고, 어떤 사람은 괴물 근처에 있는 주변 사람들을 집중적으로 보고 싶을 수 있다. 따라서, 디스플레이 장치(100)는 사람마다 서로 다르게 확대 위치나 확대 배율을 저장함으로써, 이후 동일한 360 컨텐트를 저장된 확대 위치 또는 확대 배율에 따라 다르게 재생되도록 제어하는 개인화 줌 영상을 제공할 수 있다. 따라서, 개인화 줌 영상은 하나의 360 컨텐트와 관련하여 복수 개의 버전으로 만들어 질 수 있다. 개인화 줌 영상을 저장함으로써 동일한 영상을 다시 볼 때 확대 위치나 확대 배율을 다시 반복해서 조작해야 하는 불편함을 해소할 수 있는 효과가 있다.
제어부(170)는 개인화 줌 영상을 저장하는 명령을 수신할 수 있다. 제어부(170)는 디스플레이부(180)에 표시된 개인화 줌 영상 저장 아이콘(미도시)을 선택하는 명령을 통해 개인화 줌 영상을 저장하는 명령을 수신할 수 있다. 또는, 제어부(170)는 원격 제어 장치(200)에 구비된 개인화 줌 영상 저장 버튼(미도시)을 선택하는 명령을 통해 개인화 줌 영상을 저장하는 명령을 수신할 수 있다. 또는, 제어부(170)는 360 컨텐트를 디스플레이하는 도중 확대 위치나 확대 배율을 변경하는 명령을 개인화 줌 영상 저장 명령으로 인식할 수 있다. 확대 위치나 확대 배율을 변경하는 명령은 후술하기로 한다.
제어부(170)는 개인화 줌 영상 저장 명령을 수신하면, 디스플레이 중인 360 컨텐트의 메타 데이터를 저장부(140)에 저장하도록 제어할 수 있다(S105).
제어부(170)는 개인화 줌 영상 저장 명령을 수신하면, 이후 360 컨텐트의 확대 위치 또는 확대 배율 변경과 관련된 메타 데이터를 저장부(140)에 저장하도록 제어할 수 있다. 구체적으로, 제어부(170)는 개인화 줌 영상 저장 명령을 수신한 이후부터 360 컨텐트의 확대 위치 또는 확대 배율 변경과 관련된 메타 데이터를 저장부(140)에 누적하여 저장하도록 제어할 수 있다. 즉, 제어부(170)는 확대 위치 또는 확대 레벨 변경 명령을 수신할 때마다 수신된 명령에 따른 메타 데이터를 각각 저장부(140)에 저장하도록 제어할 수 있다. 이와 같이, 확대 위치 또는 확대 레벨 변경 명령을 메타 데이터로 저장하여, 360 컨텐트와 관련된 나만의 영상을 제작할 수 있다. 360 컨텐트의 메타 데이터에 대한 구체적인 설명은 도 21에서 설명하기로 한다.
제어부(170)는 개인화 줌 영상 저장 명령을 수신하지 않으면, 360 컨텐트의 확대 위치 또는 확대 배율을 변경하는 명령을 수신하더라도 이와 관련된 메타 데이터를 저장하도록 제어하지 않을 수 있다. 제어부(170)는 확대 위치 또는 확대 배율을 변경하는 명령에 따라 화면에 표시되는 360 컨텐트만을 제어할 수 있다.
제어부(170)는 360 컨텐트에서 발생하는 이벤트(event)를 감지할 수 있다(S107).
제어부(170)는 360 컨텐트에서 발생하는 특정 이벤트를 감지할 수 있다. 예를 들어, 제어부(170)는 360 컨텐트 내에서 사람이 갑자기 등장하는 이벤트, 건물이 무너지는 이벤트 또는 폭탄이 터지는 이벤트 등을 감지할 수 있다.
먼저, 본 발명의 일 실시 예에 따라 제어부(170)가 사람이 등장하는 이벤트를 감지하는 방법을 설명한다. 제어부(170)는 인물 검출 방법을 이용하여 360 컨텐트에 포함된 적어도 하나 이상의 사람을 인식할 수 있다. 구체적으로, 제어부(170)는 눈, 코 및 입 중 적어도 하나를 검출하여 360 컨텐트 내에 포함된 사람을 인식할 수 있다. 제어부(170)는 현재 인식된 사람 외에 다른 사람이 인식되면 새로운 인물이 등장한 것으로 감지할 수 있다. 또는, 제어부(170)는 인물의 목소리를 통해 새로운 인물이 등장하는 이벤트를 감지할 수 있다. 예를 들어, 제어부(170)는 360 컨텐트 내 등장하는 인물마다 목소리 정보(예를 들어, 목소리의 주파수, 말투 등)를 모두 저장할 수 있다. 따라서, 제어부(170)는 저장된 목소리 정보에 포함되지 않는 새로운 목소리가 감지되면 인물 등장 이벤트가 발생한 것으로 감지할 수 있다.
다음으로, 본 발명의 일 실시 예에 따라 제어부(170)가 건물이 무너지는 이벤트 또는 폭탄이 터지는 이벤트를 감지하는 방법을 설명한다. 건물이 무너지거나 폭탄이 터지는 경우와 같이 특정 이벤트가 발생하면 사운드가 갑자기 커지는 경우가 많다. 따라서, 제어부(170)는 시간 차를 두고 사운드의 볼륨(volume)이 급격히 변하는 경우 특정 이벤트가 발생한 것으로 감지할 수 있다. 또는, 제어부(170)는 사운드의 볼륨(volume)이 기 설정된 값 이상으로 높아지면 특정 이벤트가 발생한 것으로 감지할 수 있다.
이 밖에, 제어부(170)는 다양한 이벤트를 설정하고, 설정된 이벤트가 발생하는 경우를 감지할 수 있다.
제어부(170)는 이벤트 발생이 감지되면, 이벤트 트래킹 모드(event tracking mode)로 설정되어 있는지 판단할 수 있다(S109).
이벤트 트래킹 모드는 이벤트가 발생되는 영역을 확대하고, 이벤트 발생 영역을 추적하여 표시하는 모드를 의미할 수 있다.
제어부(170)는 디스플레이부(180)에 표시된 이벤트 트래킹 아이콘(미도시)을 선택하는 명령을 수신하여, 이벤트 트래킹 모드를 설정할 수 있다. 또는, 제어부(170)는 원격 제어 장치(200)에 구비된 이벤트 트래킹 버튼(미도시)을 선택하는 명령을 수신하여, 이벤트 트래킹 모드를 설정할 수 있다. 또는, 제어부(170)는 디폴트로 이벤트 트래킹 모드를 설정하고 있을 수 있다. 또는, 제어부(170)는 음성 인식으로 이벤트 트래킹 모드 설정 명령을 수신할 수 있다. 이처럼, 제어부(170)는 다양한 방법으로 이벤트 트래킹 모드를 설정하는 명령을 수신할 수 있다.
제어부(170)는 이벤트 트래킹 모드로 설정되어 있으면, 감지된 이벤트에 기초하여 360 컨텐트의 확대 위치 또는 확대 레벨을 변경하여 디스플레이할 수 있다(S111).
제어부(170)는 이벤트가 발생한 영역을 확대하여 360 컨텐트를 디스플레이할 수 있다. 제어부(170)는 이벤트가 발생한 영역이 이동하면, 확대 위치를 이벤트 발생 영역으로 이동하여 360 컨텐트를 디스플레이할 수 있다. 제어부(170)는 이벤트가 발생함에 따라 변경될 확대 위치나 확대 레벨을 미리 설정하고 있을 수 있다. 또는, 제어부(170)는 확대 위치나 확대 레벨을 발생한 이벤트의 종류에 따라 다르게 변경하도록 제어할 수 있다.
다음으로 도 12 내지 도 14를 참조하여, 감지된 이벤트에 기초하여 360 컨텐트의 확대 위치 또는 확대 레벨을 변경하는 동작을 설명한다.
먼저, 도 12는 본 발명의 실시 예에 따른 사람 등장 이벤트를 감지함에 따라 360 컨텐트의 확대 위치 또는 확대 레벨을 변경하는 동작을 설명하기 위한 도면이다. 디스플레이부(180)는 도 12(a)에 도시된 바와 같은 영상을 표시하고 있을 수 있다. 이 경우 제어부(170)는 앞에서 설명한 인물 검출 방법을 통해 우측에 사람이 한 명 있음을 감지할 수 있다. 그리고, 360 컨텐트가 재생됨에 따라 도 12(a)에 도시된 영상에서 새로운 인물이 등장할 수 있다. 제어부(170)는 앞에서 설명한 인물 검출 방법을 통해 새로운 인물이 감지되면, 도 12(b)에 도시된 바와 같이 새로운 인물이 등장한 영역을 중심으로 확대 위치 또는 확대 레벨을 변경하여 표시하도록 디스플레이부(180)를 제어할 수 있다. 도 12(a) 및 도 12(b)를 비교하면 새로 등장한 인물을 중심으로 360 컨텐트가 더 확대되어 표시됨을 알 수 있다. 이러한 동작을 통해 360 컨텐트 내에서 새로 발생되는 이벤트를 더 집중해서 사용자가 볼 수 있도록 돕는 효과가 있다.
다음으로, 도 13 내지 도 14는 본 발명의 실시 예에 따른 일정 기준 이상의 볼륨 증가 이벤트를 감지함에 따라 360 컨텐트의 확대 위치 또는 확대 레벨을 변경하는 동작을 설명하기 위한 도면이다.
먼저 도 13(a)에 도시된 예시 도면과 같이 디스플레이부(180)는 360 컨텐트를 재생함에 따라 용(dragon)이 등장하는 영상을 표시할 수 있다. 제어부(170)는 360 컨텐트의 사운드 볼륨 변화를 계속해서 감지할 수 있다. 제어부(170)는 용의 등장과 함께 용의 울음 사운드 볼륨이 일정 기준 이상임을 감지할 수 있다. 이에 따라, 제어부(170)는 볼륨이 일정 기준 이상으로 높아진 용 등장 영역을 중심으로 확대 레벨을 증가시켜 도 13(b)와 같이 표시할 수 있다.
또는, 도 14(a)에 도시된 예시 도면과 같이 디스플레이부(180)는 360 컨텐트를 재생함에 따라 용의 등장 이후 반대편에서 경찰차가 등장하는 영상을 표시할 수 있다. 360 컨텐트 전체 영상의 미니뷰 영상(1410)에 따르면 디스플레이부(180)는 현재 영역 가이드 박스(1411)에 따른 용이 등장하는 영역을 확대하여 표시하고 있고, 그 반대편 영역에 경찰차가 등장함을 표시하고 있다. 제어부(170)는 사운드의 볼륨을 계속하여 감지하고 있고, 이에 따라 경찰차의 등장 전과 등장 후 사운드의 볼륨이 급격히 달라짐을 감지할 수 있다. 따라서, 디스플레이부(180)는 사운드의 볼륨이 급격히 달라진 경찰차가 등장한 영역으로 확대 위치를 이동하여 표시할 수 있다.
이와 같은 방법을 통해 디스플레이 장치(100)는 360 컨텐트 내에서 발생하는 이벤트를 사용자가 놓치지 않고 볼 수 있는 방법을 제공한다.
다시 도 5를 설명한다.
제어부(170)는 이벤트 트래킹 모드로 설정되어 있지 않은 것으로 판단되면(S109), 이벤트 발생이 감지되더라도 확대 위치 또는 확대 레벨을 변경하지 않고 디스플레이할 수 있다. 즉, 제어부(170)는 이벤트 트래킹 모드로 설정되어 있지 않으면, 이벤트 발생의 감지와 무관하게 360 컨텐트를 디스플레이할 수 있다.
또한, 제어부(170)는 이벤트 발생의 감지와는 별개로 확대 위치 또는 확대 레벨을 변경하여 360 컨텐트를 디스플레이할 수 있다. 예를 들어, 사용자로부터 현재 디스플레이 중인 360 컨텐트의 확대 위치 또는 확대 레벨을 변경하는 명령을 수신할 수 있다.
디스플레이 장치(100)의 제어부(170)는 확대 위치 또는 확대 레벨을 변경하는 명령을 수신할 수 있다(S113).
본 발명의 일 실시 예에 따르면 제어부(170)는 확대 위치를 변경하는 명령을 수신할 수 있다. 확대 위치를 변경하는 명령은 현재 화면에 표시되는 360 컨텐트 전체 영상 중 일부분을 이동시켜 부분이 표시되도록 제어하는 명령일 수 있다. 사용자는 확대 위치를 변경하는 명령을 통해 현재 화면에 표시 중인 360 컨텐트의 위치를 이동시킬 수 있다.
본 발명의 일 실시 예에 따르면 제어부(170)는 확대 레벨을 변경하는 명령을 수신할 수 있다. 확대 레벨을 변경하는 명령은 현재 화면에 표시된 360 컨텐트의 배율 정보를 변경하는 명령일 수 있다. 사용자는 확대 레벨을 변경하는 명령을 통해 현재 화면에 표시된 360 컨텐트를 더 크게 확대시키거나 더 작게 축소시킬 수 있다.
본 발명의 실시 예에 따른 확대 위치 또는 확대 레벨을 변경 명령을 수신한는 방법에 대한 구체적인 설명은 후술하기로 한다.
제어부(170)는 수신된 명령에 따라 360 컨텐트의 확대 위치 또는 확대 레벨을 변경하여 디스플레이할 수 있다(S115).
다음으로, 도 15 내지 도 20을 참조하여 본 발명의 실시 예에 따라 확대 위치 또는 확대 레벨을 변경하는 명령을 수신하고, 수신된 명령에 따라 360 컨텐트를 변경하여 디스플레이하는 동작을 설명한다.
도 15는 본 발명의 실시 예에 따른 360 컨텐트 전체 영상에서 일 영역을 선택하는 명령을 수신하여 확대 위치 또는 확대 레벨을 변경하는 명령을 수신하는 동작을 설명하기 위한 도면이다.
도 15(a)에 도시된 바와 같이, 디스플레이부(180)는 360 컨텐트 전체 영상을 영역 가이드 라인과 함께 표시할 수 있다. 그러나, 이는 예시적인 것에 불과하고 디스플레이부(180)는 영역 가이드 라인을 제외한 360 컨텐트 전체 영상만을 표시할 수도 있다. 또는, 도 15(a)에 표시된 영역 가이드 라인은 영상의 정면 좌측 영역, 정면 영역, 정면 우측 영역, 후면 우측 영역, 후면 좌측 영역, 위쪽 영역, 아래쪽 영역으로 나뉘지만, 이는 예시적인 것에 불과하며 더 많은 영역으로 분할되거나 더 적은 영역으로 분할될 수도 있다.
제어부(170)는 확대 위치 및 확대 레벨을 변경하는 명령을 수신할 수 있다. 예를 들어, 제어부(170)는 디스플레이부(180)에 표시된 360 컨텐트 전체 영상 중 일 영역을 포인터(205)로 선택하는 명령을 수신할 수 있다. 또는, 제어부(170)는 디스플레이부(180)에 표시된 360 컨텐트 전체 영상 중 일 영역을 포인터(205)로 기 설정된 시간 이상 선택하는 명령을 수신할 수 있다. 이에 따라, 제어부(170)는 도 15(b)에 도시된 바와 같이 포인터(205)로 선택된 영역을 확대하여 표시하도록 디스플레이부(180)를 제어할 수 있다. 이 때, 확대 레벨은 디폴트로 설정되어 있거나 사용자로부터 미리 설정될 수 있다. 또는, 제어부(170)는 화면의 일 영역을 포인터(205)로 선택하는 시간에 비례하여 확대 배율을 증가시킬 수 있다. 따라서, 사용자는 긴 시간 선택하여 크게 확대하거나 짧은 시간 선택하여 조금만 확대시킬 수 있다.
도 16은 본 발명의 실시 예에 따른 360 컨텐트 미니뷰 영상에서 일 영역을 선택하는 명령을 수신하여 확대 위치 또는 확대 레벨을 변경하는 명령을 수신하는 동작을 설명하기 위한 도면이다.
도 16(a)에 도시된 바와 같이, 디스플레이부(180)는 360 컨텐트와 함께 360 컨텐트 미니뷰 영상(1610)을 표시할 수 있다.
제어부(170)는 도 15의 예시와 달리, 360 컨텐트 미니뷰 영상(1610)에서 일 영역을 포인터(205)로 선택하는 명령을 수신할 수 있다. 도 16에서는 영역 가이드 라인이 제외된 360 컨텐트 미니뷰 영상(1610)을 예로 들었으나, 영역 가이드 라인이 표시된 360 컨텐트 미니뷰 영상에서 일 영역을 포인터로 선택하는 명령을 수신할 수도 있다. 이 경우 영역 선택을 더 정확하게 할 수 있도록 돕는 효과가 있을 수 있다. 또한, 360 컨텐트 미니뷰 영상(1610)에서 일 영역을 선택하여 확대 위치 또는 확대 레벨을 변경하는 명령을 수신하는 경우 360 컨텐트 미니뷰 영상(1610)이 항상 표시되므로 사용자가 원할 때 언제든지 편하게 확대 위치 또는 확대 레벨을 변경할 수 있는 효과가 있다.
제어부(170)는 도 16(a)에 도시된 바와 같이 360 컨텐트 미니뷰 영상(1610)의 일 영역을 포인터(205)로 선택하는 명령을 수신하면, 선택된 영역을 확대하여 도 16(b)에 도시된 바와 같이 표시하도록 디스플레이부(180)를 제어할 수 있다. 확대 레벨은 도 15에서 설명한 바와 동일하다.
다음으로 도 17은 본 발명의 실시 예에 따른 확대 위치를 변경하는 명령을 수신하는 동작을 설명하기 위한 도면이다.
도 17(a)에 도시된 바와 같이 디스플레이부(180)는 360 컨텐트의 일부를 표시할 수 있다. 제어부(170)는 표시 중인 360 컨텐트의 일 영역을 포인터(205)로 선택하여 화살표 방향으로 드래그 앤 드랍(drag and drop)하는 명령을 수신할 수 있다. 이에 따라, 제어부(170)는 도 17(b)에 도시된 바와 같이 포인터(205)로 선택된 일 영역을 포인터(205)가 드랍된 영역까지 이동시켜 360 컨텐트를 표시하도록 디스플레이부(180)를 제어할 수 있다.
다음으로 도 18은 본 발명의 제1 실시 예에 따른 확대 레벨을 변경하는 명령을 수신하는 동작을 설명하기 위한 도면이다.
도 18(a)에 도시된 바와 같이 디스플레이부(180)는 360 컨텐트와 함께 360 컨텐트 미니뷰 영상(1810) 및 확대 레벨 바(1820)를 표시할 수 있다. 또는, 디스플레이부(180)는 360 컨텐트와 함께 확대 레벨 바(1820)만을 표시할 수 있다.
제어부(170)는 확대 레벨 바(1820)를 포인터(205)로 조절하는 명령을 통해 확대 레벨 변경 명령을 수신할 수 있다. 예를 들어, 제어부(170)는 확대 레벨 바(1820)의 일 지점을 포인터(205)로 선택하는 명령을 수신할 수 있다. 또는, 제어부(170)는 확대 레벨 바(1820)에서 현재 확대 레벨을 포인터(205)로 선택하여 변경하고자 하는 확대 레벨까지 드래그 앤 드랍하는 명령을 통해 확대 레벨 변경 명령을 수신할 수 있다. 제어부(170)는 변경된 확대 레벨에 대응하여 360 컨텐트를 표시하도록 디스플레이부(180)를 제어할 수 있다. 따라서, 도 18(a)에서 360 컨텐트는 확대 레벨 1x로 표시되었으나, 확대 레벨 변경 명령에 따라 도 18(b)에서 360 컨텐트는 확대 레벨 2x로 표시됨을 확인할 수 있다. 이와 같이, 사용자는 포인터(205)를 이동시켜 360 컨텐트의 확대 레벨을 변경할 수 있다.
다음으로 도 19 내지 도 20은 본 발명의 제2 실시 예에 따른 확대 레벨을 변경하는 명령을 수신하는 동작을 설명하기 위한 도면이다.
먼저, 도 19를 참조하여 제어부(170)가 확대 레벨 변경 명령을 수신하는 방법을 설명한다. 사용자는 디스플레이부(180)에 표시 중인 360 컨텐트의 확대 레벨을 변경하기 위해 원격 제어 장치(200)를 디스플레이부(180)에 수직인 방향(z축 방향)으로 이동시킬 수 있다. 예를 들어, 사용자는 디스플레이부(180)에 표시 중인 360 컨텐트의 확대 레벨을 높이기 위해 원격 제어 장치(200)를 디스플레이부(180) 쪽으로 이동시킬 수 있다. 제어부(170)는 원격 제어 장치(200)가 디스플레이부(180) 쪽으로 이동하는 신호를 수신하면, 디스플레이부(180)에 표시 중인 360 컨텐트를 줌인(zoom in)하여 표시할 수 있다. 구체적으로 디스플레이부(180)는 도 20(a)에 도시된 바와 같은 현재 확대 레벨이 2x인 360 컨텐트를 표시 중일 수 있다. 제어부(170)는 원격 제어 장치(200)가 디스플레이부(180) 쪽으로 이동하는 신호를 수신함에 따라 도 20(b)에 도시된 바와 같이 360 컨텐트의 확대 레벨을 4x로 변경하여 표시하도록 디스플레이부(180)를 제어할 수 있다. 반대로, 사용자는 디스플레이부(180)에 표시 중인 360 컨텐트의 확대 레벨을 감소시키기 위해 원격 제어 장치(200)를 디스플레이부(180)로부터 멀어지는 방향으로 이동시킬 수 있다. 제어부(170)는 원격 제어 장치(200)가 디스플레이부(180)로부터 멀어지는 신호를 수신하면, 디스플레이부(180)에 표시 중인 360 컨텐트를 줌아웃(zoom out)하여 표시할 수 있다.
확대 레벨의 변경 정도는 원격 제어 장치(200)의 이동 거리에 비례할 수 있다. 예를 들어, 제어부(170)는 원격 제어 장치(200)가 디스플레이부(180) 쪽으로 이동하는 거리에 비례하여 확대 레벨을 증가시킬 수 있다.
이와 같이 사용자는 원격 제어 장치(200)를 디스플레이부(180)에 가까이 또는 멀리 이동시키는 동작만으로 360 컨텐트의 확대 레벨을 손쉽게 변경할 수 있는 효과가 있다.
이와 같이, 제어부(170)는 이벤트 발생을 감지하거나 확대 위치 또는 확대 레벨을 변경하는 명령을 수신하여, 360 컨텐트의 확대 위치 또는 확대 레벨을 변경하여 디스플레이할 수 있다. 저장부(140)는 360 컨텐트의 확대 위치 또는 확대 레벨 변경과 관련된 메타 데이터를 저장하고 있을 수 있다. 제어부(170)는 저장된 메타 데이터를 이용하여 이전에 확대 위치 또는 확대 레벨을 변경하며 디스플레이 했던 360 컨텐트를 다시 재생할 수 있다.
다음으로 도 21을 참조하여 본 발명의 실시 예에 따른 360 컨텐트를 메타 데이터를 함께 처리하여 디스플레이하는 동작을 설명한다.
도 21은 본 발명의 실시 예에 따른 개인화 줌 영상을 디스플레이하는 동작을 설명하기 위한 순서도이다.
제어부(170)는 개인화 줌 영상을 재생하는 명령을 수신할 수 있다(S201).
사용자는 미리 저장시켜 둔 360 컨텐트의 개인화 줌 영상을 재생시킬 수 있다. 즉, 사용자는 확대 위치 또는 확대 레벨이 과거 변경된 이력에 따라 동일하게 변경되는 360 컨텐트를 재생시키는 명령을 내릴 수 있다.
제어부(170)는 저장된 메타 데이터를 적용한 360 컨텐트를 디스플레이할 수 있다(S203).
제어부(170)는 개인화 줌 영상 재생 명령에 따라, 360 컨텐트에 저장된 메타 데이터를 적용하여 디스플레이할 수 있다. 즉, 제어부(170)는 360 컨텐트를 저장된 확대 위치 또는 확대 레벨 이력에 따라 과거 재생과 동일하게 재생되도록 디스플레이부(180)를 제어할 수 있다.
다음으로 도 22를 참조하여 본 발명의 실시 예에 따른 메타 데이터를 설명한다.
도 22는 본 발명의 실시 예에 따른 360 컨텐트의 메타 데이터의 예시 도면이다.
여기서 메타 데이터는 확대 위치 또는 확대 레벨 변경 명령이 수신된 경우 확대 위치 또는 확대 레벨 변경에 따른 360 컨텐트의 디스플레이 정보를 텍스트 형태로 저장된 데이터를 의미할 수 있다. 텍스트 형태로 저장되기 때문에 저장부(140)를 차지하는 공간의 크기를 매우 작게 줄일 수 있는 효과가 있다.
메타 데이터(2200)는 도 22에 도시된 바와 같이 제1 메타 데이터(2201), 제2 메타 데이터(2202), 제3 메타 데이터(2203), 제4 메타 데이터(2204) 및 제5 메타 데이터(2205)로 누적되어 저장될 수 있다.
메타 데이터(2200)는 컨텐트 분류 카테고리, 타임 스탬프(Time stamp), 포인팅 좌표(Pointing Coordinator), 회전 각도 정보 및 확대 레벨(Zooming Level) 중 적어도 하나 이상을 포함할 수 있다.
컨텐트 분류 카테고리는 스포츠, 뉴스, 다큐멘터리, 영화, 드라마, 오락, 예능, 토크쇼 등에 해당할 수 있다. 컨텐트 분류 카테고리에 따라 컨텐트 장르가 구분될 수 있다. 도 22에 도시된 메타 데이터(2200)의 경우 컨텐트 장르가 영화(movie) 임을 나타낼 수 있다.
타임 스탬프는 확대 위치 또는 확대 레벨을 변경한 시점에서의 시간이다. 제1 메타 데이터(2201)와 같이 타임 스탬프가 20160720_131705인 경우, 2016년 07월 20일 13시 17분 05초에 확대 위치 또는 확대 레벨이 변경되었음을 나타낸다.
포인팅 좌표는 확대 위치 또는 확대 레벨이 변경될 때 포인터(205)의 좌표 정보를 의미한다. 제1 메타 데이터(2201)와 같이 포인팅 좌표가 0320_0210인 경우 x 좌표 0320, y좌표 0210을 의미한다. 포인터(205)의 좌표를 기준으로 얼마만큼 확대 위치 또는 확대 레벨을 변경해야 하는지 결정할 수 있다.
회전 각도 정보는 해드셋(HeadSet) 또는 원격 제어 장치(200)를 이용하여 360 컨텐트를 이동 시킨 회전 각도를 의미한다. 예를 들어, 제1 메타 데이터(2201)와 같이 회전 각도 정보가 180_25인 경우 수평 방향으로 180도, 수직 방향으로 25도를 의미한다. 수평 방향은 시계 방향 또는 반시계 방향 중 어느 하나일 수 있다.
확대 레벨은 포인터로 확대 위치 또는 확대 레벨 변경 시점에서의 배율 정보를 의미할 수 있다. 제1 메타 데이터(2201)의 경우 확대 레벨이 01임을 의미한다.
도 22를 통해 설명한 메타 데이터는 예시적인 것으로, 메타 데이터는 확대 위치 또는 확대 레벨 정보를 포함하는 다른 형태로 저장될 수 있다.
다음으로 도 23 내지 도 24를 참조하여 본 발명의 실시 예에 따른 360 컨텐트를 디스플레이하는 방법을 설명한다.
도 23은 본 발명의 일 실시 예에 따른 메타 데이터를 적용하지 않은 360 컨텐트를 디스플레이하는 방법을 설명하기 위한 도면이다.
도 24는 본 발명의 일 실시 예에 따른 메타 데이터를 적용하여 360 컨텐트를 디스플레이하는 방법을 설명하기 위한 도면이다.
먼저 도 23을 설명한다. 제어부(170)는 메타 데이터를 적용하지 않은 360 컨텐트를 디스플레이할 수 있다. 이 경우 제어부(170)는 도 23에 도시된 바와 같이 360 컨텐트 전체 영상을 디스플레이할 수 있다. 즉, 제어부(170)는 확대 위치 또는 확대 레벨을 변경하지 않고 360 컨텐트 전체 영상을 표시할 수 있다. 제어부(170)는 도 23(a)와 같은 영상을 표시하고, 시간이 흐름에 따라 순서대로 도 23(b), 도 23(c) 및 도 23(d)와 같은 영상을 표시할 수 있다. 그러나, 이는 예시적인 것에 불과하고 영상 제작자가 시점 정보를 미리 설정해둔 경우에는 확대 위치 또는 확대 레벨이 변경되어 360 컨텐트가 표시될 수도 있다.
다음으로 도 24를 설명한다. 제어부(170)는 도 23에 도시된 360 컨텐트에 저장된 메타 데이터를 적용하여 도 24에 도시된 바와 같은 영상을 표시할 수 있다. 제어부(170)는 메타 데이터에 포함된 정보에 기초하여 도 23에 도시된 영상을 확대 위치 또는 확대 레벨을 변경하여 표시할 수 있다. 따라서, 제어부(180)는 도 23(a)와 도 24(a)의 재생 시간이 동일하고, 도 23(b)와 도 24(b)의 재생 시간이 동일하고, 도 23(c)와 도 24(c)의 재생 시간이 동일하고, 도 23(d)와 도 24(d)의 재생 시간이 동일함에도 디스플레이부(180)가 다른 영상을 표시하도록 제어할 수 있다. 구체적으로, 제어부(170)는 메타 데이터를 적용한 개인화 줌 영상을 표시하는 경우 360 컨텐트 전체 영상의 미니뷰 영상(2410)을 함께 표시할 수 있다. 따라서, 도 24(a) 내지 도 24(d)에 도시된 미니뷰 영상(2410)들은 각각 도 23(a) 내지 도 23(d)에 도시된 영상과 동일하다. 따라서, 도 24(a)는 도 23(a)에 도시된 영상에서 현재 영역 가이드 박스(2411)에 대응하는 영역이 확대된 영상이고, 도 24(b)는 도 23(b)에 도시된 영상에서 현재 영역 가이드 박스(2411)에 대응하는 영역이 확대된 영상이고, 도 24(c)는 도 23(c)에 도시된 영상에서 현재 영역 가이드 박스(2411)에 대응하는 영역이 확대된 영상이고, 도 24(d)는 도 23(d)에서 현재 영역 가이드 박스(2411)에 대응하는 영역이 확대된 영상이다. 본 발명의 다른 실시 예에 따르면 제어부(170)는 미니뷰 영상(2410)을 제외하고 확대 위치 또는 확대 레벨을 변경한 360 컨텐트를 표시할 수도 있다. 이와 같이 변경되는 확대 위치 또는 확대 레벨은 사용자에 의해 미리 저장된 정보이므로, 사용자 기호에 따라 개인화 줌 영상을 다양하게 제작할 수 있다.
본 발명의 일실시예에 의하면, 전술한 방법은, 프로그램이 기록된 매체에 프로세서가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 프로세서가 읽을 수 있는 매체의 예로는, ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광 데이터 저장장치 등이 있으며, 캐리어 웨이브(예를 들어, 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다.
상기와 같이 설명된 디스플레이 장치는 상기 설명된 실시예들의 구성과 방법이 한정되게 적용될 수 있는 것이 아니라, 상기 실시예들은 다양한 변형이 이루어질 수 있도록 각 실시예들의 전부 또는 일부가 선택적으로 조합되어 구성될 수도 있다.
Claims (10)
- 디스플레이 장치에 있어서,
360 컨텐트(content)를 표시하는 디스플레이부;
상기 360 컨텐트의 확대 위치 또는 확대 레벨을 변경하는 명령을 수신하고, 상기 수신된 명령에 따라 상기 360 컨텐트의 확대 위치 또는 확대 레벨을 변경하여 표시하도록 상기 디스플레이부를 제어하는 제어부; 및
상기 확대 위치 또는 확대 레벨의 변경과 관련된 메타 데이터(meta data)를 저장하는 저장부를 포함하는,
디스플레이 장치. - 제1항에 있어서,
상기 제어부는, 개인화 줌 영상 재생 명령을 수신하면 상기 360 컨텐트를 상기 메타 데이터와 함께 처리하여 상기 360 컨텐트의 확대 위치 또는 확대 레벨을 변경하여 표시하도록 상기 디스플레이부를 제어하는,
디스플레이 장치. - 제1항에 있어서,
상기 메타 데이터는, 상기 확대 위치 또는 확대 레벨을 변경하는 시점에서의 시간, 상기 확대 위치 또는 확대 레벨을 변경하는 시점에서의 포인터 좌표, 상기 360 컨텐트의 회전 각도 및 배율 정보를 포함하는,
디스플레이 장치. - 제1항에 있어서,
상기 제어부는, 이벤트 발생을 감지하고, 상기 감지된 이벤트에 기초하여 상기 360 컨텐트의 확대 위치 또는 확대 레벨을 변경하여 표시하도록 상기 디스플레이부를 제어하는,
디스플레이 장치. - 제4항에 있어서,
상기 제어부는, 상기 감지된 이벤트에 대응하는 영역으로 확대 위치 또는 확대 레벨을 변경하여 표시하도록 상기 디스플레이부를 제어하는,
디스플레이 장치. - 제4항에 있어서,
상기 제어부는, 상기 감지된 이벤트를 트랙킹(tracking)하여 표시하도록 상기 디스플레이부를 제어하는,
디스플레이 장치. - 제4항에 있어서,
상기 이벤트는, 사람 등장 이벤트 및 일정 기준 이상의 볼륨(volume) 증가 이벤트를 포함하는,
디스플레이 장치. - 제1항에 있어서,
상기 제어부는, 상기 디스플레이부에 수직인 방향으로 원격 제어 장치가 움직이는 신호를 수신함에 따라 상기 360 컨텐트의 확대 레벨을 변경하여 표시하도록 상기 디스플레이부를 제어하는,
디스플레이 장치. - 제8항에 있어서,
상기 제어부는, 상기 디스플레이부에 가까워지는 방향으로 원격 제어 장치가 움직이는 신호를 수신하면 상기 360 컨텐트의 확대 레벨을 증가시켜 표시하고, 상기 디스플레이부에 멀어지는 방향으로 원격 제어 장치가 움직이는 신호를 수신하면 상기 360 컨텐트의 확대 레벨을 감소시켜 표시하도록 상기 디스플레이부를 제어하는,
디스플레이 장치. - 제8항에 있어서,
상기 제어부는, 상기 원격 제어 장치가 움직인 거리에 비례하여 상기 360 컨텐트의 확대 레벨을 증가 또는 감소시켜 표시하도록 상기 디스플레이부를 제어하는,
디스플레이 장치.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020160100607A KR20180016805A (ko) | 2016-08-08 | 2016-08-08 | 디스플레이 장치 및 그의 동작 방법 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020160100607A KR20180016805A (ko) | 2016-08-08 | 2016-08-08 | 디스플레이 장치 및 그의 동작 방법 |
Publications (1)
Publication Number | Publication Date |
---|---|
KR20180016805A true KR20180016805A (ko) | 2018-02-20 |
Family
ID=61394651
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020160100607A KR20180016805A (ko) | 2016-08-08 | 2016-08-08 | 디스플레이 장치 및 그의 동작 방법 |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR20180016805A (ko) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109754593A (zh) * | 2018-12-28 | 2019-05-14 | 天长市志铖电子科技有限公司 | 一种遥控器与空调器的配对方法及系统 |
WO2019164179A1 (ko) * | 2018-02-21 | 2019-08-29 | 삼성전자 주식회사 | 정보 표시 방법 및 이를 위한 전자 장치 |
WO2019194529A1 (ko) * | 2018-04-05 | 2019-10-10 | 삼성전자 주식회사 | 복수의 뷰포인트들을 포함하는 3차원 컨텐트에 대한 정보를 전송하기 위한 방법 및 장치 |
-
2016
- 2016-08-08 KR KR1020160100607A patent/KR20180016805A/ko unknown
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2019164179A1 (ko) * | 2018-02-21 | 2019-08-29 | 삼성전자 주식회사 | 정보 표시 방법 및 이를 위한 전자 장치 |
US11205404B2 (en) | 2018-02-21 | 2021-12-21 | Samsung Electronics Co., Ltd. | Information displaying method and electronic device therefor |
WO2019194529A1 (ko) * | 2018-04-05 | 2019-10-10 | 삼성전자 주식회사 | 복수의 뷰포인트들을 포함하는 3차원 컨텐트에 대한 정보를 전송하기 위한 방법 및 장치 |
US11516454B2 (en) | 2018-04-05 | 2022-11-29 | Samsung Electronics Co., Ltd. | Method and device for transmitting information on three-dimensional content including multiple view points |
CN109754593A (zh) * | 2018-12-28 | 2019-05-14 | 天长市志铖电子科技有限公司 | 一种遥控器与空调器的配对方法及系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR102484135B1 (ko) | 디스플레이 장치 및 그의 동작 방법 | |
US11657783B2 (en) | Display device and operating method thereof | |
US10725732B2 (en) | Display device and operating method thereof | |
KR102521343B1 (ko) | 디스플레이 장치 및 그의 동작 방법 | |
US10327030B2 (en) | Display device and operating method thereof | |
KR20150145616A (ko) | 디스플레이 장치 및 그의 동작 방법 | |
KR20150104711A (ko) | 디스플레이 장치 및 그의 동작 방법 | |
KR102485166B1 (ko) | 디스플레이 장치 및 그의 동작 방법 | |
KR20180016805A (ko) | 디스플레이 장치 및 그의 동작 방법 | |
KR20170123184A (ko) | 스크랩 기능을 제공하는 디스플레이 장치 및 그의 동작 방법 | |
US20190286318A1 (en) | Display device | |
KR20160095377A (ko) | 디스플레이 장치 및 그의 동작 방법 | |
KR102220198B1 (ko) | 디스플레이 장치 및 그의 동작 방법 | |
KR102499317B1 (ko) | 디스플레이 장치 및 그의 동작 방법 | |
KR20160004739A (ko) | 디스플레이 장치 및 그의 동작 방법 | |
KR20180043139A (ko) | 디스플레이 장치 및 그의 동작 방법 | |
KR20170138145A (ko) | 디스플레이 장치 및 그의 동작 방법 | |
KR102646584B1 (ko) | 디스플레이 장치 | |
KR20180054052A (ko) | 디스플레이 장치 및 그의 동작 방법 | |
KR20190034856A (ko) | 디스플레이 장치 및 그의 동작 방법 | |
KR20170111003A (ko) | 디스플레이 장치 및 그의 동작 방법 | |
AU2022201740B2 (en) | Display device and operating method thereof | |
KR20180046643A (ko) | 디스플레이 장치 및 그의 동작 방법 | |
KR20170081454A (ko) | 디스플레이 장치 | |
KR20180040230A (ko) | 디스플레이 장치 |