KR101978214B1 - 동영상 디스플레이 장치 및 그 방법 - Google Patents

동영상 디스플레이 장치 및 그 방법 Download PDF

Info

Publication number
KR101978214B1
KR101978214B1 KR1020120130962A KR20120130962A KR101978214B1 KR 101978214 B1 KR101978214 B1 KR 101978214B1 KR 1020120130962 A KR1020120130962 A KR 1020120130962A KR 20120130962 A KR20120130962 A KR 20120130962A KR 101978214 B1 KR101978214 B1 KR 101978214B1
Authority
KR
South Korea
Prior art keywords
moving picture
frames
mode
frame
moving image
Prior art date
Application number
KR1020120130962A
Other languages
English (en)
Other versions
KR20140064058A (ko
Inventor
조은형
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR1020120130962A priority Critical patent/KR101978214B1/ko
Priority to US13/721,767 priority patent/US9462218B2/en
Priority to CN201380060347.9A priority patent/CN104813220B/zh
Priority to PCT/KR2013/007673 priority patent/WO2014077497A1/en
Priority to EP13855990.1A priority patent/EP2920638B1/en
Publication of KR20140064058A publication Critical patent/KR20140064058A/ko
Application granted granted Critical
Publication of KR101978214B1 publication Critical patent/KR101978214B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H04N5/772—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/02—Viewing or reading apparatus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

본 발명은 동영상 디스플레이 장치 및 그 디스플레이 방법에 관한 것으로서, 보다 상세하게는 회전 정보를 포함하는 동영상을 디스플레이 장치에서 디스플레이 하는 방법에 관한 것이다.
이를 위해 본 발명은, 촬영된 동영상을 디스플레이 하는 디스플레이 장치에 있어서, 회전 정보를 포함하는 동영상을 획득하는 커뮤니케이션 유닛; 상기 동영상을 디스플레이하는 디스플레이 유닛; 및 동영상 재생 모드를 설정하는 프로세서를 포함하고, 상기 동영상 재생 모드는 상기 획득된 동영상을 상기 회전 정보를 기초로 한 회전 보상없이 디스플레이하는 내츄럴 디스플레이 모드 및 상기 동영상에 포함된 상기 회전 정보를 기초로 회전 보상된 동영상을 디스플레이하는 수평 디스플레이 모드를 포함하고, 상기 동영상 재생 모드가 상기 수평 디스플레이 모드인 경우, 상기 동영상의 연속된 복수의 프레임들을 상기 회전 정보를 기초로 회전 보상하고, 상기 동영상의 상기 연속된 복수의 프레임들을 하나의 사이즈로 크로핑하여 디스플레이하고, 상기 크로핑 사이즈는 상기 동영상의 연속된 복수의 프레임들의 상기 회전 정보에 기초하여 결정되는, 디스플레이 장치를 제공한다.

Description

동영상 디스플레이 장치 및 그 방법{DISPLAY DEVICE FOR DISPLAYING VIDEO AND METHOD THEREOF}
본 발명은 동영상 디스플레이 장치 및 그 디스플레이 방법에 관한 것으로서, 보다 상세하게는 회전 정보를 포함하는 동영상을 디스플레이 장치에서 디스플레이하는 방법에 관한 것이다.
정보화 기술의 발전에 따라, 유저 개인의 디지털 디바이스를 이용한 동영상 촬영 및 감상이 보편화되었다. 따라서, 유저는 직접 촬영한 동영상을 유저의 디지털 디바이스를 통해 감상할 수 있다. 그러나, 유저가 직접 촬영하는 경우, 손 떨림 등으로 인해 동영상 촬영 시 디지털 디바이스에 흔들림이 발생할 수 있다. 따라서, 촬영된 동영상을 그대로 재생하는 경우, 화면 흔들림으로 인해 유저에게 불안정함을 야기할 수 있다.
한편, 디지털 디바이스 자체에 구비된 손 떨림 보정 기능을 이용하여 영상을 보정하여 감상하는 경우, 유저가 촬영 시 느꼈던 긴박감 또는 생동감을 느끼기 어려울 수 있다. 또한, 일반인이 동영상을 촬영하는 경우, 전문가에 비해 동영상의 보정이 어려울 수 있다. 따라서, 디지털 디바이스를 이용한 동영상 촬영 및 감상 시, 촬영 당시의 생동감 및 안정감을 동시에 느낄 수 있는 직관적이고 간편한 방법이 필요하다.
본 발명은 유저가 하나의 동영상을 감상하는 때에, 취향에 따라, 내츄럴 디스플레이 모드 또는 수평 디스플레이 모드를 모두 이용 가능하게 하기 위한 목적을 가지고 있다. 이때, 본 발명은 내츄럴 디스플레이 모드를 통해 동영상 촬영 당시의 생생함을 유저에게 제공하기 위한 목적을 가지고 있다. 또한, 본 발명은 수평 디스플레이 모드를 통해 동영상 재생 시 유저에게 안정감을 제공하기 위한 목적을 가지고 있다.
또한, 본 발명은 적어도 하나의 동영상 재생 모드를 이용하여 동영상을 디스플레이 중에, 유저의 인풋 또는 자동 설정을 통하여, 유저에게 새로운 동영상 재생 모드를 제공하기 위한 목적을 가지고 있다. 즉, 내츄럴 디스플레이 모드로 동영상을 디스플레이 중에 유저의 인풋 또는 자동 설정을 통하여, 유저에게 수평 디스플레이 모드를 제공하기 위한 목적을 가지고 있다. 또한, 수평 디스플레이 모드로 동영상을 디스플레이 중에 유저의 인풋 또는 자동 설정을 통하여, 유저에게 내츄럴 디스플레이 모드를 제공하기 위한 목적을 가지고 있다.
또한, 본 발명은 동영상 재생 모드를 설정 또는 재설정할 때, 간편하게 재생 모드를 설정할 수 있는 유저 인터페이스를 제공하기 위한 목적을 가지고 있다.
상기와 같은 문제를 해결하기 위해 본 발명은, 촬영된 동영상을 디스플레이 하는 디스플레이 장치에 있어서, 회전 정보를 포함하는 동영상을 획득하는 커뮤니케이션 유닛; 상기 동영상을 디스플레이 하는 디스플레이 유닛; 및 동영상 재생 모드를 설정하는 프로세서를 포함하고, 상기 동영상 재생 모드는 상기 획득된 동영상을 상기 회전 정보를 기초로 한 회전 보상없이 디스플레이하는 내츄럴 디스플레이 모드 및 상기 동영상에 포함된 상기 회전 정보를 기초로 회전 보상된 동영상을 디스플레이 하는 수평 디스플레이 모드를 포함하고, 상기 동영상 재생 모드가 상기 수평 디스플레이 모드인 경우, 상기 동영상의 연속된 복수의 프레임들을 상기 회전 정보를 기초로 회전 보상하고, 상기 동영상의 상기 연속된 복수의 프레임들을 하나의 사이즈로 크로핑하여 디스플레이하고, 상기 크로핑 사이즈는 상기 동영상의 연속된 복수의 프레임들의 상기 회전 정보에 기초하여 결정되는, 디스플레이 장치를 제공한다.
또한, 본 발명은, 촬영된 동영상을 디스플레이 하는 방법에 있어서, 회전 정보를 포함하는 동영상을 획득하는 단계로서, 상기 회전 정보는 상기 동영상의 복수의 프레임들에 대한 회전 각도 정보를 포함함; 동영상 재생 모드를 설정하는 단계로서, 동영상 재생 모드를 설정하는 단계로서, 상기 동영상 재생 모드는 상기 획득된 동영상을 상기 회전 정보를 기초로 한 회전 보상 없이 디스플레이 하는 내츄럴 디스플레이 모드 및 상기 동영상에 포함된 상기 회전 정보를 기초로 회전 보상된 동영상을 디스플레이 하는 수평 디스플레이 모드를 포함함; 상기 설정된 동영상 재생 모드에 기초하여, 상기 동영상을 디스플레이 하는 단계를 포함하고, 상기 동영상 재생 모드가 상기 수평 디스플레이 모드인 경우, 상기 동영상의 연속된 복수의 프레임들을 상기 회전 정보를 기초로 회전 보상하고, 상기 동영상의 상기 연속된 복수의 프레임들을 하나의 사이즈로 크로핑하여 디스플레이하고, 상기 크로핑 사이즈는 상기 동영상의 연속된 복수의 프레임들의 상기 회전 정보에 기초하여 결정되는, 동영상 디스플레이 방법을 제공한다.
본 발명의 실시예에 따르면, 하나의 동영상에 대해 내츄럴 디스플레이 모드 및 수평 디스플레이 모드의 디스플레이가 모두 가능하여, 유저는 동영상의 흔들림을 통해 촬영 당시의 현장의 생생함 및 수평 디스플레이를 통한 안정감을 동시에 느낄 수 있다.
또한, 본 발명의 실시예에 따르면, 유저는 동영상 디스플레이 중에 디스플레이된 회전 정보를 나타내는 아이콘을 통하여, 촬영 당시의 현장의 상황을 생생하게 체험할 수 있다.
또한, 본 발명의 실시예에 따르면, 유저는 동영상 재생 모드 설정 및 재설정 인터페이스를 통하여, 동영상 재생 모드를 손쉽게 전환할 수 있어 사용자의 편의성을 높일 수 있다.
보다 구체적인 발명의 효과에 대해서는, 이하 목차에서 상세히 후술하도록 하겠다.
도 1은 본 발명에 따른 촬영된 동영상을 디스플레이 장치에서 디스플레이 하는 일 실시예를 나타내는 도면이다.
도 2는 본 발명에 따른 촬영된 동영상을 디스플레이 장치에서 디스플레이 하는 일 실시예를 나타내는 도면이다.
도 3은 본 발명에 따른 촬영된 동영상의 회전 각도별 프레임의 일 실시예를 나타내는 도면이다.
도 4는 본 발명에 따른 촬영된 동영상을 내츄럴 디스플레이 모드로 디스플레이 하는 경우의 일 실시예를 나타내는 도면이다.
도 5는 본 발명에 따른 촬영된 동영상을 수평 디스플레이 모드로 디스플레이 하는 경우의 일 실시예를 나타내는 도면이다.
도 6은 본 발명에 따른 촬영된 동영상을 수평 디스플레이 모드로 디스플레이 하는 경우의 일 실시예를 나타내는 도면이다.
도 7은 본 발명에 따른 촬영된 동영상을 수평 디스플레이 모드로 디스플레이 하는 경우의 일 실시예를 나타내는 도면이다.
도 8은 본 발명에 따른 촬영된 동영상을 수평 디스플레이 모드로 디스플레이 하는 경우의 일 실시예를 나타내는 도면이다.
도 9는 본 발명에 따른 촬영된 동영상을 수평 디스플레이 모드로 디스플레이 하는 경우의 일 실시예를 나타내는 도면이다.
도 10은 본 발명에 따른 촬영된 동영상을 수평 디스플레이 모드로 디스플레이 하는 경우의 일 실시예를 나타내는 도면이다.
도 11은 본 발명에 따른 촬영된 동영상을 수평 디스플레이 모드로 디스플레이 하는 경우의 일 실시예를 나타내는 도면이다.
도 12는 본 발명에 따른 동영상 재생 모드 설정 인터페이스의 일 실시예를 나타내는 도면이다.
도 13은 본 발명에 따른 동영상 재생 모드 재설정 인터페이스의 일 실시예를 나타내는 도면이다.
도 14는 본 발명에 따른 회전 정보를 나타내는 아이콘의 일 실시예를 나타내는 도면이다.
도 15는 본 발명에 따른 회전 정보를 나타내는 아이콘의 일 실시예를 나타내는 도면이다.
도 16은 본 발명에 따른 동영상 디스플레이 장치를 나타내는 블럭도이다.
도 17은 본 발명에 따른 동영상 디스플레이 방법을 나타내는 순서도이다.
도 18은 본 발명에 따른 동영상 디스플레이 방법을 나타내는 순서도이다.
도 19는 도 18에서 수평 디스플레이 모드로 동영상을 디스플레이 하는 방법을 나타내는 순서도이다.
도 20은 본 발명에 따른 동영상 디스플레이 방법을 나타내는 순서도이다.
도 21은 본 발명에 따른 동영상 디스플레이 방법을 나타내는 순서도이다.
본 명세서에서 사용되는 용어는 본 발명에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어를 선택하였으나, 이는 당 분야에 종사하는 기술자의 의도, 관례 또는 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한 특정 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 발명의 설명 부분에서 그 의미를 기재할 것이다. 따라서 본 명세서에서 사용되는 용어는, 단순한 용어의 명칭이 아닌 그 용어가 아닌 실질적인 의미와 본 명세서의 전반에 걸친 내용을 토대로 해석되어야 함을 밝혀두고자 한다.
더욱이, 이하 첨부 도면들 및 첨부 도면들에 기재된 내용들을 참조하여 본 발명의 실시예를 상세하게 설명하지만, 본 발명이 실시예들에 의해 제한되거나 한정되는 것은 아니다.
도 1은 본 발명에 따른 촬영된 동영상을 디스플레이 장치에서 디스플레이 하는 일 실시예를 나타내는 도면이다. 본 발명의 실시예에 따르면, 디스플레이 장치(110)는 외부 장치(120)로부터 획득한 동영상을 유저(130)에게 디스플레이 할 수 있다.
디스플레이 장치(110)는 PC, PDA(Personal Digital Assistant), 노트북, 태블릿 PC, 텔레비전 등 이미지 디스플레이가 가능하며 데이터 통신이 가능한 다양한 디지털 디바이스를 포함할 수 있다. 도 1을 참조하면, 디스플레이 장치(110)는 설정된 동영상 재생 모드에 따라, 촬영된 동영상을 프로세싱하여 디스플레이(150) 할 수 있다. 디스플레이 장치(110)는 촬영된 동영상의 각각의 프레임에 대하여 회전 보상하여 디스플레이할 수 있고, 이에 대하여는 도 4 내지 도 11에서 상세하게 설명하도록 한다.
외부 장치(120)는 동영상을 촬영할 수 있는 다양한 종류의 디지털 장치를 포함할 수 있다. 예를 들어, 외부 장치(120)는 비디오 레코더, 스마트폰, PC, PDA, 노트북, 태블릿 PC 등을 포함하며, 이 외에도 동영상을 촬영할 수 있는 다양한 종류의 디지털 장치를 포함할 수 있다. 도 1의 실시예에서 외부 장치(120)는 HMD(Head Mounted Display)를 나타낸다. 여기에서, HMD(120)는 카메라(미도시), 커뮤니케이션 유닛(미도시) 및 센서 유닛(미도시)를 포함할 수 있다. 여기에서, 센서 유닛(미도시)은 중력(gravity) 센서, 지자기 센서, 자이로 센서, 가속도 센서, 기울임(inclination) 센서를 포함할 수 있다. 외부 장치(120)는 이러한 센서 유닛을 통해, 동영상의 복수의 프레임들의 회전 정보를 센싱할 수 있다. 또한, HMD(120)는 장착된 카메라(미도시)를 통해 동영상을 촬영할 수 있고, 커뮤니케이션 유닛(미도시)을 통해 촬영된 동영상을 디스플레이 장치(110)로 전송할 수 있다. 또한, 본 발명에서 설명한 HMD(120)는 본 발명의 목적에 따라 다양한 디바이스로 변경 및 대체 가능하다. 예를 들어, 본 발명의 HMD(120)는 EMD(Eye Mounted Display), eyeglass, eyepiece, eye wear, HWD(Head Worn Display) 등 유저에게 착용되어 디스플레이를 제공할 수 있는 다양한 디바이스를 포함할 수 있다.
또한, 외부 장치(120)와 디스플레이 장치(110)는 다양한 형태의 유선 또는 무선 통신 수단을 이용하여 데이터의 송/수신이 가능하다. 이 때, 사용 가능한 무선 통신 수단으로는 NFC(Near Field Communication), Zigbee, 적외선 통신, 블루투스, 와이 파이 등이 있으며, 본 발명은 이에 한정하지 않는다. 또한, 외부 장치(120)와 디스플레이 장치(110)는 USB(Universal Serial Port)를 통해 데이터 전달이 가능하다. 본 발명에서 HMD(120)와 디스플레이 장치(110)간의 통신은 앞서 열거된 통신 수단 중 어느 하나를 이용하여 이루어질 수도 있으며, 이들 간의 조합을 통하여 이루어질 수도 있다.
도 1을 참조하면, HMD(120)는 유저에게 착용된 상태에서 동영상(140)을 촬영할 수 있다. 이 경우, 유저의 움직임과 동시에 HMD(120)는 움직임을 갖기 때문에, HMD(120)를 통해 촬영된 동영상은 회전 정보를 포함할 수 있다. 여기에서, 유저의 움직임은 걷기, 머리 기울이기, 손 움직이기를 포함할 수 있다. 또한, 회전 정보는 동영상에 대한 메타데이터로서 포함될 수 있다. 일 예로서, 회전 정보는 동영상의 복수의 프레임들 각각에 대한 회전 각도 정보를 포함할 수 있다. 회전 각도 정보는 수평 상태를 기준으로 각각의 프레임이 회전된 각도를 나타낼 수 있다. 수평 상태는 지구 중력의 방향에 대해 직각을 이루는 상태로서, 수평선 또는 지평선에 대하여 회전 각도가 0°인 상태를 포함할 수 있다. 또한, 수평 상태는 촬영 이미지에서 인식되는 수평선 또는 지평선에 대하여 회전 각도가 0°인 상태를 포함할 수 있다. 또한, 회전 각도 정보는 외부 장치(120)에 포함된 중력 센서, 지자기 센서, 각도 센서 등을 이용하여 측정될 수 있다. 또한, 회전 정보는 동영상의 복수의 프레임들 각각에 대한 촬영 시간 정보를 포함할 수 있다. 촬영 시간 정보는 동영상의 복수의 프레임들에 대하여 각 프레임이 촬영된 시간 또는 동영상의 복수의 프레임들 중 각 프레임이 해당하는 순서를 나타낼 수 있다. HMD(120)는 상술한 회전 정보를 포함하는 동영상을 디스플레이 유닛(110)에 제공할 수 있다.
다른 일 예로서, 회전 정보는 동영상 전체 데이터에 대한 회전 정보를 포함할 수도 있다. 보다 상세하게는, 회전 정보는 동영상의 촬영 시간 흐름에 따라, 프레임의 회전 각도 변화에 대한 정보를 포함할 수 있다. 예를 들어, 동영상의 길이가 10분인 경우, 회전 정보는 10분에 해당하는 복수의 프레임들의 회전 각도의 변화에 대한 정보를 포함할 수 있다. 이 경우 디스플레이 장치(110)는 동영상의 프레임과 해당 프레임의 시점에 해당하는 회전 정보를 매칭하여 각 프레임의 회전 각도를 파악할 수 있다.
또한, 도 1을 참조하면, HMD(120)는 기 설정된 범위의 화각 영역(140)을 가질 수 있다. 화각 영역(140)은 HMD(120)를 착용한 유저의 시야에 대응하는 기 설정된 영역으로서, HMD(120)의 전방 방향으로 일정한 각도 이내의 영역을 포함할 수 있다. HMD(120)는 전방에 나타난 장면 중 화각 영역(140)내의 장면을 촬영할 수 있다. 또한, HMD(120)는 화각 영역(140)내의 장면들로 이루어진 동영상을 디스플레이 유닛(110)에 제공할 수 있다.
도 2는 본 발명에 따른 촬영된 동영상을 디스플레이 장치에서 디스플레이 하는 일 실시예를 나타내는 도면이다. 보다 상세하게는, 도 2는 HMD(210)를 통해 촬영된 동영상(220)을 HMD(210)를 통해 디스플레이하는 실시예를 나타낸다.
도 2를 참조하면, 유저는 HMD(210)를 착용한 상태에서 동영상을 촬영할 수 있다. 이 때, 도 1에서 상술한 바와 같이, 유저의 움직임과 동시에 HMD(210)는 움직임을 갖고, HMD(210)를 통해 촬영된 동영상은 회전 정보를 포함할 수 있다.
또한, HMD(210)는 카메라(미도시), 프로세서(미도시) 및 센서 유닛(미도시)를 포함할 수 있다. HMD(210)는 카메라(미도시)를 통해 화각 영역(220) 내의 동영상을 촬영할 수 있고, 프로세서(미도시)를 통해 촬영된 동영상을 동영상 재생 모드에 따라 프로세싱 할 수 있다. 또한, HMD(210)는 센서 유닛(미도시)을 통해, 동영상 재생 모드를 설정할 수 있다. 센서 유닛(미도시)에 대하여는 도 16과 관련하여 자세하게 설명하도록 한다. 또한, 유저는 동영상 재생 모드에 따라 프로세싱된 동영상을 HMD(210)를 통해 화각 영역(230) 내에서 시청할 수 있다. 이 경우, HMD(210)를 착용한 유저는, HMD(210)를 통해 촬영된 동영상을 내츄럴 디스플레이 모드 또는 수평 디스플레이 모드로 시청할 수 있다. 화각 영역(230) 내에 디스플레이 된 동영상은, HMD(210)가 촬영한 동영상이 그대로 디스플레이 되거나, HMD(210)가 촬영한 동영상이 회전 보상되어 디스플레이될 수 있다.
도 3은 본 발명에 따른 촬영된 동영상의 회전 각도별 프레임의 일 실시예를 나타내는 도면이다. 보다 상세하게는, 도 3은 촬영된 동영상을 구성하는 복수의 프레임들 중 일부 프레임들을 나타낸다. 동영상은 복수의 프레임들로 구성되어 있고, 이러한 프레임들은 30 프레임, 60 프레임 등에 해당할 수 있다. 도 3에 나타난 프레임들은 HMD를 통하여 촬영된 동영상의 일부 프레임들에 해당할 수 있다. 이러한 프레임들은 시간 순서(sequence)대로 촬영된 프레임들로서, 도 3에 도시된 바와 같이, 획득된 동영상의 각각의 프레임은 수평 상태에 대한 회전 각도 정보를 포함할 수 있다.
도 3(a)는 획득된 동영상의 일부 프레임으로서 회전 각도가 0°인 경우를 나타내는 도면이다. 도 3(b)는 획득된 동영상의 일부 프레임으로서 회전 각도가 왼쪽으로 7°인 경우를 나타내는 도면이다. 도 3(c)는 획득된 동영상의 일부 프레임으로서 회전 각도가 왼쪽으로 25°인 경우를 나타내는 도면이다. 도 3(d)는 획득된 동영상의 일부 프레임으로서 회전 각도가 왼쪽으로 45°인 경우를 나타내는 도면이다. 또한, 촬영된 동영상의 복수의 프레임들은 동영상 촬영 당시의 손 떨림과 같은 유저의 움직임, 바람 세기 등의 요인에 의해 회전 각도가 다양해질 수 있다.
도 3에 도시된 프레임들은 촬영된 동영상을 구성하는 복수의 프레임들 중 일부를 나타내고 있으며, 디스플레이 장치는 이러한 프레임들에 대하여 회전 보상없이 디스플레이 하는 내츄럴 디스플레이 모드 또는 회전 보상을 수행하여 디스플레이 하는 수평 디스플레이 모드로 디스플레이 할 수 있다. 내츄럴 디스플레이 모드 및 수평 디스플레이 모드에 대하여 도 4 내지 도 11에서 자세하게 설명하도록 한다.
도 4는 본 발명에 따른 촬영된 동영상을 내츄럴 디스플레이 모드로 디스플레이 하는 경우의 일 실시예를 나타내는 도면이다. 도 4에 도시된 바와 같이, 동영상 디스플레이 장치는 회전 정보를 포함하는 동영상을 회전 정보를 기초로 한 회전 보상 없이 디스플레이 하는 내츄럴 디스플레이 모드로 디스플레이 할 수 있다. 이와 관련하여, 도 4(a) 내지 도 4(e)에 나타난 프레임들은 촬영된 동영상을 구성하는 복수의 프레임들 중 일부에 해당할 수 있다. 또한, 도 4(a) 내지 도 4(e)에 나타난 프레임들은 시간 순서대로 촬영된 프레임들로서, 30프레임, 60프레임 등에 해당될 수 있다.
도 4의 각 프레임은 순서대로, 도 4(a)는 0° 회전된 프레임, 도 4(b)는 왼쪽으로 25° 회전된 프레임, 도 4(c)는 왼쪽으로 45° 회전된 프레임, 도 4(d)는 왼쪽으로 7° 회전된 프레임, 도 4(e)는 0°의 회전 각도를 갖는 프레임에 해당할 수 있다.
이처럼, 본 발명에 따른 동영상 디스플레이 장치에서 내츄럴 디스플레이 모드로 동영상을 재생하는 경우, 화면의 흔들림 또는 회전을 통하여 유저는 촬영 당시의 현장의 생동감을 느낄 수 있다. 또한, 동영상 디스플레이 장치에서 내츄럴 디스플레이 모드로 동영상을 재생하는 경우, 프레임을 크롭 또는 리사이즈 하지 않고 그대로 디스플레이 하여, 촬영된 프레임을 줌인(zoom-in)하지 않고 그대로 감상할 수 있다.
도 5 내지 도 7은 본 발명에 따른 촬영된 동영상을 수평 디스플레이 모드로 디스플레이 하는 경우의 일 실시예를 나타내는 도면이다. 도 5는 도 4에 도시된 프레임들을 수평 디스플레이 하기 위해 각 프레임의 회전 정보에 기초하여 회전 보상된 프레임을 나타낸다. 도 5를 참조하면, 본 발명의 동영상 디스플레이 장치는 동영상의 복수의 프레임들을 각각 회전 보상하여, 각각의 프레임을 수평으로 디스플레이 할 수 있다. 이 때, 동영상 디스플레이 장치는 각각의 프레임을 실제 회전 각도에 대하여 반대 방향으로, 회전 각도의 크기만큼 회전시켜서 수평 디스플레이 할 수 있다. 예로서, 도 5(a)에서 도시된 바와 같이, 동영상 디스플레이 장치는 도 4(a) 프레임의 회전 각도가 0°인 회전 정보에 기초하여, 도 4(a) 프레임을 회전시키지 않을 수 있다. 또한, 도 5(b)에서 도시된 바와 같이, 동영상 디스플레이 장치는 도 4(b) 프레임의 회전 각도가 왼쪽으로 25°인 회전 정보에 기초하여, 수평 디스플레이를 위해 프레임을 오른쪽으로 25° 회전시킬 수 있다. 또한, 도 5(c)에서 도시된 바와 같이, 동영상 디스플레이 장치는 도 4(c) 프레임의 회전 각도가 왼쪽으로 45°인 회전 정보에 기초하여, 수평 디스플레이를 위해 프레임을 오른쪽으로 45° 회전시킬 수 있다. 또한, 도 5(d)에서 도시된 바와 같이, 동영상 디스플레이 장치는 도 4(d) 프레임의 회전 각도가 왼쪽으로 7°인 회전 정보에 기초하여, 수평 디스플레이를 위해 프레임을 오른쪽으로 7° 회전시킬 수 있다. 또한, 도 5(e)에서 도시된 바와 같이, 동영상 디스플레이 장치는 도 4(e) 프레임의 회전 각도가 0°인 회전 정보에 기초하여, 수평 디스플레이를 위해 별도로 회전시킬 수 있다.
한편, 도 5에 도시된 바와 같이, 도 5(b), 도 5(c) 및 도 5(d)는 수평 디스플레이를 위해 프레임을 회전시킴에 따라 백그라운드 영역(background region)을 포함할 수 있다. 백그라운드 영역은 프레임을 회전시킴에 따라, 프레임 내에 동영상이 디스플레이 되지 않는 영역에 해당할 수 있다. 백그라운드 영역은 프레임의 형태가 직사각형인 경우에 나타날 수 있고, 프레임의 형태가 원형인 경우에는 나타나지 않을 수도 있다. 프레임의 형태 및 사이즈는 동영상을 재생하는 프레임 사이즈에 의해 결정되거나, 이미지를 촬영하는 촬영 센서의 이미지 획득 영역에 의해 결정될 수도 있다. 백그라운드 영역은 도 5(b) 내지 5(d)에서 빗금 친 영역(510,520,530)으로 나타낼 수 있다. 또한, 프레임의 회전 각도 정보에 따라, 각각의 프레임 내에서 백그라운드 영역이 차지하는 비율은 달라질 수 있다. 수평 디스플레이된 도 5의 프레임들을 그대로 디스플레이 장치에서 디스플레이하는 경우, 백그라운드 영역이 그대로 디스플레이될 수 있다. 이로 인해 유저는 동영상 시청에 불편함을 느낄 수 있다. 이를 해결하기 위한, 백그라운드 영역의 제어에 대해서 도 6 내지 도 8에서 자세히 설명하도록 한다.
도 6은 도 5에 도시된 회전 보상된 각각의 프레임에 대한 크롭 영역 설정을 나타내는 도면이다. 크롭 영역(crop area)은 촬영된 장면 중 프레임 내에서 유지하고자 하는 영역으로서, 촬영된 장면 중에서 불필요한 영역으로 판단된 영역이 제거되고 남은 영역을 나타낼 수 있다. 크롭 영역은 동영상을 수평 디스플레이 모드로 디스플레이 하기 위해, 도 5에 나타난 백그라운드 영역을 제어하기 위해 필요할 수 있다.
일 예로서, 크롭 영역은 원본 프레임의 종횡비와 동일한 종횡비를 갖는 직사각형 영역으로 나타낼 수 있다. 따라서, 원본 프레임의 종횡비가 5:5인 경우, 크롭 영역의 종횡비 또한 5:5에 해당할 수 있다. 도 6을 참조하면, 도 6의 각 프레임들의 종횡비는 약 6:4로서, 도 6의 각 프레임들의 크롭 영역의 종횡비 또한 약 6:4에 해당할 수 있다. 도 6의 실시예에서, 도 6(a)는 백그라운드 영역을 포함하지 않으므로, 크롭 영역(610)이 원래 프레임과 동일할 수 있다. 도 6(b)는 백그라운드 영역(625)이 포함되지 않는 종횡비 6:4의 직사각형 형태로 크롭 영역(620)이 설정될 수 있다. 도 6(c)는 백그라운드 영역(635)이 포함되지 않는 종횡비 6:4의 직사각형 형태로 크롭 영역(630)이 설정될 수 있다. 도 6(d)는 백그라운드 영역(645)이 포함되지 않는 종횡비 6:4의 직사각형 형태로 크롭 영역(640)이 설정될 수 있다. 도 6(e)는 백그라운드 영역을 포함하지 않으므로, 크롭 영역(650)이 원래 프레임과 동일하게 설정될 수 있다.
한편, 동영상 디스플레이 장치는 동영상의 복수의 프레임들에 대한 크로핑 사이즈를 하나의 사이즈로 설정할 수 있다. 이는, 동영상 재생 시 연속되는 프레임들을 보다 자연스럽게 보이게 하기 위함이다. 일 예로서, 크로핑 사이즈는 동영상의 복수의 프레임들의 회전 정보에 기초하여 크롭 영역이 실질적으로 최소가 되는 프레임에 기초하여 결정될 수 있다. 여기에서, 크롭 영역이 실질적으로 최소가 되는 프레임은 복수의 프레임들 중 회전 각도 정보에 기초하여 수평 디스플레이를 위해 크롭되는 영역이 실질적으로 최대가 되는 프레임에 해당할 수 있다. 이는 동영상 디스플레이 중에, 유저에게 백그라운드 영역이 보이지 않게 하기 위함이다. 일 예로서, 종횡비 6:4인 프레임은, 45° 각도에서 크롭 영역이 실질적으로 최소가 될 수 있다. 다른 일 예로서, 종횡비 5:5인 프레임은, 45° 각도에서 크롭 영역이 실질적으로 최소가 될 수 있다. 또한, 크로핑 과정에서, 디스플레이 장치는 회전 정보를 사용하여, 프레임 종횡비에 따라 크롭 영역이 실질적으로 최대가 되는 회전 각도를 파악할 수 있다. 도 6을 참조하면, 도 6의 프레임들은 종횡비가 약 6:4로서, 도 6(a) 내지 도 6(e)의 프레임들 중 도 6(c)의 프레임에 나타난 크롭 영역(630)이 실질적으로 최소에 해당할 수 있다. 따라서, 도 6의 프레임들의 크로핑 사이즈는 도 6(c)의 크롭 영역(630)에 기초하여 결정될 수 있다. 따라서, 도 6의 프레임들은 도 6(c)의 크로핑 사이즈에 기초하여 크롭될 수 있다.
한편, 크로핑 사이즈는 동영상의 복수의 프레임들 중 크롭 영역이 실질적으로 최소인 적어도 하나의 프레임을 제외하고, 나머지 프레임들 중 회전 보상에 따른 크롭 영역이 실질적으로 최소가 되는 프레임에 기초하여 결정될 수 있다. 이와 관련하여, 도 6을 참조하면, 도 6에 나타난 프레임들 중 크롭되는 영역이 실질적으로 최대인 프레임은 도 6(c) 프레임으로서, 도 6(c)는 제외하고 수평 디스플레이 모드로 동영상을 디스플레이 할 수 있다. 이 경우, 도 6의 나머지 프레임들 중 회전 보상에 따른 크롭 영역이 최소가 되는 프레임은 도 6(b)의 프레임이 될 수 있다. 따라서, 도 6의 프레임들의 크로핑 사이즈는 도 6(b)의 프레임의 크롭 영역(620)에 기초하여 결정될 수도 있다. 이에 의해, 도 6(c) 프레임을 제외한 도 6의 프레임들은 도 6(b)의 크로핑 사이즈에 기초하여 크롭될 수 있다. 이는 복수의 프레임들 중 동영상 촬영 중에 예외적으로 회전 각도가 크게 촬영된 프레임을 제외하고 수평 디스플레이 모드로 전환하여, 동영상 디스플레이 장치가 보다 자연스럽게 수평 디스플레이 모드로 동영상을 디스플레이 하게 하기 위함이다. 또한, 유저가 동영상을 직접 촬영하는 경우, 비슷한 각도 범위 내에서 프레임이 회전될 수 있고, 회전 각도가 상술한 각도 범위를 크게 벗어난 프레임은 잘못 촬영된 프레임으로 간주하여 제외하는 것이, 동영상 디스플레이에서 보다 자연스러울 수 있기 때문이다.
도 7은 도 6에서 도시된 크롭 영역에 따라 각 프레임들을 크롭하고, 크롭된 프레임들을 원래 프레임과 동일한 사이즈로 리사이징(resizing)하는 것을 나타내는 도면이다.
일 예로서, 동영상 디스플레이 장치는 크롭된 프레임들을, 원래 프레임 사이즈에 맞게 리사이징하고, 리사이징된 프레임들을 병합하여 동영상을 디스플레이 할 수 있다. 도 7을 참조하면, 도 7은 도 6(c) 프레임의 크로핑 사이즈와 동일한 사이즈로 크롭한 도 6의 나머지 프레임들을, 도 6(c) 프레임과 동일한 배율로 리사이징한 것을 나타낼 수 있다. 따라서, 도 7의 프레임들은 도 6에서 크롭된 프레임들을 동일한 배율로 줌인(zoom-in)한 프레임들에 해당될 수 있다. 즉, 동영상 디스플레이 장치는 수평 디스플레이 모드에서, 내츄럴 동영상 디스플레이 모드에서 재생된 프레임을 보다 줌인하여 디스플레이 할 수 있다. 이는 복수의 프레임들 각각을 회전 보상하고 크롭하여 디스플레이 하기 때문이다. 동영상 디스플레이 장치는 수평 디스플레이 모드에서, 원본 동영상을 보거나 원본 동영상 프레임의 회전 각도를 알 수 있도록, 회전 정보를 나타내는 아이콘을 디스플레이 할 수 있다. 이에 관련하여, 도 14 및 도 15에서 자세히 설명하도록 한다.
이를 통해, 사용자는 수평 디스플레이 모드를 통하여, 촬영 당시에 회전 각도를 포함하는 프레임을 회전 각도가 느껴지지 않는 수평 상태로 시청할 수 있어, 시각적으로 안정감을 느낄 수 있는 장점이 있다.
도 8 내지 도 11은 본 발명에 따른 촬영된 동영상을 수평 디스플레이 모드로 디스플레이 하는 경우의 일 실시예를 나타내는 도면이다. 보다 상세하게는, 동영상 디스플레이 장치는 동영상의 복수의 프레임들을 기 설정된 기준에 기초하여 복수의 그룹들로 나누고, 복수의 그룹들에 대해 그룹별로 각각 동영상 재생 모드를 설정할 수 있다. 일 예로서, 도 8은 수평 디스플레이 모드에서, 촬영된 동영상의 각각의 프레임의 각도가 크게 다른 경우, 기 설정된 각도에 따라 프레임 그룹을 설정하고, 프레임 그룹별로 수평 디스플레이 하는 실시예를 나타내는 도면이다.
먼저, 도 8을 참조하면, 도 8(a)는 왼쪽으로 85° 회전된 프레임, 도 8(b)는 왼쪽으로 75° 회전된 프레임, 도 8(c)는 왼쪽으로 45° 회전된 프레임, 도 8(d)는 왼쪽으로 7° 회전된 프레임, 도 8(e)는 왼쪽으로 3° 회전된 프레임 및 도 8(f)는 0° 회전된 프레임을 나타낼 수 있다. 또한, 도 8(a) 내지 도 8(f)의 프레임들은 동영상을 구성하는 복수의 프레임들 중 일부에 해당하고, 이들은 시간 순서대로 디스플레이된 프레임들에 해당할 수 있다.
동영상 디스플레이 장치는 촬영된 동영상을 구성하는 프레임들 중 기 설정된 각도와 동일하거나 초과하여 회전된 프레임들이 연속되는 경우에는, 기 설정된 각도와 동일하거나 초과하는 프레임 그룹(이하, ‘그룹 A’)(810)으로 설정할 수 있다. 또한, 동영상 디스플레이 장치는 촬영된 동영상을 구성하는 프레임들 중 기 설정된 각도를 초과하지 않는 프레임 그룹(이하, ‘그룹 B’)(820)으로 설정할 수 있다. 여기에서, 그룹 A(810)와 그룹 B(820)는 시간 순서대로 촬영된 프레임들에 해당할 수 있다.
도 8을 참조하면, 도 8(a), 도 8(b) 및 도 8(c)는 그룹 A(810)에 해당되고, 도 8(d), 도 8(e) 및 도 8(f)는 그룹 B(820)에 해당될 수 있다. 이 경우, 그룹을 설정하기 위한 기준이 되는 기 설정된 각도는 45°일 수 있다.
다른 일 예로서, 동영상 디스플레이 장치는 복수의 프레임들의 장면 전환 시점에 기초하여 복수의 그룹들로 그룹핑할 수 있다. 여기에서, 장면 전환 시점은 프레임의 전후의 변화 상태에 기초하여 결정될 수 있다. 프레임의 전후의 변화 상태는 프레임의 색상 배열의 변화를 포함할 수 있다. 일 예로서, 동영상 디스플레이 장치는 페이드 인(fade in) 또는 페이드 아웃(fade out)과 같이 장면이 완전하게 전환되었다고 판단되는 시점의 영상 프레임에 기초하여 결정될 수 있다. 페이드 아웃은 영상이 어두워지면서 장면이 전환되는 것이고, 페이드 인은 영상이 밝아지면서 장면이 전환되는 것을 나타낸다. 또한, 다른 일 예로서, 장면 전환 시점은 디스플레이 중에 흑색 또는 백색으로 된 프레임이 나타나는 경우에 기초하여 결정될 수 있다. 따라서, 동영상 디스플레이 장치는 디스플레이 중에 흑색 또는 백색으로 된 프레임이 나타나는 때에, 그 전후의 프레임들에 대하여 각각 그룹핑할 수 있다.
도 9는 도 8에 도시된 프레임들을 수평 디스플레이를 위해 각각 회전 보상한 실시예를 나타내는 도면이다.
도 9를 참조하면, 도 9(a), 도 9(b), 도 9(c)는 그룹 A(910)에 해당될 수 있고, 도 9(d), 도 9(e), 도 9(f)는 그룹 B(920)에 해당될 수 있다. 즉, 도 8에서 앞서 설명한 바와 같이, 그룹 A(910)는 기 설정된 각도와 동일한 초과하는 프레임들의 그룹이고, 그룹 B(920)는 기 설정된 각도를 초과하지 않는 프레임들의 그룹에 해당할 수 있다. 도 9(a)에 도시된 바와 같이, 동영상 디스플레이 장치는 도 8(a) 프레임의 회전 각도가 왼쪽으로 85°인 회전 정보에 기초에 기초하여, 수평 디스플레이를 위해 도 8(a) 프레임을 오른쪽으로 85°도 회전시킬 수 있다. 또한, 도 9(b)에 도시된 바와 같이, 동영상 디스플레이 장치는 도 8(b) 프레임의 회전 각도가 왼쪽으로 75°인 회전 정보에 기초하여, 수평 디스플레이를 위해 도 8(b) 프레임을 오른쪽으로 75° 회전시킬 수 있다. 또한, 도 9(c)에 도시된 바와 같이, 동영상 디스플레이 장치는 도 8(c) 프레임의 회전 각도가 왼쪽으로 45°인 회전 정보에 기초하여, 수평 디스플레이를 위해 도 8(c) 프레임을 오른쪽으로 45° 회전시킬 수 있다. 또한, 도 9(d)에 도시된 바와 같이, 동영상 디스플레이 장치는 도 8(d) 프레임의 회전 각도가 왼쪽으로 7°인 회전 정보에 기초하여, 수평 디스플레이를 위해 도 8(d) 프레임을 오른쪽으로 7° 회전시킬 수 있다. 또한, 도 9(e)에 도시된 바와 같이, 동영상 디스플레이 장치는 도 8(e) 프레임의 회전 각도가 왼쪽으로 3°인 회전 정보에 기초하여, 수평 디스플레이를 위해 도 8(e) 프레임을 오른쪽으로 3° 회전시킬 수 있다. 또한, 9(f)에 도시된 바와 같이, 동영상 디스플레이 장치는 도 8(f) 프레임의 회전 각도가 0°인 회전 정보에 기초하여, 도 8(f) 프레임을 회전시키지 않을 수 있다.
또한, 도 9에 도시된 바와 같이, 도 9(a) 내지 도 9(f)는 수평 디스플레이를 위해 프레임을 회전시킴에 따라 프레임 내에 동영상이 디스플레이 되지 않는 백그라운드 영역이 발생할 수 있다. 백그라운드 영역은 도 9(a) 내지 9(e)에서 빗금 친 영역(911,912,913,921,922)으로 나타날 수 있다. 수평 디스플레이 모드에서, 각각의 프레임에 대하여 회전 각도에 기초하여 회전 보상만을 수행하여 동영상을 디스플레이 하는 경우, 유저는 백그라운드 영역으로 인해 동영상에 집중하기 어려울 수 있다. 이를 해결하기 위한 백그라운드 영역의 제어에 대해서는 도 10 내지 도 11에서 자세히 설명하도록 한다.
도 10은 도 8 에서 그룹핑(grouping)되고, 도 9에서 회전 보상된 프레임들에 대하여 그룹별로 크롭 영역을 설정하는 실시예를 나타내는 도면이다.
동영상 디스플레이 장치는 동영상의 복수의 프레임들 중 기 설정된 각도와 동일하거나 초과하는 프레임들(그룹 A)에 대하여 제 1 사이즈로 크롭할 수 있다. 또한, 동영상 디스플레이 장치는 동영상의 복수의 프레임들 중 기 설정된 각도를 초과하지 않는 프레임들(그룹 B)에 대하여 제 2 사이즈로 크롭할 수 있다. 일 예로서, 제 1 사이즈 및 제 2 사이즈는 각 그룹의 복수의 프레임들 중 회전 보상에 따른 크롭 영역이 실질적으로 최소가 되는 크로핑 사이즈에 해당할 수 있다. 실질적으로 최소가 되는 크로핑 사이즈에 기초하여 복수의 프레임들을 크롭하는 경우, 각 프레임들의 백그라운드 영역을 제거할 수 있다. 크롭 영역은 촬영된 장면 중 프레임 내에서 유지하고자 하는 영역을 나타낼 수 있다.
도 10을 참조하면, 도 10(a), 10(b) 및 도 10(c)는 그룹 A(1010)에 해당될 수 있다. 그룹 A(1010)의 경우, 도 10(c)의 크롭 영역(1015)이 도 10(a) 의 크롭 영역(1011) 및 도 10(b)의 크롭 영역(1013)과 비교하여 실질적으로 최소에 해당될 수 있다. 따라서, 도 10(c)의 크롭되는 영역은 도 10(a)의 크롭되는 영역 및 도 10(b)의 크롭되는 영역과 비교하여 실질적으로 최대에 해당될 수 있다. 동영상 디스플레이 장치는 그룹 A(1010)에 대하여, 도 10(c)의 프레임의 크롭 영역(1015)에 기초하여 나머지 프레임들을 크롭할 수 있다. 도 10(c)의 프레임의 크롭 영역(1015)에 기초하여 나머지 프레임들을 크롭하는 경우, 그룹 A(1010)의 각 프레임에 포함된 백그라운드 영역(1012,1014,1016)을 제거하고 프레임들을 디스플레이 할 수 있다. 또한, 도 10(c)의 크롭 영역(1015)은 원본 동영상 프레임의 종횡비인 6:4와 동일한 종횡비를 갖는 직사각형 형태로 크롭될 수 있다. 이에 따라, 도 10(a) 및 도 10(b)의 프레임들도 도 10(c)와 동일한 종횡비를 갖는 직사각형 형태로 크롭될 수 있다.
또한, 도 10을 참조하면, 도 10(d), 도 10(e) 및 도 10(f)는 그룹 B(1020)에 해당될 수 있다. 그룹 B(1020)의 경우, 도 10(d)의 크롭 영역(1021)이 도 10(e)의 크롭 영역(1023) 및 도 10(f)의 크롭 영역(1025)과 비교하여 실질적으로 최소에 해당될 수 있다. 따라서, 도 10(d)의 크롭되는 영역은 도 10(e)의 크롭되는 영역 및 도 10(f)의 크롭되는 영역과 비교하여 실질적으로 최대에 해당될 수 있다. 동영상 디스플레이 장치는 그룹 B(1020)에 대하여, 도 10(d)의 프레임의 크롭 영역(1021)에 기초하여 나머지 프레임들을 크로핑하도록 설정할 수 있다. 도 10(d)의 프레임의 크롭 영역(1021)에 기초하여 나머지 프레임들을 크롭하는 경우, 그룹 B(1020)의 각 프레임에 포함된 백그라운드 영역(1022,1024)을 제거하고 디스플레이 할 수 있다. 또한, 도 10(d)의 크롭 영역(1021)은 원본 동영상 프레임의 종횡비인 6:4와 동일한 종횡비를 갖는 직사각형 형태로 크롭되도록 설정될 수 있다. 이에 따라, 도 10(e) 및 도 10(f)의 프레임들도 도 10(d)와 동일한 종횡비를 갖는 직사각형 형태로 크롭될 수 있다.
한편, 도 10에 도시된 바와 같이, 그룹 A(1010)의 크로핑 사이즈는 그룹 B(1020)의 크로핑 사이즈 보다 상대적으로 작을 수도 있다. 이는, 그룹 A(1010)의 프레임들의 회전 각도가 그룹 B(1020)의 프레임들의 회전 각도에 비해 커서, 원본 프레임에서 크롭되는 백그라운드 영역의 비율이 높기 때문이다.
도 11은 동영상의 프레임을 각각 도 10에 의해 설정된 크롭 영역에 의해 크롭하고 원래 프레임 사이즈에 맞게 그룹별로 리사이징(resizing)하는 실시예를 나타내는 도면이다. 일 예로서, 동영상 디스플레이 장치는 크롭된 프레임들을 그룹별로 원래 프레임 사이즈에 맞게 리사이징하고, 리사이징된 프레임들을 합하여 동영상을 디스플레이 할 수 있다. 이를 통해, 하나의 동영상에서 다양한 회전 각도를 갖는 프레임들에 대하여, 일괄적으로 줌-인하지 않고, 다양한 배율로 동영상을 보여줄 수 있다.
도 11을 참조하면, 도 11(a), 도11(b) 및 도 11(c)는 그룹 A(1110)에 해당될 수 있다. 그룹 A(1110)는 도 10(c)의 크롭 영역에 기초하여 크로핑된 후, 원래 프레임 사이즈에 맞춰 리사이징될 수 있다. 또한, 도 11(d), 도 11(e) 및 도 11(f)는 그룹 B(1120)에 해당될 수 있다. 그룹 B(1120)는 도 10(d)의 크롭 영역에 기초하여 크롭된 후, 원래 프레임 사이즈에 맞춰 리사이징될 수 있다. 도 11(a) 내지 도 11(f)는 시간 순서대로 촬영된 프레임들에 해당될 수 있다.
한편, 도 10에 도시된 바와 같이, 도 10(a) 내지 도 10(c), 즉 그룹 A(1010)의 크로핑 사이즈가 도 10(d) 내지 도 11(f) 즉, 그룹 B(1020)의 크로핑 사이즈에 비해 상대적으로 작을 수 있다. 따라서, 이들을 크로핑하고 리사이징한 도 11을 참조하면, 도 11(a) 내지 도 11(c)의 프레임은 도 11(d) 내지 도 11(f)의 프레임들에 비해 보다 줌인(zoom-in)된 상태로 디스플레이 될 수 있다. 이에 대해, 유저는 도 11에 디스플레이된 프레임들을 통하여 어떤 프레임들의 회전 각도가 상대적으로 더 큰지 쉽게 인지하지 못할 수도 있다. 따라서, 동영상 디스플레이 장치는 수평 디스플레이 모드에서, 원본 동영상을 보거나, 원본 동영상 프레임의 회전 각도를 알 수 있도록, 회전 정보를 나타내는 아이콘을 디스플레이 할 수 있다. 이와 관련하여, 도 14 및 도 15에서 자세히 설명하도록 한다.
이를 통해, 동영상 디스플레이 장치는 복수의 프레임들에 대하여 일괄적으로 하나의 크로핑 사이즈로 설정하지 않고, 상황에 따라 크롭 영역의 사이즈의 조정이 가능하므로, 일괄적으로 회전 보상하는 것에 비해 원본 동영상을 보다 더 유지할 수 있다.
도 12는 본 발명에 따른 동영상 재생 모드 설정 인터페이스의 일 실시예를 나타내는 도면이다. 보다 상세하게는, 도 12는 동영상 디스플레이 장치(1210)에 의해 동영상을 디스플레이 하는 경우, 동영상 재생 모드 설정 인터페이스(1220)를 제공하는 실시예를 나타낸다. 일 예로서, 동영상 재생 모드 설정 인터페이스(1220)는 동영상의 디스플레이 전에 제공될 수 있다. 다른 일 예로서, 동영상 재생 모드 설정 인터페이스(1220)는 이미 디스플레이된 동영상이 멈추게 된 때에 제공될 수 있다.
도 12를 참조하면, 동영상 디스플레이 장치(1210)는 동영상 재생 모드 설정 인터페이스(1220)를 제공하여, 유저의 입력에 의한 매뉴얼 모드 또는 기 설정된 자동 모드를 통해 동영상 재생 모드를 설정할 수 있다. 여기에서, 동영상 디스플레이 장치(1210)가 매뉴얼 모드에 의해 동영상 재생 모드를 설정되는 경우, 유저의 입력은 동영상 디스플레이 장치 내의 센서 유닛(미도시)에 의해 센싱될 수 있고, 이러한 유저의 입력은 제스쳐, 음성, 터치 등에 의한 입력을 포함할 수 있다. 또한, 센서 유닛(미도시)에 대해서는 도 16에서 상세하게 설명하도록 한다. 한편, 동영상 디스플레이 장치(1210)가 기 설정된 자동 모드에 의해 동영상 재생 모드를 설정되는 경우, 동영상의 복수의 프레임들 중 실질적으로 최대 회전 각도를 갖는 프레임의 회전 각도가 기 설정된 각도와 동일하거나 초과하는 경우, 동영상 디스플레이 장치(1210)는 수평 디스플레이 모드로 동영상을 재생하도록 설정될 수 있다. 또한, 동영상 디스플레이 장치(1210)가 기 설정된 자동 모드에 의해 동영상 재생 모드를 설정되는 경우, 동영상의 복수의 프레임들 중 실질적으로 최대 회전 각도를 갖는 프레임의 회전 각도가 기 설정된 각도를 초과하지 않는 경우, 동영상 디스플레이 장치(1210)는 내츄럴 디스플레이 모드로 동영상을 재생하도록 설정될 수 있다. 다만, 기 설정된 자동 모드는 설정한 바에 따라 달라질 수 있고, 상술한 실시예에 한정되는 것은 아니다
도 12를 참조하면, 동영상 디스플레이 장치(1210)는 동영상 재생 모드 설정 인터페이스(1220)에서 yes가 입력되는 경우, 매뉴얼 모드로 동영상 재생 모드가 설정될 수 있다. 또한, 동영상 디스플레이 장치(1210)는 동영상 재생 모드 설정 인터페이스(1220)에서 no가 입력되는 경우, 기 설정된 자동 모드로 동영상 재생 모드가 설정될 수 있다. 이러한 매뉴얼 모드 또는 기 설정된 자동 모드의 동작에 대해서는 도 18에서 자세히 설명하도록 한다. 이러한 동영상 재생 모드 설정에 대해서는 도 17 내지 도 19에서 상세하게 설명하도록 한다.
도 13은 본 발명에 따른 동영상 재생 모드 재설정 인터페이스의 일 실시예를 나타내는 도면이다. 보다 상세하게는, 도 13은 동영상 디스플레이 장치(1310)에 의해 동영상 디스플레이 중에 동영상 재생 모드를 재설정하는 경우, 동영상 재생 모드 재설정 인터페이스(1320)를 제공하는 실시예를 나타낸다.
도 13을 참조하면, 일 예로서, 동영상 디스플레이 장치(1310)는 동영상 디스플레이 중에, 유저 인풋을 디텍트하는 경우, 동영상 재생 모드가 재설정되는 동영상 재생 모드 재설정 인터페이스(1320)를 제공할 수 있다. 여기에서, 유저의 입력은 동영상 디스플레이 장치 내의 센서 유닛(미도시)에 의해 센싱될 수 있고, 이러한 유저의 입력은 제스쳐, 음성, 터치 등에 의한 입력을 포함할 수 있다. 또한, 센서 유닛(미도시)에 대해서는 도 16에서 상세하게 설명하도록 한다. 다른 일 예로서, 동영상 디스플레이 장치(1310)는 내츄럴 디스플레이 모드로 동영상 디스플레이 중에, 기 설정된 각도와 동일하거나 초과하는 프레임이 기 설정된 시간을 초과하여 디스플레이 되는 경우, 동영상 재생 모드 재설정 인터페이스(1320)를 제공할 수 있다. 한편, 수평 디스플레이 중에 각도 변화가 크지 않은 경우, 유저는 내츄럴 디스플레이 모드로 동영상을 시청하는 것이 더 재미있을 수 있다. 따라서, 동영상 디스플레이 장치(1310)는 수평 디스플레이 모드로 동영상 디스플레이 중에, 기 설정된 각도를 초과하지 않는 프레임이 기 설정된 시간을 초과하여 디스플레이 되는 경우, 동영상 재생 모드 재설정 인터페이스(1320)를 제공할 수 있다.
도 13을 참조하면, 동영상 디스플레이 장치(1310)는 동영상 재생 모드 재설정 인터페이스(1320)에서 동영상 재생 모드 재설정에 대하여 yes가 입력되는 경우, 유저 입력이 디텍트된 시점부터 기존의 동영상 재생 모드에 관계없이, 새로운 동영상 재생 모드로 동영상이 재생되도록 설정될 수 있다. 예를 들어, 동영상 디스플레이 장치(1310)에서 기존에 내츄럴 디스플레이 모드로 동영상이 재생되었던 경우, 동영상 재생 모드 재설정에 대하여 yes가 입력되면, 동영상은 유저 입력이 디텍트된 시점부터 수평 디스플레이 모드로 디스플레이 될 수 있다. 또한, 동영상 디스플레이 장치(1310)는 동영상 재생 모드 재설정 인터페이스(1320)에서 동영상 재생 모드 재설정에 대하여 no가 입력되는 경우, 기존의 동영상 재생 모드를 그대로 유지하도록 설정될 수 있다. 예를 들어, 동영상 디스플레이 장치(1310)는 기존에 내츄럴 디스플레이 모드로 재생되었던 경우, 동영상 재생 모드 재설정에 대하여 no가 입력되면, 동영상은 그대로 내츄럴 디스플레이 모드로 디스플레이될 수 있다. 이러한 동영상 재생 모드 재설정에 대하여는 도 20 및 도 21에서 상세하게 설명하도록 한다.
한편, 동영상 디스플레이 장치(1310)는 동영상 재생 모드가 재설정되는 경우, 동영상 재설정 시점부터 동영상 재생 모드가 재설정되어 디스플레이 될 수 있다. 또한, 동영상 디스플레이 장치(1310)는 동영상 재생 모드가 재설정되는 경우, 재설정 시점과 관계없이 전체 동영상의 재생 모드가 재설정되어 디스플레이 될 수 있다. 이를 통해, 동영상의 프레임들 중 회전 각도가 작은 프레임들에 대하여는 줌인을 적게 하고, 회전 각도가 큰 프레임들에 대하여는 줌인을 많이 하여, 유저가 보다 다양한 방식으로 동영상을 감상할 수 있게 할 수 있다.
도 14는 본 발명에 따른 회전 정보를 나타내는 아이콘의 일 실시예를 나타내는 도면이다. 보다 상세하게는, 동영상 디스플레이 장치(1410)는 회전 정보를 나타내는 아이콘(1420)을 기 설정된 크기 및 기 설정된 위치에 디스플레이 할 수 있다. 이러한 회전 정보를 나타내는 아이콘(1420)은 내츄럴 디스플레이 모드 또는 수평 디스플레이 모드에서 디스플레이 될 수 있다. 일 예로서, 회전 정보를 나타내는 아이콘(1420)은 액체를 포함하는 구형 아이콘을 포함할 수 있다. 여기에서, 구형 아이콘은, 프레임의 회전 각도에 따라 액체의 움직임을 나타낼 수 있다. 또한, 회전 정보를 나타내는 아이콘(1420)은 수평을 나타내는 제 1 인디케이터(indicator) 및 제 1 및 인디케이터에 대하여 기울어짐을 나타내는 제 2 인디케이터를 포함할 수 있다. 일 예로서, 회전 정보를 나타내는 아이콘(1420)은 제 1 인디케이터인 수평 방향의 직선 및 제 2 인디케이터인 기울어진 각도를 나타내는 직선으로 구성될 수 있다.
도 14를 참조하면, 회전 정보를 나타내는 아이콘(1420)을 통하여, 디스플레이된 프레임은 수평 상태를 기준으로 왼쪽으로 25° 회전된 상태에서 촬영된 것임을 나타낼 수 있다. 또한, 회전 정보를 나타내는 아이콘(1420)은 전체 프레임들에 대한 해당 프레임의 순서를 나타내는 아이콘(미도시)을 포함할 수도 있다. 이를 통해, 유저는 동영상 디스플레이 중에, 동영상 촬영 당시의 현장감을 보다 생동감있게 체험할 수 있다.
도 15는 본 발명에 따른 회전 정보를 나타내는 아이콘의 일 실시예를 나타내는 도면이다. 보다 상세하게는, 동영상 디스플레이 장치(1510)는 동영상 재생 모드가 수평 디스플레이 모드인 경우, 회전 정보를 나타내는 아이콘(1520)을 디스플레이 할 수 있다.
도 15를 참조하면, 회전 정보를 나타내는 아이콘(1520)은 내츄럴 디스플레이 모드에서 재생되는 화면을 디스플레이 하는 것을 포함할 수 있다. 도 15를 참조하면, 회전 정보를 나타내는 아이콘(1520)은 동영상 디스플레이 장치(1510)의 우측 아래에 직사각형 형태로 디스플레이될 수 있다. 또한, 회전 정보를 나타내는 아이콘(1520)은 내츄럴 디스플레이 모드인 경우에 재생되는 화면뿐만이 아니라, 전체 프레임들에 대한 해당 프레임의 순서를 나타내는 아이콘(미도시)을 포함할 수도 있다. 이를 통해, 유저는 수평 디스플레이 모드에서 안정된 상태로 동영상을 감상하는 동시에 실제 촬영 당시의 생동감을 느낄 수 있다.
도 16은 본 발명에 따른 동영상 디스플레이 장치를 나타내는 블럭도이다. 도 16에 도시된 바와 같이, 본 발명의 일 실시예에 따른 동영상 디스플레이 장치(1600)는 커뮤니케이션 유닛(1610), 디스플레이 유닛(1620), 프로세서(1630), 센서 유닛(1640) 및 메모리(1650)를 포함할 수 있다.
먼저, 커뮤니케이션 유닛(1610)은 외부 장치(미도시)와 다양한 프로토콜을 사용하여 통신을 수행하여 데이터를 송/수신할 수 있다. 여기에서, 외부 장치(미도시)는 도 1에 도시된 HMD를 포함할 수 있다. 또한, 커뮤니케이션 유닛(1610)은 유선 또는 무선으로 외부 장치(미도시)와 접속하여, 컨텐츠 등의 디지털 데이터를 송/수신할 수 있다. 또한, 커뮤니케이션 유닛(1610)은 외부 디바이스에 대하여 이미지, 음성 등을 송수신할 수도 있다. 커뮤니케이션 유닛(1610)은 유선 네트워크와의 접속을 위해, 예를 들어 이더넷(Ethernet) 단자 등을 구비할 수 있다. 또한, 커뮤니케이션 유닛(1610)은 무선 네트워크와의 접속을 위해, 예를 들어, WLAN(Wireless LAN)(Wi-Fi), Wibro(Wireless broadband), Wimax(World Interoperability for Microwave Access), HSDPA(High Speed Downlink Packet Access) 통신 규격 등을 이용할 수 있다
디스플레이 유닛(1620)은 디스플레이 화면에 이미지를 출력한다. 보다 상세하게는, 디스플레이 유닛(1620)은 프로세서(1630)의 제어 명령에 기초하여 동영상을 출력할 수 있다. 보다 상세하게는, 디스플레이 유닛(1620)은 커뮤니케이션 유닛(1610)을 통해 획득된 동영상을, 프로세서(1630)의 제어 명령에 기초하여 내츄럴 디스플레이 모드 또는 수평 디스플레이 모드로 디스플레이할 수 있다.
프로세서(1630)는 다양한 컨텐츠 및 어플리케이션을 실행하고, 디스플레이 장치(1600) 내부의 데이터를 프로세싱 할 수 있다. 도 16을 참조하면, 프로세서(1630)는 커뮤니케이션 유닛(1610)을 통해 획득된 동영상에 동영상 재생 모드를 설정할 수 있다. 보다 상세하게는, 먼저, 프로세서(1630)는 외부 장치가 부호화(incoding)하여 제공한 동영상을 복호화(decoding)한다. 또한, 프로세서(1630)는 도 4에서 상술한 바와 같이, 복호화된 동영상을 그대로 디스플레이 하는 내츄럴 디스플레이 모드를 설정할 수 있다. 또한, 프로세서(1630)는 도 5 내지 도 11에서 상술한 바와 같이, 복호화된 동영상을 회전 보상, 크롭, 리사이즈하여 디스플레이 하는 수평 디스플레이 모드를 설정할 수 있다.
또한, 프로세서(1630)는 도 12에서 상술한 바와 같이, 유저 인풋에 의한 매뉴얼 모드 또는 기 설정된 자동 모드에 의해 동영상 재생 모드를 설정하는 재생 모드 설정 인터페이스를 제공할 수 있다. 또한, 프로세서(1630)는 도 13에서 상술한 바와 같이, 동영상 디스플레이 중에, 유저 인풋을 디텍트하는 경우, 동영상 재생 모드를 재설정하는 재생 모드 재설정 인터페이스를 제공할 수 있다. 또한, 프로세서(1630)는 도 13에서 상술한 바와 같이, 동영상 디스플레이 중에, 기 설정된 각도를 초과하는 프레임들이 기 설정된 시간 동안 지속되어 디스플레이되는 경우, 동영상 재생 모드를 재설정하는 재생 모드 재설정 인터페이스를 제공할 수 있다. 한편, 프로세서(130)는 도 14 및 도 15에서 상술한 바와 같이, 동영상의 복수의 프레임들의 회전 정보를 나타내는 아이콘을 디스플레이하도록 설정할 수 있다. 또한, 프로세서(1630)에서 수행되는 동작과 관련하여, 도 17 내지 도 21에서 자세하게 설명하도록 한다.
센서 유닛(1640)은 디스플레이 장치(1600)에 대한 유저의 다양한 입력 및 유저의 환경을 센싱할 수 있다. 센서 유닛(1640)은 복수의 센싱 수단을 포함할 수 있다. 센싱 수단은, 터치 센서, 오디오 센서, 비디오 센서, GPS(Global Positioning System) 센서, 압력 센서, 온도 센서, 중력(gravity) 센서, 지자기 센서, 모션 센서, 자이로 센서, 가속도 센서, 적외선 센서, 기울임(inclination) 센서, 밝기 센서, 고도 센서, 후각 센서, 뎁스(depth) 센서, 밴딩 센서, 촬상 센서 등을 포함한 다양한 센싱 수단을 통칭하는 것으로, 사용자의 다양한 입력 및 사용자의 환경을 센싱할 수 있다. 한편, 도 12 및 도 13에서의 유저 인풋은 센서 유닛(1640)에 의해 센싱될 수 있다. 즉, 센서 유닛(1640)은 유저 인풋을 센싱하고, 이를 프로세서(1630)에 전달하여, 동영상 재생 모드를 설정 또는 재설정하게 할 수 있다.
메모리(1650)는 EEPROM(Electrically Erasable Programmable Read-Only Memory) 등으로서 구현될 수 있으며, 이외에도 데이터를 저장 또는 임시 저장하는 모든 스토리지 유닛을 포함할 수 있다. 프로세서(1630) 내의 각 신호 처리 및 제어를 위한 프로그램을 저장하거나, 신호 처리된 영상, 음성 또는 데이터 신호를 저장할 수도 있다. 또한, 메모리(1650)는 커뮤니케이션 유닛(1610) 또는 센서 유닛(1640)으로부터 입력되는 영상, 음성, 또는 데이터 신호의 임시 저장을 위한 기능을 수행할 수도 있다. 나아가, 메모리(1650)는 커뮤니케이션 유닛(1610) 또는 센서 유닛(1640)으로부터 입력되는 애플리케이션 또는 애플리케이션 목록을 저장할 수도 있다.
도 17은 본 발명에 따른 동영상 디스플레이 방법을 나타내는 순서도이다. 이하 설명하는 도 17의 각 단계는 도 16에 도시된 디스플레이 장치(1600)의 프로세서(1630)에 의해 제어될 수 있다.
먼저, 동영상 디스플레이 장치는 회전 정보를 포함하는 동영상을 획득할 수 있다(S1710). 이와 관련하여, 동영상 디스플레이 장치는 외부 장치가 촬영한 동영상을 획득하거나, 동영상 디스플레이 장치가 직접 촬영한 동영상을 획득할 수 있다.
동영상 디스플레이 장치는 동영상 재생 모드를 설정할 수 있다(S1720). 동영상 재생 모드는 도 4에서 상술한 내츄럴 디스플레이 모드 또는 도 5 내지 도 11에서 상술한 수평 디스플레이 모드를 포함할 수 있다. 동영상 디스플레이 장치는, 설정된 동영상 재생 모드에 기초하여, 동영상을 디스플레이 할 수 있다(S1730). 내츄럴 디스플레이 모드는 획득된 동영상을 회전 보상 없이 디스플레이 할 수 있다. 수평 디스플레이 모드는 회전 정보를 기초로 회전 보상한 동영상을 디스플레이 할 수 있다. 일 예로서, 수평 디스플레이 모드에서 동영상의 프레임을 회전 정보를 기초로 회전 보상하고, 동영상의 프레임을 하나의 사이즈로 크로핑하여 디스플레이 할 수 있다.
도 18 은 본 발명에 따른 동영상 디스플레이 방법을 나타내는 순서도이다. 이하 설명하는 도 18의 각 단계는 도 16에 도시된 디스플레이 장치(1600)의 프로세서(1630)에 의해 제어될 수 있다. 도 18의 실시예에서, 전술한 도 17의 실시예와 동일하거나 상응하는 부분은 자세한 설명을 생략하도록 한다.
먼저, 동영상 디스플레이 장치는 회전 정보를 포함하는 동영상을 획득할 수 있다(S1810). 다음으로, 동영상 디스플레이 장치는 유저 인풋에 의한 수동 모드로 동영상 재생 모드를 선택할 것인지 결정할 수 있다(S1820). 보다 상세하게는, 도 12에서 상술한 바와 같이, 동영상 디스플레이 장치는 동영상 재생 모드를 유저 인풋에 의한 수동 모드 또는 기 설정된 자동 모드에 의해 설정하기 위한 동영상 재생 모드 설정 인터페이스를 제공할 수 있다.
S1820 단계에서, 동영상 디스플레이 장치가 수동 모드로 설정된 경우, 동영상 디스플레이 장치는 수평 디스플레이 모드로 설정할 것인지 결정하기 위한 동영상 재생 모드 설정 인터페이스를 제공할 수 있다(S1830). 동영상 재생 모드 설정 인터페이스는 도 14에서 상술한 방법에 의해 제공될 수 있다. S1830 단계에서, 수평 디스플레이 모드로 설정된 경우, 동영상 디스플레이 장치는 수평 디스플레이 모드로 동영상을 디스플레이 할 수 있다(S1840). 수평 디스플레이 모드로 동영상을 디스플레이 하는 동작과 관련하여, 도 19를 참조하여 설명하도록 한다. 도 19를 참조하면, 수평 디스플레이 모드로 설정된 경우, 동영상 디스플레이 장치는 동영상의 복수의 프레임들 각각을 회전 정보에 기초하여 회전 보상할 수 있다(S1910). 보다 상세하게는, 동영상 디스플레이 장치는 획득된 동영상 데이터를 디코딩하여 재생할 프레임들을 획득할 수 있다. 그리고 동영상 디스플레이 장치는 각각의 프레임들에 대한 회전 각도 정보에 기초하여, 프레임들을 회전 보상할 수 있다. 또한, S1910 단계는 도 3 내지 도 9와 관련하여 상술한 방법을 사용하여 수행될 수 있다.
회전 보상된 프레임들에 대하여, 동영상 디스플레이 장치는 복수의 프레임을 하나의 사이즈로 크로핑할 수 있다(S1920). 보다 상세하게는, S1920 단계는 도 5 또는 도 11에서 상술한 방법에 의해 이루어질 수 있다. 여기에서, 크로핑 사이즈는 동영상의 복수의 프레임들 중 회전 보상에 따른 크롭 영역이 실질적으로 최소가 되는 프레임에 기초하여 결정될 수 있다. 또한, 크롭 영역이 실질적으로 최소가 되는 프레임은, 회전 정보에 기초하여, 수평 디스플레이를 위해 크롭되는 영역이 실질적으로 최대가 되는 프레임에 해당될 수 있다.
또한, 동영상 디스플레이 장치는 크롭된 프레임들을 병합하여 디스플레이 할 수 있다(S1930). 보다 상세하게는, 동영상 디스플레이 장치는 크롭된 프레임 각각을 촬영된 동영상의 프레임의 크기에 맞게 리사이징하고, 리사이징된 프레임들을 병합하여 디스플레이 할 수 있다. 또한, S1930 단계는 도 7 또는 도 11에 상술한 방법에 의해 이루어질 수 있다.
한편, S1820 단계에서, 동영상 재생 모드를 수동 모드로 설정하지 않는 것으로 결정한 경우, 동영상 디스플레이 장치는 자동 재생 모드로 설정된다(S1850). 동영상 디스플레이 장치가 자동 재생 모드로 설정된 경우, 동영상 디스플레이 장치는 촬영된 동영상의 복수의 프레임들의 최대 회전 각도가 기 설정된 각도와 동일하거나 초과하는지 결정할 수 있다(S1860). 복수의 프레임들의 회전 각도 중 최대 회전 각도가 기 설정된 각도와 같거나 초과하는 경우, 동영상 디스플레이 장치는 수평 디스플레이 모드로 설정될 수 있다(S1870). 수평 디스플레이 모드로 설정되는 경우, 동영상 디스플레이 장치는 수평 디스플레이 모드로 동영상을 디스플레이할 수 있다(S1840). S1840과 관련하여, 도 19에서 상술한 방법에 의해 수행될 수 있다.
한편, S1860 단계에서, 복수의 프레임들의 최대 회전 각도가 기 설정된 각도를 초과하지 않는 경우, 동영상 디스플레이 장치는 내츄럴 디스플레이 모드로 설정될 수 있다(S1880). 따라서, 동영상 디스플레이 장치는 촬영된 동영상을 회전 보상 없이 내츄럴 디스플레이 모드로 디스플레이 할 수 있다(S1890). 또한, S1830 단계에서, 유저의 인풋에 의해 수평 디스플레이 모드로 설정하지 않는 것으로 결정하는 경우, 동영상 디스플레이 장치는 내츄럴 디스플레이 모드로 설정될 수 있다(S1880). 이 경우, 상술한 바와 같이, 동영상 디스플레이 장치는 촬영된 동영상을 회전 보상 없이 내츄럴 디스플레이 모드로 디스플레이 할 수 있다(S1890).
도 20은 본 발명에 따른 동영상 디스플레이 방법을 나타내는 순서도이다. 이하 설명하는 도 20의 각 단계는 도 16에 도시된 디스플레이 장치(100)의 프로세서(1630)에 의해 제어될 수 있다. 또한, 도 19는 동영상 재생 중에 유저 인풋에 의해, 동영상 재생 모드를 재설정하는 방법을 나타내는 순서도이다.
먼저, 동영상 디스플레이 장치는 설정된 동영상 재생 모드에 의해 동영상을 디스플레이한다(S2010). 즉, 동영상 디스플레이 장치는 초기에 설정된 동영상 재생 모드에 따라, 내츄럴 디스플레이 모드 또는 수평 디스플레이 모드로 동영상을 재생할 수 있다.
동영상 재생 중에, 동영상 디스플레이 장치는 유저 인풋을 수신할 수 있다(S2020). 유저 인풋은 제스쳐 또는 음성을 포함할 수 있다. 일 예로서, 동영상 디스플레이 장치는, 내츄럴 디스플레이 모드로 재생 중에, 동영상의 회전 각도의 큰 변화로 인해, 수평 디스플레이 모드로 재생을 원하는 유저로부터 유저 인풋을 수신할 수 있다. 다른 일 예로서, 동영상 디스플레이 장치는, 수평 디스플레이 모드로 재생 중에, 보다 생동감 있는 동영상을 시청하기 원하는 유저로부터 유저 인풋을 수신할 수 있다. 여기에서, 유저 인풋은 도 16에 도시된 센서 유닛(1640)에 의해 센싱될 수 있다.
유저 인풋에 의해, 동영상 디스플레이 장치는 동영상 재생 모드가 재설정될 수 있다(S2030). 보다 상세하게는, 기존에 설정된 내츄럴 디스플레이 모드를 변경하기 원하는 유저의 인풋에 의해, 동영상 디스플레이 장치는 내츄럴 디스플레이 모드를 수평 디스플레이 모드로 재설정될 수 있다. 또한, 기존에 설정된 수평 디스플레이 모드를 변경하기 원하는 유저의 인풋에 의해, 동영상 디스플레이 장치는 수평 디스플레이 모드를 내츄럴 디스플레이 모드로 재설정될 수 있다.
재설정된 동영상 재생 모드에 의해, 동영상 디스플레이 장치는 동영상을 디스플레이할 수 있다(S2040). 일 예로서, 동영상 디스플레이 장치는 재설정된 시점 이후의 프레임들에 대하여 동영상 재생 모드를 재설정하여 디스플레이 할 수 있다. 다른 일 예로서, 동영상 디스플레이 장치는 재설정된 시점과 관계없이, 동영상 전체에 대하여 동영상 재생 모드를 재설정하여 디스플레이 할 수 있다.
도 21은 본 발명에 따른 동영상 디스플레이 방법을 나타내는 순서도이다. 이하 설명하는 도 21의 각 단계는 도 16에 도시된 디스플레이 장치(1600)의 프로세서(1630)에 의해 제어될 수 있다. 또한, 도 21은 동영상 재생 중에 기 설정된 자동 모드에 의해, 동영상 재생 모드를 재설정하는 방법을 나타내는 순서도이다. 도 21의 실시예에서, 전술한 도 20의 실시예와 동일하거나 상응하는 부분은 자세한 설명을 생략하도록 한다.
먼저, 동영상 디스플레이 장치는 설정된 동영상 재생 모드에 의해 동영상을 디스플레이한다(S2110). 즉, 동영상 디스플레이 장치는 초기에 설정된 동영상 재생 모드에 따라, 내츄럴 디스플레이 모드 또는 수평 디스플레이 모드로 동영상을 재생할 수 있다.
동영상 재생 중에, 동영상 디스플레이 장치는 기 설정 각도를 초과한 프레임이 기 설정 시간을 초과하여 지속되는지 판단할 수 있다(S2120). 기 설정 각도를 초과한 프레임이 기 설정 시간을 초과하지 않고 재생된 것으로 판단한 경우, 동영상 디스플레이 장치는, 계속하여 기존 동영상 재생 모드로 동영상을 디스플레이 할 수 있다(S2125). 일 예로서, 내츄럴 디스플레이 모드로 재생 중에, 기 설정 각도를 초과한 프레임이 기 설정 시간을 초과하지 않고 재생된 경우, 동영상 디스플레이 장치는 계속하여 내츄럴 디스플레이 모드로 재생할 수 있다. 한편, 동영상 디스플레이 장치는 상술한 실시예 이외에도 동영상 재생 모드를 자동으로 재설정하는 다른 실시예를 포함할 수 있다.
한편, S2120 단계에서 기 설정 각도를 초과한 프레임이 기 설정 시간을 초과하여 지속되는 것으로 판단한 경우, 동영상 디스플레이 장치는, 기존 동영상 재생 모드를 재설정할 수 있다(S2130). 일 예로서, 동영상 디스플레이 장치는, 내츄럴 디스플레이 모드로 재생 중에, 기 설정 각도를 초과한 프레임이 기 설정 시간을 초과하여 재생된 것으로 판단한 경우, 내츄럴 디스플레이 모드에서 수평 디스플레이 모드로 재설정할 수 있다.
동영상 디스플레이 장치는 재설정된 재생 모드에 기초하여, 동영상을 디스플레이 할 수 있다(S2140).
나아가, 설명의 편의를 위하여 각 도면을 나누어 설명하였으나, 각 도면에 서술되어 있는 실시예들을 병합하여 새로운 실시예를 구현하도록 설계하는 것도 가능하다. 그리고, 당업자의 필요에 따라, 이전에 설명된 실시예들을 실행하기 위한 프로그램이 기록되어 있는 컴퓨터에서 판독 가능한 기록 매체를 설계하는 것도 본 발명의 권리범위에 속한다..
본 발명에 따른 동영상 디스플레이 장치 및 그 디스플레이 방법은 상기한 바와 같이 설명된 실시예들의 구성과 방법이 한정되게 적용될 수 있는 것이 아니라, 상기 실시예들은 다양한 변형이 이루어질 수 있도록 각 실시 예들의 전부 또는 일부가 선택적으로 조합되어 구성될 수도 있다.
한편, 본 발명의 동영상 디스플레이 방법은 네트워크 디바이스에 구비된 프로세서가 읽을 수 있는 기록매체에 프로세서가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 프로세서가 읽을 수 있는 기록매체는 프로세서에 의해 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 프로세서가 읽을 수 있는 기록 매체의 예로는 ROM, RAM, 자기 테이프, 플로피디스크, 광 데이터 저장 장치 등이 있으며, 또한, 인터넷을 통한 전송 등과 같은 캐리어 웨이브의 형태로 구현되는 것도 포함한다. 또한, 프로세서가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 프로세서가 읽을 수 있는 코드가 저장되고 실행될 수 있다.
또한, 이상에서는 본 발명의 바람직한 실시예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형 실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해돼서는 안될 것이다.
그리고 당해 명세서에서는 물건 발명과 방법 발명이 모두 설명되고 있으며, 필요에 따라 양 발명의 설명은 보충적으로 적용될 수 있다.
110: 디스플레이 장치
120: 외부 장치
130: 유저
1600: 동영상 디스플레이 장치
1610: 커뮤니케이션 유닛
1620: 디스플레이 유닛
1630: 프로세서
1640: 센서 유닛
1650: 메모리

Claims (20)

  1. 촬영된 동영상을 디스플레이 하는 동영상 디스플레이 장치에 있어서,
    회전 정보를 포함하는 동영상을 획득하는 커뮤니케이션 유닛;
    상기 동영상을 디스플레이 하는 디스플레이 유닛; 및
    동영상 재생 모드를 설정하는 프로세서를 포함하고,
    상기 동영상 재생 모드는 상기 획득된 동영상을 상기 회전 정보를 기초로 한 회전 보상없이 디스플레이 하는 내츄럴 디스플레이 모드 및 상기 동영상에 포함된 상기 회전 정보를 기초로 회전 보상된 동영상을 디스플레이 하는 수평 디스플레이 모드를 포함하고,
    상기 동영상 재생 모드가 상기 수평 디스플레이 모드인 경우, 상기 동영상의 연속된 복수의 프레임들을 상기 회전 정보를 기초로 회전 보상하고, 상기 동영상의 상기 연속된 복수의 프레임들을 하나의 사이즈로 크로핑하여 디스플레이하고,
    상기 크로핑 사이즈는 상기 동영상의 연속된 복수의 프레임들의 상기 회전 정보에 기초하여 상기 동영상의 복수의 프레임들 중 크롭 영역(crop area)이 최소가 되는 프레임에 기초하여 결정되며,
    상기 크롭 영역은 상기 동영상의 복수의 프레임들의 종횡비에 기초하여 결정되는, 동영상 디스플레이 장치.
  2. 제 1 항에 있어서,
    상기 회전 정보는
    상기 동영상의 복수의 프레임들의 수평 상태에 대한 회전 각도를 나타내는 회전 각도 정보를 포함하는, 동영상 디스플레이 장치.
  3. 제 2 항에 있어서,
    상기 프로세서의 회전 보상은
    상기 회전 각도 정보에 기초하여, 동영상의 상기 연속된 복수의 프레임들을 상기 회전 각도의 크기만큼 상기 회전 각도의 방향의 반대 방향으로 회전하는 것을 포함하는, 동영상 디스플레이 장치.
  4. 제 1 항에 있어서,
    상기 프로세서는
    상기 동영상 디스플레이 중에, 유저 인풋을 디텍트하는 경우, 상기 설정된 동영상 재생 모드를 재설정하는 재생 모드 재설정 인터페이스를 제공하는 것을 더 포함하는, 동영상 디스플레이 장치.
  5. 제 1 항에 있어서,
    상기 프로세서는
    상기 동영상 디스플레이 중에, 기 설정된 각도를 초과하는 프레임이 기 설정된 시간동안 지속되어 디스플레이되는 경우, 상기 동영상 재생 모드를 재설정하는 재생 모드 재설정 인터페이스를 제공하는 것을 더 포함하는, 동영상 디스플레이 장치.
  6. 제 1 항에 있어서,
    상기 크로핑 사이즈는 상기 동영상의 복수의 프레임들 중 크롭 영역이 최소인 적어도 하나의 프레임을 제외하고, 나머지 프레임들 중 상기 회전 보상에 따른 크롭 영역이 최소가 되는 프레임에 기초하여 결정되는, 동영상 디스플레이 장치.
  7. 제 1 항에 있어서,
    상기 프로세서는
    유저 인풋에 의한 매뉴얼 모드 또는 기 설정된 자동 모드에 의해, 상기 동영상 재생 모드를 설정하는 재생 모드 설정 인터페이스를 제공하는 것을 포함하는, 동영상 디스플레이 장치.
  8. 제 7 항에 있어서,
    상기 기 설정된 자동 모드에 의해 상기 동영상 재생 모드가 설정된 경우, 상기 동영상의 복수의 프레임들 중 최대 회전 각도를 갖는 프레임의 회전 각도가 기 설정된 각도를 초과하는 경우, 상기 수평 디스플레이 모드로 상기 동영상을 재생하고, 상기 동영상의 복수의 프레임들 중 최대 회전 각도를 갖는 프레임의 회전 각도가 기 설정된 각도를 초과하지 않는 경우, 상기 내츄럴 디스플레이 모드로 상기 동영상을 재생하는, 동영상 디스플레이 장치.
  9. 제 1 항에 있어서,
    상기 회전 정보는
    상기 동영상의 복수의 프레임들의 회전 각도 변화에 대한 정보를 포함하는, 동영상 디스플레이 장치.
  10. 제 1 항에 있어서,
    상기 프로세서는
    상기 동영상의 복수의 프레임들 중 상기 동영상 재생 모드가 설정된 시점 이후의 프레임들에 대하여, 상기 설정된 동영상 재생 모드에 기초하여 상기 동영상을 디스플레이하는 것을 포함하는, 동영상 디스플레이 장치.
  11. 삭제
  12. 삭제
  13. 삭제
  14. 삭제
  15. 삭제
  16. 삭제
  17. 삭제
  18. 삭제
  19. 삭제
  20. 삭제
KR1020120130962A 2012-11-19 2012-11-19 동영상 디스플레이 장치 및 그 방법 KR101978214B1 (ko)

Priority Applications (5)

Application Number Priority Date Filing Date Title
KR1020120130962A KR101978214B1 (ko) 2012-11-19 2012-11-19 동영상 디스플레이 장치 및 그 방법
US13/721,767 US9462218B2 (en) 2012-11-19 2012-12-20 Video display device and method of displaying video
CN201380060347.9A CN104813220B (zh) 2012-11-19 2013-08-27 视频显示装置和显示视频的方法
PCT/KR2013/007673 WO2014077497A1 (en) 2012-11-19 2013-08-27 Video display device and method of displaying video
EP13855990.1A EP2920638B1 (en) 2012-11-19 2013-08-27 Video display system and method of displaying video

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020120130962A KR101978214B1 (ko) 2012-11-19 2012-11-19 동영상 디스플레이 장치 및 그 방법

Publications (2)

Publication Number Publication Date
KR20140064058A KR20140064058A (ko) 2014-05-28
KR101978214B1 true KR101978214B1 (ko) 2019-05-14

Family

ID=50728043

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120130962A KR101978214B1 (ko) 2012-11-19 2012-11-19 동영상 디스플레이 장치 및 그 방법

Country Status (5)

Country Link
US (1) US9462218B2 (ko)
EP (1) EP2920638B1 (ko)
KR (1) KR101978214B1 (ko)
CN (1) CN104813220B (ko)
WO (1) WO2014077497A1 (ko)

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9762848B2 (en) * 2013-03-15 2017-09-12 Google Inc. Automatic adjustment of video orientation
US9491365B2 (en) * 2013-11-18 2016-11-08 Intel Corporation Viewfinder wearable, at least in part, by human operator
US20150244938A1 (en) * 2014-02-25 2015-08-27 Stelios Petrakis Techniques for electronically adjusting video recording orientation
US9648062B2 (en) * 2014-06-12 2017-05-09 Apple Inc. Systems and methods for multitasking on an electronic device with a touch-sensitive display
JP6518069B2 (ja) * 2015-01-09 2019-05-22 キヤノン株式会社 表示装置、撮像システム、表示装置の制御方法、プログラム、及び記録媒体
US11269580B2 (en) * 2017-02-13 2022-03-08 Comcast Cable Communications, Llc Guided collaborative viewing of navigable image content
CN107027041B (zh) * 2017-04-18 2019-12-27 深圳市智能现实科技有限公司 场景展示方法及装置
TWI633465B (zh) * 2017-11-21 2018-08-21 瑞軒科技股份有限公司 虛擬實境裝置及虛擬實境裝置的操作方法
US11966578B2 (en) 2018-06-03 2024-04-23 Apple Inc. Devices and methods for integrating video with user interface navigation
JP7313865B2 (ja) * 2019-03-29 2023-07-25 キヤノン株式会社 撮像装置及び制御方法
CN110225401B (zh) * 2019-07-12 2022-04-29 青岛一舍科技有限公司 一种可调整视角的视频播放方法及装置
CN112565625A (zh) * 2019-09-26 2021-03-26 北京小米移动软件有限公司 视频处理方法、装置及介质
CN113079410B (zh) * 2020-01-03 2023-05-23 三星电子株式会社 显示装置及其控制方法
CN111669638B (zh) * 2020-02-28 2022-07-15 海信视像科技股份有限公司 一种视频旋转播放方法及显示设备
CN112839255B (zh) * 2020-12-31 2021-11-02 北京达佳互联信息技术有限公司 视频播放方法、装置、电子设备及计算机可读存储介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006086870A (ja) * 2004-09-16 2006-03-30 Canon Inc 動画像再生装置
US20120033100A1 (en) * 2009-04-20 2012-02-09 Kyocera Corporation Image capturing device and image capturing method

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6563535B1 (en) * 1998-05-19 2003-05-13 Flashpoint Technology, Inc. Image processing system for high performance digital imaging devices
GB0208654D0 (en) 2002-04-16 2002-05-29 Koninkl Philips Electronics Nv Image processing for video or photographic equipment
US7324137B2 (en) 2004-01-29 2008-01-29 Naomichi Akizuki System for automatically generating continuous developed still image from video image of inner wall of tubular object
JP2005317062A (ja) * 2004-04-27 2005-11-10 Sanyo Electric Co Ltd 光ディスク再生装置
US7386190B2 (en) 2004-04-30 2008-06-10 Corel Tw Corp. Method for image cropping
EP1768387B1 (en) 2005-09-22 2014-11-05 Samsung Electronics Co., Ltd. Image capturing apparatus with image compensation and method therefor
KR100686310B1 (ko) 2005-12-29 2007-02-22 엠텍비젼 주식회사 이미지 기울임 보정 방법, 프로세서 및 이를 위한프로그램이 기록된 기록매체
US20070201833A1 (en) * 2006-02-17 2007-08-30 Apple Inc. Interface for defining aperture
JP4926533B2 (ja) * 2006-05-02 2012-05-09 キヤノン株式会社 動画像処理装置、動画像処理方法及びプログラム
US20090040308A1 (en) 2007-01-15 2009-02-12 Igor Temovskiy Image orientation correction method and system
ES2523667T3 (es) * 2007-06-29 2014-11-28 Dsm Ip Assets B.V. Uso de ácido benzoico y timol, eugenol y piperidina en la alimentación animal
CN101374198A (zh) * 2007-08-24 2009-02-25 鸿富锦精密工业（深圳）有限公司 摄像装置及其影像自动正立方法
JP4582185B2 (ja) * 2008-04-22 2010-11-17 ソニー株式会社 情報処理装置及び情報処理方法
JP5487722B2 (ja) 2009-05-25 2014-05-07 ソニー株式会社 撮像装置と振れ補正方法
TW201230805A (en) 2011-01-04 2012-07-16 Aptos Technology Inc Video playback apparatus and method
US8611015B2 (en) * 2011-11-22 2013-12-17 Google Inc. User interface
US8737821B2 (en) * 2012-05-31 2014-05-27 Eric Qing Li Automatic triggering of a zoomed-in scroll bar for a media program based on user input

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006086870A (ja) * 2004-09-16 2006-03-30 Canon Inc 動画像再生装置
US20120033100A1 (en) * 2009-04-20 2012-02-09 Kyocera Corporation Image capturing device and image capturing method

Also Published As

Publication number Publication date
KR20140064058A (ko) 2014-05-28
EP2920638A1 (en) 2015-09-23
EP2920638A4 (en) 2016-07-27
US20140140677A1 (en) 2014-05-22
CN104813220A (zh) 2015-07-29
EP2920638B1 (en) 2019-04-10
US9462218B2 (en) 2016-10-04
WO2014077497A1 (en) 2014-05-22
CN104813220B (zh) 2018-07-06

Similar Documents

Publication Publication Date Title
KR101978214B1 (ko) 동영상 디스플레이 장치 및 그 방법
KR102415637B1 (ko) 전자기기 및 그 제어 방법
US10404915B1 (en) Method and system for panoramic video image stabilization
TW201617717A (zh) 用於穩定及重定框架之方法及系統
JP7248304B2 (ja) 画像表示方法、電子デバイス、コンピュータ可読記憶媒体及びコンピュータプログラム
US20170064289A1 (en) System and method for capturing and displaying images
US11902660B2 (en) Image processing device, image processing method, and program
US12081869B2 (en) Systems and methods for stabilizing videos
KR102138520B1 (ko) 헤드 마운트 디스플레이 및 제어 방법
US20230412788A1 (en) Systems and methods for stabilizing views of videos
KR102477993B1 (ko) 표시 제어장치, 촬상 장치, 제어 방법 및 컴퓨터 판독 가능한 매체
EP3917130A1 (en) Information processing device, information processing method, and program
JP2021145297A (ja) 表示制御装置及びその制御方法
JP6312426B2 (ja) 撮像装置およびその制御方法
JP2021144599A (ja) 電子機器及びその制御方法
JP2020095436A (ja) 電子機器及びその制御方法
JP2021069045A (ja) 表示制御装置、表示制御方法、プログラムおよび記憶媒体
JP6327832B2 (ja) 撮影装置、撮影方法及びプログラム
US20240040249A1 (en) Systems and methods for dynamically stabilizing videos
CN112997508B (zh) 视频处理方法、装置、控制终端、系统及存储介质
JP7443100B2 (ja) 電子機器、電子機器の制御方法、プログラムおよび記憶媒体
JP6679784B2 (ja) 画像処理装置及び画像処理方法
JP2007208596A (ja) データ再生機器、データ再生方法およびプログラム
JP2023136245A (ja) 撮像装置およびその制御方法
JP2009200792A (ja) 電子カメラ

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant